2019年01月_fengfengchen95

转载 git pull相关

同事在使用git pull代码时，经常会碰到有冲突的情况，提示如下信息：error: Your local changes to 'c/environ.c' would be overwritten by merge. Aborting.Please, commit your changes or stash them before you can merge.这个意思是说更新下来的...

2019-01-28 14:38:31 176

原创 IDEA设置终端Terminal窗口字体和大小

要设置idea里Terminal终端的字体，只需要设置Console Font即可，设置方法如下：1、打开属性对话框，选择Editor-->Color Scheme-->Console Font，在右侧面板修改Font为自己想要的字体，如下图：2、关闭Terminal终端重启开启，上面的设置对已经打开的终端窗口不会生效，需要重新打开，效果如下：...

2019-01-28 14:05:06 5320

原创（转）IDEA Termina解决中文转unicode问题

IDEA Terminal修改为git bash后控制台的中文字符会自动转换为unicode编码: 解决办法：修改git安装路径(这是我的git安装路径C:\Program Files (inst)\Git\etc)下bash.bashrc文件，在该文件最后添加：export LANG="zh_CN.UTF-8"export LC_ALL="zh_CN.UTF-8"最后在IDEA中...

2019-01-28 14:02:14 446

转载（转）MySQL的binlog日志

原文：https://www.cnblogs.com/martinzhang/p/3454358.html binlog 基本认识 MySQL的二进制日志可以说是MySQL最重要的日志了，它记录了所有的DDL和DML(除了数据查询语句)语句，以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。一般来说开启二进制日志大概会有1%的性能损耗...

2019-01-18 17:13:30 205

转载 Spark Streaming checkpoint概述

Spark Streaming揭秘checkpoint的使用https://www.cnblogs.com/jcchoiling/p/6513569.html今天谈下sparkstreaming中，另外一个至关重要的内容Checkpoint。首先，我们会看下checkpoint的使用。另外，会看下在应用程序重新启动时，是如何处理checkpoint的。Checkpoint保存什...

2019-01-17 18:12:52 183

转载（转）Flink Storm SparkSteaming各流计算框架对比

随着大数据时代的来临，大数据产品层出不穷。我们最近也对一款业内非常火的大数据产品 - Apache Flink做了调研，今天与大家分享一下。Apache Flink(以下简称flink) 是一个旨在提供‘一站式’ 的分布式开源数据处理框架。是不是听起来很像spark？没错，两者都希望提供一个统一功能的计算平台给用户。虽然目标非常类似，但是flink在实现上和spark存在着很大的区别，flink是...

2019-01-16 17:09:30 621 1

转载消息队列中点对点(RabbitMQ)与发布订阅区别(Kafka)

（转载）JMS一个在 Java标准化组织（JCP）内开发的标准（代号JSR 914）。2001年6月25日，Java消息服务发布JMS 1.0.2b，2002年3月18日Java消息服务发布 1.1.Java消息服务（Java Message Service，JMS）应用程序接口是一个Java平台中关于面向消息中间件（MOM）的API，用于在两个应用程序之间，或分布式系统中发送消息，进行异步通...

2019-01-16 10:36:55 3150 1

转载（转）Kafka分区与消费者的关系

1. 前言我们知道，生产者发送消息到主题，消费者订阅主题（以消费者组的名义订阅），而主题下是分区，消息是存储在分区中的，所以事实上生产者发送消息到分区，消费者则从分区读取消息，那么，这里问题来了，生产者将消息投递到哪个分区？消费者组中的消费者实例之间是怎么分配分区的呢？接下来，就围绕着这两个问题一探究竟。2. 主题的分区数设置在server.properties配置文件中可以指定一...

2019-01-16 10:15:40 177

转载（转）JAVA JDBC:ResultSet相关ResultSetMetaData详细

DatabaseMetaData 有关整个数据库的信息：表名、表的索引、数据库产品的名称和版本、数据库支持的操作。 ResultSet 关于某个表的信息或一个查询的结果。您必须逐行访问数据行，但是您可以任何顺序访问列。 ResultSetMetaData 有关 ResultSet 中列的名称和类型的信息。尽管每个对象都有大量的方法让您获得数据库元素的极为详细的信息，但在每个对象中都有几种主...

2019-01-15 13:49:38 1524

转载（转）java.sql包介绍

数据库连接包：实现JDBC的类库；DriverManager类此类用于装载驱动程序，它所有的成员都是静态成员，所以在程序中无须对它进行实例化，直接通过类名就可以访问它。 DriverManager类是JDBC的管理层，作用于用户和驱动程序间加载驱动程序 Class.forName(“公司名.数据库名.驱动程序名”) 如：Class.forName(“sun.jdbc.odbc.jdb...

2019-01-15 11:21:02 1848 1

原创 IDEA resource配置问题

程序开发过程中，将相关配置文件放在resources文件夹下，在此文件夹下又新建一子文件夹requestNoteDataCollectorConf,此文件夹下有个requestNote-collector.properties文件程序的调用使用：Thread.currentThread().getContextClassLoader().getResource("requestNoteD...

2019-01-14 10:32:49 10600 1

原创 IDEA+(Maven assembly)打jar包

IDEA+(Maven assembly) 打包使用Maven我们可以实现个性化的打包方式：实现步骤如下：1.在pom.xml文档中添加MAVEN Build的配置： <build> <pluginManagement><!-- lock down plugins versions to avoid using Maven defau...

2019-01-10 10:04:05 3958

转载（转）Maven中的库（repository）详解

2019-01-09 09:41:45 2025

转载（转）Spark中cache和persist

2019-01-08 10:26:32 172

转载转载：如何管理kafka偏移量（一）

转：https://cloud.tencent.com/developer/article/1122481 最近工作有点忙，所以更新文章频率低了点，在这里给大家说声抱歉，前面已经写过在spark streaming中管理offset，但当时只知道怎么用，并不是很了解为何要那样用，最近一段时间又抽空看了一个github开源程序自己管理offset的源码，基本已经理解透彻了，当然这里...

2019-01-08 09:33:31 1467

fengfengchen95的博客