蝈蝈

1 删除集群中的logs目录中的所有文件首先停止Kafka集群然后删除logs目录中的所有文件cd /opt/module/kafka/logsrm -rf *2 登录ZK删除除zookeeper之外的其他所有节点bin/zkCli.sh -server hadoop101:2181ls /deleteall /admindeleteall /brokersdeleteall /clusterdeleteall /configdeleteall /consumersdele

系统函数（ concat 、concat_ws 、collect_set 、STR_TO_MAP）1）concat 函数concat 函数在连接字符串的时候，只要其中一个是 NULL，那么将返回 NULLhive> select concat('a','b');abhive> select concat('a','b',null);NULL2）concat_ws 函数concat_ws函数在连接字符串的时候，只要有一个字符串不是NULL，就不会返回NULL。concat_ws

1 Hive整体调优mapreduce.input.fileinputformat.split.maxsize=750000000hive.cbo.enable=true 默认falsehive.orc.splits.include.file.footer=falsehive.merge.sparkfiles=false 默认truehive.merge.orcfile.stripe.level=truehive.auto.convert.join.noconditionaltask=true

1 CDH6.X HiveServer2 HA官方文档1.1 修改代理token的存储实现类修改为org.apache.hadoop.hive.thrift.DBTokenStore1.2 增加HiveServer2 实例1.3 在配置中搜索到 hive-site.xml 的 HiveServer2 高级配置代码段（安全阀）配置如下两项<!--默认为false，配置为true HiveServer2会动态分配客户端--><property><name>

1 Sqoop1.1 使用 import-all-tables将SqlServer的历史数据全量同步到HDFS/usr/bin/sqoop import-all-tables \--connect "jdbc:sqlserver://sqlserver的ip:1433;database=数据库名称" \--username '用户名' \--password '面膜' \--warehouse-dir "目录" \--autoreset-to-one-mapper --m 1 \--exc

1 Sqoop将业务数据SQLServer数据导入到HDFS时，出现如下错误Container [pid=19170,containerID=container_e43_1604046194386_1457_01_000004] is running 802816B beyond the ‘PHYSICAL’ memory limit. Current usage: 1.0 GB of 1 GB physical memory used; 2.5 GB of 2.1 GB virtual memory u

1 出现问题现象搭建Hive On Spark 模式，运行HQL时：出现如下错误：ExecutorLostFailure (executor 4 exited caused by one of the running tasks) Reason: Container killed by YARN for exceeding memory limits. 4.5 GB of 4.5 GB physical memory used. Consider boosting spark.yarn.executor

1 问题描述在项目中搭建Hive On Spark，在执行查询的数据量比较大时或者查询出来的数据再次插入到DWD层时，经常性的报如下两个错误：1 ERROR org.apache.parquet.hadoop.ParquetRecordReader: [aafa2e51-4efa-4437-9b07-86b8d55570f0 HiveServer2-Handler-Pool: Thread-47]: Can not initialize counter due to context is not a

1 CDH6.2.1 HiveOnSpark 报错解决错误1：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.hadoop.ipc.RemoteException Operation category READ is not supported in state standby. Visi

1 新建模型2 命名模型3 点击图标，选中模型4 导入数据库5 配置数据库连接6 选择要导入的表7 建立表关系第一步：点击选中主表(主键所在的表)第二步：点击连接按钮第三步：点击从表，配置连接条件第四步：效果展示...

步骤如下：1 安装maven依赖wget http://mirrors.hust.edu.cn/apache/maven/maven-3/3.1.1/binaries/apache-maven-3.1.1-bin.tar.gztar -zxvf apache-maven-3.1.1-bin.tar.gzvim apache-maven-3.1.1/conf/settings.xml添加加阿里云仓库 <!-- 阿里云仓库 --> <mirror>

apache-phoenix-5.0.0-HBase-2.0安装与简单使用HBase版本：hbase-2.0.5官网地址：https://hbase.apache.org/Phoenix版本：phoenix-5.0.0-HBase-2.0Phoenix官网地址：http://phoenix.apache.org/download.htmlPhoenix安装文档:http://phoenix.apache.org/installation.html注意：hbase的版本一定要与phoenix的版本

java多线程–奇偶数顺序打印Lock和Synchronized之间的区别synchronized 属于关键字针对同步代码块而言，它的底层是通过moniter对象的moniterenter和moniterexit来实现加锁和解锁；每个对象都有一个监视器monitor，当monitor被占用时就处于加锁状态，线程在执行monitorenter指令时就会尝试去获取monitor的执行权。 ...

在android6.0 以上如果想访问外置SDCARD，需要再申请如下权限：&lt;uses-permission android:name="android.permission.WRITE_MEDIA_STORAGE" /&gt;该权限在frameworks/base/data/etc/platform.xml 定义如下：    &lt;permission name="andro...

Setttings 默认开关的状态代码路径：frameworks\base\packages\SettingsProvider\res\values\defaults.xml 默认屏幕亮度        &lt;integer name="def_screen_brightness"&gt;100&lt;/integer&gt;自动亮度调节开关    &lt;bool name="...

1 在mobile_signal_group布局中增加&lt;TextViewandroid:id="@+id/carrier_text"android:layout_width="wrap_content"android:layout_height="wrap_content"android:layout_marginStart="@dimen/keyguard_carri...

3 信号格的获取MobileSignalController @Override public int getCurrentIconId() { if (mCurrentState.iconGroup == TelephonyIcons.CARRIER_NETWORK_CHANGE) { return SignalDrawable...

                               0  在Android中对移动数据操作的几个类和接口如下：1 TelephonyManager 类 主要提供了一系列用于访问与手机通讯相关的状态和信息的get方法。其中包括手机SIM的状态和信息、电信网络的状态及手机用户的信息，在应用程序中可以使用这些get方法获取相关数据  TelephonyManager类的对象可以通过...

1 hotseat位置：O版本有五个图标，Go版本有四个图标，它们之间的差别在哪？在InvariantDeviceProfile文件如下函数中 ArrayList&lt;InvariantDeviceProfile&gt; getPredefinedDeviceProfiles(Context context) { ArrayList&lt;InvariantDevi...

1 修改主界面 pageindicator、workspace、hotseat方面的调整   主要是在packages/apps/Launcher3/src/com/android/launcher3/DeviceProfile.java 如下函数中进行调整 public void layout(Launcher launcher, boolean notifyListeners)...