沐淼的博客

变量替换默认是启动的    ：hive.variable.substitute= true。 如果这导致一个已经存在的脚本出现问题，使用 下列命令禁用： set hive.variable.substitute=false;

外部表： create external table if not exists stocks{ exchange STRING， } ROW FORMAT DELIMITED FIELDS TERMINATED BY "," LOCATION '/local/stocks' 关键字external 告诉hive 这个表示外部的，而后面的LOCATION ..

问题出现的原因是hadoop目录bin文件下缺少 winutils.exe 文件；查看源码：public static final String getQualifiedBinPath(String executable) throws IOException { String fullExeName = HADOOP_HOME_DIR + File.separator + "bi

1、join连接时的优化：当三个或多个以上的表进行join操作时，如果每个on使用相同的字段连接时只会产生一个mapreduce。 2、join连接时的优化：当多个表进行查询时，从左到右表的大小顺序应该是从小到大。原因：hive在对每行记录操作时会把其他表先缓存起来，直到扫描最后的表进行计算 3、在where字句中增加分区过滤器。 4、当可以使用left semi join 语法

hadoop配置