- 博客(6)
- 收藏
- 关注
RSS订阅原创 hive测试服务器分区表感悟
-- hive表 创建时间，所在hdfs目录 show create table <tablename>; -- hive表 更新时间 show table extended like <tablename>; 以下是，从公用服务器下载hive表为文件到本地，再上传至测试服务器的整个过程： 1、 首先去查看公用服务器的所建hive表放在哪个目录，然后将Hadoop的hi...
2018-04-28 16:44:05
236
原创 hive_sql优化
-- 优化时间计算导致的资源消耗 -- -- 优化hive性能:tez,spark,lmpala,mapreduce; 矢量化-- -- set hive.execution.engine = spark; -- set hive.vectorized.execution.enabled = true; -- set hive.vectorized.execution.reduce.enabl...
2018-04-25 17:32:15
276
原创 mysql小技巧_1
show PROCESSLIST ; SELECT now(); SELECT DATE_SUB(CURDATE(), INTERVAL 30 DAY); CREATE DATABASE qx_test; CREATE TABLE IF NOT EXISTS qx_test.test ( title VARCHAR(64) NOT NULL PRIMARY KEY ...
2018-04-19 00:30:22
158
原创 sql统计字段
SELECT activity_id, count(*) FROM activity_prize_lottery_record GROUP BY activity_id HAVING count(*) > 0 output: +--------------+----------+--+ | activity_id | _c1 | +--------------+--------...
2018-04-17 15:25:17
1457
原创 优化hive的性能配置
-- 优化hive性能:tez,spark,lmpala,mapreduce; 矢量化-- set hive.execution.engine = spark; set hive.vectorized.execution.enabled = true; set hive.vectorized.execution.reduce.enabled = true;
2018-04-17 10:19:37
379
原创 安装pytorch (win10)
conda install -c anaconda mkl conda install -c peterjc123 pytorch-cpu ##后续会有Windows官方的pytorch。
2018-04-08 19:41:48
245
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人