关注
分享
Z_Data
大学计算机专业老师一枚，高级开发工程师，专注大数据相关技术分享，实战项目开发。
展开
-
hive ---- hive常见查询语句练习（有一定难度的）
有一定难度的sql语句-- 1、查询"01"课程比"02"课程成绩高的学生的信息及课程分数 思路：关键步骤：select * from score l join score r on (l.s_id = r.s_id and l.c_id=2 and r.c_id=1); select a.* ,b.s_score as 01_score,c.s_sc...原创 2018-11-13 09:35:29 · 2093 阅读 · 0 评论 -
案例:使用hive与sqoop对网站指标进行分析
<网站分析数据可留言联系获取>需求分析： 首先对网站的日志进行分析，首先先分析两个指标就是pv 与uv 的分析，然后把分析出来的结果 导出到mysql 中进行保存 案例的实现： 首先需要把源数据加载到hive中，之后hive在对源数据创建临时表进行分析得出需要的指标最终把得到的结果通过sqoop导出到MySQL数据库 1 对于pv： 统计网页的浏览量2 U...原创 2018-11-14 09:35:18 · 361 阅读 · 0 评论 -
CentOS安装rpm安装MySQL时爆出警告
CentOS安装rpm安装MySQL时爆出警告：warning: MySQL-server-5.5.47-1.linux2.6.x86_64.rpm: Header V3 DSA/SHA1 Signature, key ID 5072e1f5: NOKEY原因：这是由于yum安装了旧版本的GPG keys造成的解决办法：后面加上 --force --nodepsrpm -ivh ...原创 2018-11-12 15:08:11 · 504 阅读 · 0 评论 -
Hive -------- 使用mysql保存hive元数据，Mysql的安装以及配置步骤
3.8 虚拟列虚拟列本身是一个不存在列，在数据查询的时候，可以通过虚拟列去查询数据的的路径，以及数据的偏移量，这两个内容都是hive中为用户提供的虚拟列进行的查询虚拟列存在两种：INPUT__FILE__NAME 代表数据的文件保存路径范例： 通过查询虚拟列得到文件保存路径select ename ,INPUT__FILE__NAME from emp;SMITH h...原创 2018-11-12 20:10:53 · 1624 阅读 · 0 评论 -
hive ---- hive常见查询语句练习（有一定难度的）
练习题和sql语句基础sql语句统计每个学生的总分。统计出学号和总分 select s_id , sum(s_score) as zf from score group by s_id上表结果和stuent做join连接select stu.s_name,zf.ss from(select s_id , sum(s_score) as ss from s...原创 2018-11-12 20:43:14 · 2723 阅读 · 0 评论 -
Hive --------- hive补充知识
补充：对于“正则表达式”和“解析json”、”解析xml”需要大家自己学习掌握好这些知识点。 自定义函数类别UDF 作用于单个数据行，产生一个数据行作为输出。（数学函数，字符串函数）UDAF（用户定义聚集函数）：接收多个输入数据行，并产生一个输出数据行。（count，max） UDF开发实例 0、先导入相应的jar包 （位置 当天资料里面software/l...原创 2018-11-13 09:35:39 · 275 阅读 · 0 评论 -
Hive -------- hive常见查询练习
表名和字段–1.学生表 Student(s_id,s_name,s_birth,s_sex) –学生编号,学生姓名, 出生年月,学生性别 –2.课程表 Course(c_id,c_name,t_id) – –课程编号, 课程名称, 教师编号 –3.教师表 Teacher(t_id,t_name) –教师编号,教师姓名 –4.成绩表 Score(s_id,c_id,s_score)...原创 2018-11-13 09:35:53 · 1457 阅读 · 0 评论 -
解决Linux下mysql允许远程连接的问题
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/sinat_21125451/article/details/68924671 1.查看linux防火墙是否开放3306端口 执行iptables -nL --l...转载 2018-12-04 11:54:55 · 279 阅读 · 0 评论