项目实现:电商网站日志采集系统(五:保存分析结果)

(1)使用管理员账户和密码登录MySQL,使用以下命令:

mysql -u debian-sys-maint -p

在这里插入图片描述(2)创建web_log数据库,使用以下命令:

CREATE DATABASE IF NOT EXISTS web_log;

在这里插入图片描述(3)创建web_log用户,设置密码为123456,使用以下命令:

CREATE USER ‘web_log'@'%' IDENTIFIED BY ‘123456’;
FLUSH PRIVILEGES;

在这里插入图片描述在这里插入图片描述(4)授予web_log用户操作web_log数据库的权限,使用以下命令:

GRANT ALL PRIVILEGES ON web_log.* TO ‘web_log’@’%’;

在这里插入图片描述(5)exit退出,使用web_log用户登录数据库
在这里插入图片描述(6)创建shop_count_rank表,使用以下命令:

CREATE TABLE shop_count_rank (
     shop varchar(10) NOT NULL,
     count int,
     rank int,
     day char(10) NOT NULL,
     hour char(2) NOT NULL,
     PRIMARY KEY(shop,count,rank,day,hour)
     );

在这里插入图片描述

增量导入出hive数据到MySQL,使用以下命令:

sqoop export --connect jdbc:mysql://localhost:3306/web_log --username web_log --password 123456 --table shop_count_rank --export-dir /user/hive/warehouse/web_log.db/ads_web_log --input-fields-terminated-by "\001" --update-key shop,count,rank,day,hour --update-mode allowinsert --m 1

在这里插入图片描述在这里插入图片描述在这里插入图片描述(7)编辑web_log_export.sh脚本中,使用以下命令:

vim web_log_export.sh

写入以下内容:

#!/bin/bash
sqoop export --connect jdbc:mysql://localhost:3306/web_log --username web_log --password 123456 --table shop_count_rank --export-dir /user/hive/warehouse/web_log.db/ads_web_log --input-fields-terminated-by "\001"  --m 1
  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

@Heartworm

你的鼓励就是我的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值