我的大数据项目

清洗PVUV项目：

1.清洗HDFS文件上的日志

     操作RDD

2.将数据保存在集群上

 saveAsTextFile

3.从集群读取数据保存到Mysql/MongoDb

    1.连接数据库

    2.删除旧数据，插入新数据

 

商品分类项目：

1.连接数据库

2.从数据库读取数据

3.分类设计

4.插入数据Mysql

转载于:https://www.cnblogs.com/znnbk/p/10824109.html