dianjuanxu4617-CSDN博客

转载 Hadoop综合大作业

作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363Hadoop综合大作业1.将爬虫大作业产生的csv文件2.对CSV文件进行预处理生成无标题文本文件3.把hdfs中的文本文件最终导入到数据仓库Hive中4.在Hive中查看并分析数据...

2019-06-20 21:36:00 137

转载分布式文件系统HDFS 练习

作业要求来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3310利用Shell命令与HDFS进行交互以”./bin/dfs dfs”开头的Shell命令方式1.目录操作（1）在HDFS中为hadoop用户创建一个用户目录（hadoop用户）（2）在用户目录下创建一个input...

2019-06-04 20:14:00 138

转载安装Hadoop

本次作业要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/32231、安装linuxVMware下载安装VMware的下载安装就好办了，下载直接百度如下，哈哈：下载完成即可安装，安装可以全部采取默认，看个人而定，博主的安装目录是自选的。安装完成之后启动VMware，需要输入产品密钥（vm...

2019-05-16 21:55:00 160

转载爬虫综合大作业

作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3002from bs4 import BeautifulSoupimport requests as reurl='http://news.gzcc.cn/html/xiaoyuanxinwen/'res=requests.get(url)res.encoding=...

2019-05-09 20:21:00 105

转载爬取全部的校园新闻

作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3002from bs4 import BeautifulSoupimport requests as reurl='http://news.gzcc.cn/html/xiaoyuanxinwen/'res=requests.get(url)res...

2019-04-15 20:59:00 85

转载理解爬虫原理

1. 简单说明爬虫原理2. 理解爬虫开发过程1).简要说明浏览器工作原理；2).使用 requests 库抓取网站数据；requests.get(url) 获取校园新闻首页html代码3).了解网页写一个简单的html文件，包含多个标签，类，id4).使用 Beautiful Soup 解析网页；通过BeautifulSoup(html_sample,'html.parser')把上述h...

2019-04-01 21:56:00 70

转载复合数据类型，英文词频统计

1.列表，元组，字典，集合分别如何增删改查及遍历。使用append()方法来添加列表项（仅支持增加一个元素），extend()增加一个列表，insert()根据索引添加元素del 根据索引删除元素，或者使用remove()删除指定值的元素，pop()根据索引删除元素对列表数组某元素进行赋值，以进行更新搜索可以通过搜索元素或者搜索元素索引值列表有三种遍历方法，一种是带I...

2019-03-22 17:18:00 89

转载字符串、文件操作，英文词率统计预处理

字符串、文件操作，英文词率统计预处理该作业要求来于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/26841.字符串操作：解析身份证号：生日、性别、出生地等。凯撒密码编码与解码网址观察与批量生成2.英文词频统计预处理下载一首英文的歌词或文章或小说。将所有大写转换为小写...

2019-03-11 21:52:00 100

转载了解大数据的特点、来源与数据呈现方式

作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/26391.浏览2019春节各种大数据分析报告，例如：这世间，再无第二个国家有能力承载如此庞大的人流量。http://www.sohu.com/a/290025769_313993春节人口迁徙大数据报告！http://www.sohu.com/a/2...

2019-03-01 17:05:00 73

转载结对项目-四则运算“软件”之升级版

作业要求：　https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2213github地址：https://github.com/LiuQSong/learnning同伴姓名学号+博客地址：刘庆松 201606120033 https://www.cnblogs.com/lqscmz/p/9845339.html...

2018-10-24 17:49:00 149

转载第三次作业：个人项目-小学四则运算 “软件”之初版

本次作业要求来自：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2166我的github远程仓库的地址：https://github.com/pakhochiu/gitskill.git一、题目要求：像《构建之法》的人物阿超那样，写一个能自动生成小学四则运算题目的命令行 “软件”。具体要求：任何编程语言都可...

2018-10-10 11:56:00 65

转载第二次作业：分布式版本控制系统Git的安装与使用

本次作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2103GitHub仓库：https://github.com/pakhochiu/gitskill1.下载安装配置用户名和邮箱并查看用户名和邮箱2.创建工作目录并通过git init命令把这个目录变成Git可以管理的仓库。3. 在...

2018-09-17 21:38:00 75

转载第一次作业：准备

随笔要求源于：https://www.cnblogs.com/greyzeng/p/9581624.html你为何要来上课并且认真参与？来源----->http://www.scalerstalk.com/816-attention上到大学后，自己还是没有改变学习的习惯，还是在等老师的安排，而老师的安排总是不在课本上的，只能希望在课堂上期待老师能说个所以然，没...

2018-09-09 19:39:00 129

dianjuanxu4617的博客