- 博客(18)
- 收藏
- 关注
RSS订阅转载 Hadoop综合大作业
开启功能启动hive导入文件内容到表docs并查看显示数据转载于:https://www.cnblogs.com/linweicong/p/9090762.html
2018-05-25 21:33:00
101
转载 理解MapReduce
1.用Python编写WordCount程序并提交任务程序WordCount输入一个包含大量单词的文本文件输出文件中每个单词及其出现次数（频数），并按照单词字母顺序排序，每个单词和其频数占一行，单词和频数之间有间隔编写map函数，reduce函数将其权限作出相应修...
2018-05-10 21:16:00
88
转载 熟悉常用的HBase操作
1. 以下关系型数据库中的表和数据，要求将其转换为适合于HBase存储的表并插入数据：学生表（Student）（不包括最后一列）学号（S_No）姓名（S_Name）性别（S_Sex）年龄（S_Age）课程（course）2015001LiSImale26...
2018-05-04 21:25:00
105
转载 熟悉常用的HDFS操作
一、Hadoop提供的Shell命令完成相同任务：在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件txt，里面可以随意输入一些单词.在本地查看文件位置（ls）在本地显示文件内容使用命令把本地文件系统中的“txt”上传到HDFS中的当前用户目录的input目录下。查看hdfs中的文件(-ls)显示hdfs中该的文件内容删除本地的tx...
2018-04-27 21:56:00
118
转载 爬虫大作业
1.选一个自己感兴趣的主题或网站：广州地铁官网：http://www.gzmtr.com/ygwm/xwzx/gsxw/2.用python 编写爬虫程序，从网络上爬取相关主题的数据。from bs4 import BeautifulSoupimport requestsimport pandasimport reindexUrl = "http...
2018-04-24 12:36:00
173
转载 数据结构化与保存
import requestsimport refrom bs4 import BeautifulSoupdef uslHtml(url): res = requests.get(url) res.encoding = "utf-8" soup = BeautifulSoup(res.text, "html.parser") ...
2018-04-16 17:50:00
85
转载 使用正则表达式，取得点击次数，函数抽离
re.match("(\w)+@(\w{2,4}).[a-z]{3,4}","linweicong@sohu.com")#邮箱re.match("^(\d){3}-(\d){8}$","321-84124291")#电话def onclick(url): identify = re.search("_(\d+)/(\d+)",url).group(2) u...
2018-04-09 20:35:00
69
转载 爬取校园新闻首页的新闻
import requestsfrom bs4 import BeautifulSoupfrom datetime import datetimeurl="http://news.gzcc.cn/html/xiaoyuanxinwen/"res = requests.get(url)res.encoding="utf-8"soup=BeautifulSoup...
2018-04-02 22:05:00
97
转载 网络爬虫基础练习
import requestsfrom bs4 import BeautifulSoupurl="http://www.gzcc.cn/html/xygk/xrld/"res = requests.get(url)res.encoding="utf-8"soup = BeautifulSoup(res.text,"html.parser")h1 = sou...
2018-03-29 17:53:00
101
转载 词频统计
news = """Leaving school is not a long time, but what I felt is so much. I find I’m enrolled in another full-time school called "life". Each day in this school I will have the opportunity to le...
2018-03-26 21:07:00
261
转载 组合数据类型练习
字符串：str = 'china'for i in str: print(i)列表：s= ['a','b','c','d','e','f']for i in s: print(i)元组：tu= ('physics', 'chemistry', 1997, 2000);for i in range(len(tu))...
2018-03-22 21:14:00
74
转载 Python基础练习
画五角星：setup(700,400,0,0)>>> bgcolor("red")>>> hideturtle()SyntaxError: unexpected indent>>> hideturtle()>>> up()>>> def move(x): ...
2018-03-19 19:54:00
75
转载 Linux 命令
cd命令：切换目录（1） 切换到目录 /usr/localcd usr/local（2） 去到目前的上层目录cd ..（3）回到自己的主文件夹 cd ~ls命令：查看文件与目录（4）查看目录/usr下所有的文件 cd / , cd usr , lsmkdir命令：新建新目录（5）进入/tmp目录，创建一个...
2018-03-12 21:55:00
74
转载 大数据概述
现在的社会是一个高速发展的社会，科技发达，信息流通，在我们的生活中，我们使用的电脑、移动设备，在医院看病，在商店付款都会记录在数据库里面，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。 大数据：无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量...
2018-03-05 11:03:00
100
转载 简化版c语言文法
标识符 头文件：Include、define、stdio.h、math.h、stdlib.h、time.h、string.h判断：if、switch循环:while、for、do while跳转符：break 、return、符号：#、+、=、-、：、，括号：(、)、{、}、[、]变量： a、b、c….z转载...
2016-11-04 16:43:00
90
转载 实验一：词法分析实验报告
一、实验目的（1）掌握词法分析程序的实现方法。（2）用C语言对一个简单语言的子集编制一个一遍扫锚的编译理解，掌握编译程序的实现方法和技术。（3）理解词法分析在编译程序中的作用。（4）加深对有穷自动机模型的理解。二、实验内容和要求1，词法分析程序的功能（输入，输出）。2，待分析的简单语言的词法。3，各种单词符号对应的种别码。三、实验方法、步骤及结果测试...
2016-10-21 17:31:00
693
转载 20160930 词法分析程序
#include<stdio.h> //包含库所用的某些宏和变量#include<stdlib.h> //包含库#include<string.h> //包含字符串处理库#define _KEY_WOED_END "waiting for your expanding" //定义关键字结束标志typedef struct{int typenum;cha...
2016-09-30 17:45:00
127
转载 如何更好的学习编译原理？
编译原理就是什么？编译原理对于我们学计算机来说，是一门很重要的学科，它在计算机科学与技术的历史发展中发挥了巨大作用，是计算机系统的核心支持软件。这门课程关注的是编译器方面的产生原理和技术问题，从本质上来讲就是一个算法问题。学习编译原理有什么好处？1. 词法分析方面，掌握正则表达式，了解dfa/nfa。2. Parsing 方面，能读懂BNF，知道AST，会写简单的递归下降pars...
2016-09-09 17:44:00
143
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人