![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
DarrenMJ
依愿入戏,靠信入角
展开
-
H_001.Hadoop生态系统的详细介绍
Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架,实现在大量计算机组成的集群中对海量数据进行分布式计算。今天我们来详细介绍下hadoop的生态系统。 1、Hadoop生态系统概况 Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 Hadoop的核心是HDFS和MapReduce,h转载 2017-09-27 10:28:00 · 507 阅读 · 0 评论 -
P006_Python时间戳与时间字符串互相转换
#设a为字符串import timea = "2011-09-28 10:00:00"#中间过程,一般都需要将字符串转化为时间数组time.strptime(a,'%Y-%m-%d %H:%M:%S')>>time.struct_time(tm_year=2011, tm_mon=9, tm_mday=27, tm_hour=10, tm_min=50, tm_sec=0, t转载 2018-01-08 19:38:35 · 368 阅读 · 0 评论 -
P_005.Python获取并输出当前日期时间
取得时间相关的信息的话,要用到python time模块,python time模块里面有很多非常好用的功能,你可以去官方文档了解下,要取的当前时间的话,要取得当前时间的时间戳,时间戳好像是1970年到现在时间相隔的时间。你可以试下下面的方式来取得当前时间的时间戳:import timeprint time.time()输出的结果是:1357723206.31但转载 2018-01-08 18:06:17 · 382 阅读 · 0 评论 -
P_010.~慢慢悠悠~使用Python的Scrapy框架成功爬取豆瓣电影的全部信息
写在前面的话: Java程序员一枚,初入大数据神坑,爬虫算是第一个项目,项目细节无需赘述,几经挣扎最终决定放弃Java爬虫,使用Python来写爬虫,Python爬虫当然绕不过去Scrapy神来之笔的框架! 环境搭建及安装各种工具包,相信每一位和我一样的初次入坑的小伙伴们都必需经历,痛并快乐着,最终放弃2.7版本,选择3.5版本,毕竟掌握新技术总是能给人带来成就感! 听着豆瓣音原创 2018-01-24 18:01:51 · 1580 阅读 · 1 评论 -
P_009.Python int与string之间的转化
string-->int1、10进制string转化为int int('12')2、16进制string转化为int int('12', 16)int-->string1、int转化为10进制string str(18)2、int转化为16进制string hex(18)考虑,为什么没有16进制int转转载 2018-01-12 18:00:02 · 935 阅读 · 0 评论 -
P_008.python字符串截取子串
在python中没有类似sub()或者subString()的方法,但是字符串的截取操作却是更加简单。只需要把字符串看作是一个字符数组,截取子串非常方便。多余的话就不啰嗦了,看下面的例子就明白了。str = ’0123456789′print str[0:3] #截取第一位到第三位的字符print str[:] #截取字符串的全部字符print str[6:]转载 2018-01-12 17:58:41 · 24614 阅读 · 0 评论 -
P_004.Eclipse+pydev解决中文显示和注释问题的方法大全
Eclipse的设置window->preferences->general->editors->texteditors->spelling->encoding->UTF-8,编辑器的编码格式window->preferences->workspace->textfile encoding->UTF-8打开eclipse安装目录->eclipse.ini,末行加上”-Dfi转载 2017-09-27 17:50:59 · 460 阅读 · 0 评论 -
P_003.让eclipse自动生成的注释的时间显示英文,不用中文
再在eclipse的安装目录上找到eclipse.ini文件,加入:-Duser.language=en_US重启eclipse。现在${date}变量生产的日期就是全英文了。DogEye.NET 除非明显声明,本站所有文章均为原创。若转载,请注明出处。谢谢。让eclipse自动生成的注释的时间显示英文,不用中文.转载 2017-09-27 17:49:31 · 1058 阅读 · 0 评论 -
P_002.#!/usr/bin/env python与#!/usr/bin/python的区别
脚本语言的第一行,目的就是指出,你想要你的这个文件中的代码用什么可执行程序去运行它,就这么简单#!/usr/bin/python是告诉操作系统执行这个脚本的时候,调用/usr/bin下的python解释器;#!/usr/bin/env python这种用法是为了防止操作系统用户没有将python装在默认的/usr/bin路径里。当系统看到这一行的时候,首先会到env设置里查找python的转载 2017-09-27 17:11:12 · 446 阅读 · 0 评论 -
P_001.eclipse 安装python后pydev不出现
一、环境windows 7 64biteclipse 4.5.2pydevjdk7u55二、安装步骤1. 安装JDKeclipse依赖于java环境,所以需要安装java运行环境JRE。由于JDK既包含了JRE,又可以用来做开发。直接下载jdk安装。我安装的是JDK 7。地址:http://www.java.com/zh_CN/download/具体安装jd转载 2017-09-27 16:46:54 · 404 阅读 · 0 评论 -
P_007.Python中的string模块的学习
>>> import string>>>string.ascii_letters'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ'>>>string.ascii_lowercase'abcdefghijklmnopqrstuvwxyz'>>>string.ascii_uppercase转载 2018-01-10 16:13:00 · 417 阅读 · 0 评论