- 博客(15)
- 收藏
- 关注
原创 本地虚拟机redhat7安装kafka教程第三步----kafka的启动
本地虚拟机redhat7安装kafka教程第三步----kafka的启动当zookeeper和kafka都已经安装、配置完毕以后,就可以启动kafka,进行简单的数据发送和接收了1、启动zookeeper启动命令参考教程第一步:https://blog.csdn.net/beyond_f4/article/details/80095689进入zookeeper的安装目录 # cd /liha...
2018-04-26 17:21:21 1678
原创 本地虚拟机redhat7安装kafka教程第一步----zookeeper的安装与配置
本地虚拟机redhat7安装kafka教程第一步----zookeeper的安装与配置 1、下载zookeeper版本; 本次下载的是Zookeeper-3.4.10版本,可以使用wget下载, wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.10/zookeep...
2018-04-26 16:42:58 2889
原创 本地虚拟机redhat7安装kafka教程第二步----kafka的安装与配置
本地虚拟机redhat7安装kafka教程第二步----kafka的安装与配置因工作需求,要从kafka中读取数据,今天鼓捣了一天,做个记录1、下载Kafka版本 本次下载的是kafka_2.10-0.10.1.1.tgz版本,可以使用wget下载,来个五选一吧 wget http://mirror.bit.edu.cn/apache/kafka/1.1.0/kafka_2.11-1....
2018-04-26 16:19:35 2176
转载 python 脚本实现 复制/移动文件
python 实现复制/移动文件将某代码文件复制/移动到指定路径下,例如:move ./xxx/git/project1/test.sh -> ./xxx/tmp/tmp/1/test.sh相对路径./xxx/tmp/tmp/1/不一定存在# -*- coding: utf-8 -*-#!/usr/bin/python#test_copyfile.pyimport os,shutil...
2018-04-26 12:03:35 4920
转载 redhat7下kafka的安装与部署
安装JDK Kafka需要依赖JAVA环境运行。 我这里是redhat7,不需要再安装java环境 下载Kafka版本 本文下载的是kafka_2.10-0.10.1.1.tgz版本,可以使用wget下载,也可以自行下载。 下载地址:http://kafk...
2018-04-25 15:19:04 2527
原创 离线安装python包,开启断网模式
Python刚装好断网了怎么办?想把现有的Python环境转移到另外一台机器上怎么办?这就用到了离线安装1、创建目录用于存放下载的包,并进入该目录mkdir lihaizhencd lihaizhen2、首先将现有的Python包导出到目录文件requirments.txtpip freeze > requirments.txt3、按照导出目录,下载对应包pip download -d ./...
2018-04-25 10:18:04 5785
原创 ·Python 获取本地时间戳(包含毫秒)
Python 获取本地时间戳(包含毫秒)如何通过 Python 获取一个完整的时间戳。import timedef get_time_stamp(): ct = time.time() local_time = time.localtime(ct) data_head = time.strftime("%Y-%m-%d %H:%M:%S", local_time) ...
2018-04-17 15:31:46 17997
原创 python中加载配置文件
我们写Python脚本的时候,里面往往会用到许多变量、参数等,有时候这些变量、参数是需要我们动态的赋值的,如果脚本较长逐个查找替换是比较麻烦的,这里就可以使用配置文件,将一些需要频繁变化的参数变的可配置配置文件的格式一般为conf# -*-coding:utf-8-*-import configparserdef load_conf(): print("加载配置文件") c...
2018-04-15 17:57:03 2789
转载 什么是python的全局解释锁(GIL)?
什么是python的全局解释锁(GIL)? 我们所说的Python全局解释锁(GIL)简单来说就是一个互斥体(或者说锁),这样的机制只允许一个线程来控制Python解释器。 这就意味着在任何一个时间点只有一个线程处于执行状态。GIL对执行单线程任务的程序员们来说并没什么显著影响,但是它成为了计算密集型(CPU-bound)和多线程任务的性能瓶颈。 由于GIL即使在拥有...
2018-04-15 17:50:59 11239 3
原创 navicat只显示1000条记录?
Navicat 只显示1000条记录?一直用的都是终端命令行,好久不用navicat了,最近又用了一下,发现数据表里的数据只能显示前1000条,这是什么鬼,难道数据库出问题了?原来是navicat默认--超过1000条--就翻页了,看右下角点击向右箭头,翻开下一页,就可以继续浏览了,当然也可以直接翻到最后一页如果你觉得1000对你来说不合适,也是可以通过--工具---来修改的工具–>选项–&...
2018-04-13 14:29:03 13673 1
原创 如何在MySQL中创建新的数据库(windows下)
一、首先确保已经安装好MySQL,如果还没有安装也没关系,可以参考:https://blog.csdn.net/beyond_f4/article/details/79894234二、windows下win+R键入cmd进入命令窗口输入mysql -uroot -p,提示输入密码,输入后进入mysql界面三、创建数据库输入create database wltx ;创建数据库(wltx为数据库名)...
2018-04-11 15:47:59 20929 3
转载 windows下如何安装MySQL 5.7 .21(详细教程)
MySQL 5.7 .21版本的安装及简单使用(图文教程)MySQL 5.7版本的安装使用详细教程写得还是比较详细,甚至有些繁琐,有很多步骤在其他的教程文档里都是省略掉的,但是我还是要写出来,因为我当时走了很多弯路,我希望你们能够避免我走的这些弯路。当然,知道同学的可以略过,选择你想知道的地方看。因为看到mysql5.7加入了新特性documentation所以重新安装了一下mysql5.7版本的...
2018-04-11 11:49:55 3712
转载 Scrapy 如何设置settings使用动态UA
Scrapy 自定义settings--简化编写爬虫操作--加快爬虫速度爬虫应该算是数据挖掘的第一步,也是分析数据的基础,更是得出结论的基石。爬虫大到一个团队在维护,小到毕业论文。Python应该算是大家非常喜欢的爬虫语言(理由不用多说都知道的);而scrapy框架应该算是爬虫模块、框架中的佼佼者,今天我们自定义settings.py文件。scrapy项目结构那么我们自定义的就是这个setting...
2018-04-09 15:10:35 4116 2
转载 健康工作、远离癌症
癌症到底是怎么得来的?听了这几句话,希望你能醒悟!羊城晚报 昨天08:34不幸得了癌症,很多人第一反应是:为什么是我?为什么癌症偏偏找上我?是啊,癌症到底是怎么来的?怎么就找上门了?一、癌症是省出来的!2. 不舍得吃新鲜蔬果,患癌风险增加来看这组数据:水果没吃够,导致的相关疾病死亡数依次为:缺血性心脏病47.25万人肺癌20.84万人食管癌6.07万人喉癌0.54万人口腔癌0.36万人这是中国疾病...
2018-04-08 09:10:07 1368 1
原创 random函数
总结一下用过的random函数作用:可用于生成随机数、随机浮点数、随机集合、集合元素排序问题前提是导入random实例,使用random实例调用下面的方法import random# 取1个 1到10间 随机整数random.randint(start,end)包括start,不包括end(以下都是)# 取1个 0到1间 随机浮点数(默认保留15-16位小数)print(random.random...
2018-04-04 15:59:49 4571 1
爬虫基础-第四章-requests
2022-11-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人