- 博客(16)
- 资源 (8)
- 收藏
- 关注
原创 python3爬取斗鱼主播信息
爬取舞蹈区的主播信息如昵称,热度,直播标题,直播地址,主播头像1、抓包分析(https://www.douyu.com/g_dance)g_dance可以换成其他的,原理是一样的 通过首页分析得不到要请求的链接,如果是直接通过elements中的元素来解析的话得不到主播的头像url地址,通过分析是通过json文件来传值的,第一页找不到,换到第...
2019-12-18 17:20:06
310
2
原创 {"status":false,"msg":"您操作太频繁,请稍后再访问","clientIp":"113.94.81.141"}
在爬取拉勾网的时候报错{"status":false,"msg":"您操作太频繁,请稍后再访问","clientIp":"113.94.81.141"}需要获取搜索结果那一页的cookie 以及header里面需要添加Accept、Referer、User-Agentimport requests url = 'https://www.lagou.com/jobs...
2019-08-28 23:57:25
3389
原创 Make sure that you use the correct version of 'pip' installed for your Python interpreter
像matplotlib在pycharm安装时候报错Make sure that you use the correct version of 'pip' installed for your Python interpreter就是在cmd进入下面的这个地址,然后运行 python.exe -m pip install matplotlib如果报错pip is co...
2019-04-20 15:30:00
24664
12
原创 配置java环境变量
1、右击电脑远属性2、在左边选高级系统设置3、选环境变量 4、新建JAVA_HOME 点击浏览目录找到你的java安装目录 5、新建CLASSPATH 把下面该的内容粘贴进去再点击确定 .;%JAVA_HOME%\lib;%JAVA_HOME%\lib\tools.jar 6、编辑path路径 ...
2018-11-17 10:57:00
145
原创 59. 螺旋矩阵 II
给定一个正整数 n,生成一个包含 1 到 n2 所有元素,且元素按顺时针顺序螺旋排列的正方形矩阵。示例:输入: 3输出:[ [ 1, 2, 3 ], [ 8, 9, 4 ], [ 7, 6, 5 ]]class Solution { public static int[][] generateMatrix(int n) { int[][] a...
2018-11-13 17:34:39
90
原创 古风排版java版
7-7 古风排版(20 分)中国的古人写文字,是从右向左竖向排版的。本题就请你编写程序,把一段文字按古风排版。输入格式:输入在第一行给出一个正整数N(<100),是每一列的字符数。第二行给出一个长度不超过1000的非空字符串,以回车结束。输出格式:按古风格式排版给定的字符串,每列N个字符(除了最后一列可能不足N个)。输入样例:4This is a test case...
2018-11-09 20:37:09
458
原创 从HDFS文件系统中读写文件原理
1、从HDFS文件系统中写文件 1、客户端发起请求要写文件 /aa/jdk.tgz 2、namenode会检查该目录是否存在,返回是否可写 3、客户端请求写入第一个block 4、namenode返回3个datanode主机 5、挑选dn1,请求建立传输数据的连接,建立socket连接,请求带有参数,告诉dn1要传输给多少台机器 ...
2018-09-14 10:35:39
1664
原创 虚拟机配置静态ip地址(俗称固定ip地址)
1、以管理员的身份打开虚拟机,点击导航栏上面的 编辑-->虚拟网络编辑器 2、首先选中上面的VMnet8,在到下面的子网 ip 处编辑ip地址,可以改成192.168.8.0,最后点击右边的 NAT设置 3、在NAT中设置网关 i p,可以改成 192.168.8.2,最后点击确定就可以了,虚拟机的ip地...
2018-07-23 23:16:18
43933
4
原创 MapReduce实现每年的每月前两天温度最高排序
温度数据:1949-10-01 14:21:02 34c1949-10-02 14:01:02 36c1950-01-01 11:21:02 32c1950-10-01 12:21:02 37c1951-12-01 11:21:02 23c1950-10-02 12:21:02 41c1950-10-03 11:21:02 27c1951-07-01 12:21:02 45c...
2018-07-16 10:22:41
1190
1
原创 mysql配置环境变量(win 10)
1、安装完mysql后就需要配置环境变量 (win 10)选择“我的电脑”,单击右键,选择“属性->高级->环境变量中的系统变量,对 MYSQL_HOME、Path 这 2 个系统变量分别设置如下相应的值(设置原则:如果存在相应的变量,直接对该变量进行编辑,注意只添加不删除;如果该变量不存在,则新建后再编辑。)这里由于没有于是就新建一个环境变量 MYSQL_HOM MYSQL_H...
2018-06-15 01:32:48
98804
4
原创 HDFS的基本操作
HDFS的基本操作 命令行客户端的常用命令 1、上传文件到集群中hdfs dfs -put 本地路径 hdfs上的路径例如:把本地 linux 上root目录下的a.txt上传到集群中的根目录下 hadoop fs -put /root/a.txt /相同功能的另外一种写法hadoop fs -copyFromLocal /root/a.txt...
2018-06-13 13:26:58
188
原创 冒泡排序实现从小到大排序
public static void bubbleSort(int[] arr){ if(arr==null&&arr.length<2){ return; } for (int end = arr.length-1;end>0;end--){ for(int i =...
2018-06-12 18:03:28
3513
原创 新版Myeclipse创建sturt2项目
1、先创建web工程2、输入web 选Dynamic Web Project3、版本选择2.54、安装struts2 选中项目,然后右键,在Configure Facets里面有Install Apache Struts(2.x)5、install Apache Struts(2.x) 选好自己配置的tomcat,finish就可以了6、lib ...
2018-06-09 16:03:42
128
原创 JDK1.8在LINUX下安装步骤
在/usr/lib/目录下新建jvm文件夹,如果已有jvm文件夹,则将之前的JDK版本删除,即在jvm目录下执行命令:rm –rf *将JDK文件jdk-8u40-linux-x64.gz拷贝到/home/目录下;在/home/目录下执行命令(也就是把压缩包tar开到 /usr/lib/jvm 下面): tar zxvf ./jdk-8u40-linux-x64.gz -...
2018-06-06 13:55:17
438
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人 TA的粉丝