- 博客(4)
- 收藏
- 关注
原创 python爬取猫眼电影排名前100信息
python爬取猫眼电影排名前100学习python有一段时间了,最近,发现python爬虫挺有趣的,也很好玩,所以学习学习下,这里我介绍的是爬虫的入门吧,算是爬虫里面最简单的,其方法主要是使用正则的爬取信息,可能现在爬虫技术流行用啥啥框架的,但我觉得打好基础,明白爬虫的意义,其实更为重要。介绍请求头的构造学好爬虫,才发现对于网络的知识方面的贮备也是要需要的,我这边主要介绍的是当你去访问网站的时候,有一东西重要的,叫请求头,用来说明服务器要使用的附加信息。Accept请求报头域,用于指定客户端可
2020-06-08 20:00:02 1175
原创 cdh集群的角色的一般分配
一、hdfsNameNode一般在主节点上,初始化安装的时候没有高可用,所以有SecondaryNameNode的作为一个备份,NameNode它会将它拆分后进行分布式存储,其中的数据是分散在各个DataNode节点,且默认都会有3个副本,防止其中一台机器宕机使得数据缺失,所以一般集群有几台机器就分配到几台机器上,balancer一般与namenode搭建在一起。二、hivehive met...
2020-03-07 09:57:21 2121
原创 Mysql升级到5.7.28版本
MySQL升级过程:先查看MySQL版本:mysql -u root -p #回车之后输入MySQL root密码备份数据库:注意在实际生产中,我们必须要考虑到万一升级失败了,我们之前的数据得备份好以免升级失败而导致数据的丢失。mysqldump -uroot -p --all-databases > all-databases.sql #回车后输入MySQL root密码...
2019-12-15 18:59:49 944
原创 把openssh升级到8.1版本
把openssh升级到8.1版本各种坑都能解决无敌下载相应的软件包:yum install wget gcc -yyum group install 'Development Tools' -yyum install -y zlib-devel openssl-develyum install pam-devel libselinux-devel zlib-devel openssl-d...
2019-12-13 17:48:32 7525 9
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人