- 博客(3)
- 收藏
- 关注
RSS订阅原创 使用scrapy爬取北京公交
环境 pycharm 安装好scrapy 创建一个scrapy项目 在pycharm中的命令行界面创建一个beijingbus的scrapy项目 D:\python\beibusTest>scrapy startproject beijingbus #这里的D:\python\beibusTest>是我自己使用的路径，自己可以设置自己想要将项目保存的路径 切换到beijingbus目录，并使用genspider创建一个spider D:\python\beibusTest>
2021-01-02 18:49:09
4402
2
原创 搭建ambari
1.准备环境 2个ubantu系统（master,slave） ambari的安装包： ambari-2.7.3.0-ubuntu16.tar.gz HDP-3.1.0.0-ubuntu16-deb.tar.gz HDP-GPL-3.1.0.0-ubuntu16-gpl.tar.gz HDP-UTILS-1.1.0.22-ubuntu16.tar.gz 2.安装jdk（不详细说，master，slave都要安装jdk） 3.配置两个机的主机名 #在你自己的master上: root@st
2020-12-30 19:13:29
451
原创 hadoop伪分布模式
1.安装jdk #找到jdk安装包(jdk-8u261-linux-x64.tar.gz)解压 #/usr/local/自己想要解压的路径 tar - zxvf jdk-8u261-linux-x64.tar.gz -C /usr/local/ #进入已解压的路径 cd /usr/local/ ls #可以查看到jdk1.8.0_261(解压成功) #配置jdk的环境变量 vim ~/.bashrc #添加以下两行内容 #其中JAVA_HOME后面的内容是自己jdk的安装路径 export
2020-12-20 16:39:00
436
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人