- 博客(6)
- 收藏
- 关注
RSS订阅原创 Azkaban
安装Azkaban在/opt/module/目录下创建azkaban目录[hadoop@hadoop1 module]$ mkdir azkaban解压azkaban-web-server-2.5.0.tar.gz、azkaban-executor-server-2.5.0.tar.gz、azkaban-sql-script-2.5.0.tar.gz到/opt/module/azkaban目录下[hadoop@hadoop1 soft]$ tar -zxvf azkaban-web-serv
2021-11-07 15:38:08
354
原创 scrapy入门
Scrapy常用命令startproject：创建新的爬虫项目，参数project_name和project_dir分别表示项目的名称和项目存储的目录。 scrapy startproject <project_name> [project_dir] genspider：在当前文件夹或者当前项目，创建一个新的爬虫文件，参数name表示创建的爬虫文件名，domain表示要爬取的网址，-t表示是否使用模板，可以使用“scrapy genspider -l”的方式查看所有的命
2021-10-31 16:02:27
156
原创 Nginx 网站部署
网站打包： 项目开发完成以后，使用Maven的package命令对模块打包，网站部署：网站开发并打包完成以后，需要部署到服务器上运行。网站部署方式是使用Nginx作为反向代理服务器，将网络请求转发为Web服务器Tomcat，通过Nginx的access log记录用户访问行为。 Nginx默认配置，Nginx提供了一个默认的配置，实现了基本的功能，在进行配置之前，首先通过Nginx默认的配置文件了解Nginx配置文件的基本结构。全局块：配置nginx全局指令。包括：nginx服务器的用户组，ngin
2021-10-25 08:45:54
3227
原创 2021-10-17
一、Hadoop是什么Hadoop是一个由Apache基金会所开发的分布式系统基础架构。主要解决，海量数据的存储和海量数据的分析计算问题。Hadoop并不只是单单一个技术，而是一个生态圈，里面包括Spark、Flume、HBase、Kafka、Sqoop、Hive、Oozie、Azkaban、Zookeeper。二、Hadoop组成1、Hadoop1.x①：MapReduce（计算+资源调度）②：HDFS（数据存储）③：Common（辅助工具）2、Hadoop2.x①：MapReduce
2021-10-17 17:05:50
87
原创 如何在navcat中引入sql文件
navcat中利用sql语句建造表，也可以至今引入sql文件去创建表双击创建链接打开所要引用sql文件的目录右键，选择运行SQL文件随后选择你所需要的SQL文件导入即可，完成之后刷新表就会看到你想要的表格了。...
2021-09-26 10:12:53
215
原创 python安装及配置
1.首先去下载一个python，进入官网下载https://www.python.org/downloads/release/python-397/进入官网后，选择自己心仪的版本进行下载2. 等待下载完成后进行安装，勾选Add Python 3.9 to PATH之后点击Install Now进行安装3.出现这个页面表示你已经成功安装python .4.之后【win+R】键输入cmd，在弹出的命令框中输入python出现下图所示相同及表示安装成功...
2021-09-18 16:02:14
391
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人