- 博客(14)
- 收藏
- 关注
RSS订阅原创 备战蓝桥杯: 复习基础排序算法
1.冒泡排序举例分析:假设有这么一段数组 [2,4,1,6,3,10], 从数组第一个元素i开始,与它右边的元素j相比较, 如果i>j, i和j交换位置, i++, 直到i走到了数组倒数第一个元素就结束比较第一趟冒泡排序之后的数列为:2,1,4,3,6,1010确定为这趟数列最大的元素, 不参与之后的比较第二趟冒泡排序之后的序列为: 1,2,3,4,6,106确定为这趟数列最大的元素, 不参与之后的比较… (直到数组第二个元素变红)第二趟排序之后, 你会发现数组基本有序, 但是冒泡还没有
2021-03-15 17:48:02
274
原创 备战蓝桥杯:两道关于逆序对的问题
题1:给定两个排序后的数组A和B, 其中A的末端有足够的缓冲空间容纳B, 编写一个方法, 将B合并入A并排序解题思路: 开辟一个辅助空间数组helper, 长度为数组A和数组B的和, 定义两个变量分别为数组A和数组B的开始下标, 两两比较,谁小谁先进入辅助数组helper(假如元素相等随便那个都行),并且变量+1(左移一位)代码如下public class Test1{ static void MergeSort(int[] A, int[] B, int[] helper) {
2021-03-13 17:33:18
246
2
原创 flask_sqlalchemy基本的增删改查
简单讲解一下flask_sqlalchemy,在用flask搭建网站时,肯定是要网页和与数据库交互数据的,我认为flask_sqlalchemy是基于一个类去映射数据库中的表,然后做一些增删改查,sqlalchemy和flask_sqlalchemy其实用法区别不大,可以去官网看看sqlalchemy文档https://docs.sqlalchemy.org/en/13/core/tutorial.html这里就做一些flask_sqlalchemy的基本操作,从数据库中取出数据在网页中展示如果已经.
2020-11-27 10:29:32
675
原创 大数据学习7-Storm
storm和spark的安装使用还是挺简单的,storm和spark都是数据实时处理系统,所以我们放在一篇文章中stormstrom搭建前提是zookeeper环境已经搭建好(可以没有hadoop环境),如果没有请参考大数据学习3-Zookeeper搭建下载strom:strom版本:apache-storm-1.2.3.tar.gzhttps://pan.baidu.com/s/1X4HT_oUFyxak-EmCy1QWIA提取码:bydmstrom部署环境信息:主机节点
2020-10-24 09:13:59
141
原创 大数据学习6-Sqoop安装与使用
sqoop搭建还是挺简单的,前提是hadoop与hive搭建完成上传解压首先下载sqoop,sqoop的版本是1.4.7,sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz,提取码:jpzn上传到master主机上(随便哪台都可以)[root@master ~]# tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 解压[root@master ~]# mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop
2020-10-15 18:35:50
155
原创 大数据学习5-Hive搭建
hive搭建的前提:hadoop环境已经搭建好下载 hive我用的版本是hive1.1,apache-hive-1.1.0-bin.tar.gz,提取码:y4r9上传解压将下载好的hive上传到master主机上并解压--解压[root@master ~]# tar -zxvf apache-hive-1.1.0-bin.tar.gz -C /usr/local/--重命名[root@master ~]# mv /usr/local/apache-hive-1.1.0-bin/ /usr/l
2020-10-07 17:59:37
163
原创 Scrapy实例2_腾讯招聘
爬取腾讯招聘数据https://careers.tencent.com/search.html,保存为json文件分析网页右键查看网页源代码发现网页主体内容是Query动态加载的数据,所以我们需要抓包点击Network查看,发现第一页数据都在这个链接下https://careers.tencent.com/tencentcareer/api/post/Query?timestamp=1601278633129&countryId=&cityId=&bgIds=&prod
2020-09-28 17:06:41
266
原创 Scrapy实例1_英语点津
学习scrapy爬虫框架的第一个实例,我是在网上找的公开课去学习,我觉得学代码还是自己做实例学的快一点首选创建scrapy项目打开Terminal 输入scrapy startproject 项目名
2020-09-27 13:11:40
220
原创 PyCharm安装Scrapy报错时解决方案
很多人在安装Scrapy库的时候会出现 error: Microsoft Visual C++ 14.0 is required. Get it with "Build Tools for Visual Studio": https://visualstudio.microsoft.com/down loads/这样的保存信息，网上有很多解决方案，我找到一种很快速的解决方案分享给大家1. 首先打开https://www.lfd.uci.edu/~gohlke/pythonlibs/网址ctrl+f搜索T
2020-09-11 15:17:39
613
原创 大数据学习4-Hbase搭建
上传解压tar zxfv hbase-1.2.0-bin.tar.gz #解压mv hbase-1.2.0 hbase #重命名修改配置文件cd hbase/conf/ #进入需要修改的配置文件目录1. hbase-env.shvi hbase-env.sh 找到javahome修改jdk地址 找到export HBASE_MANAGES_ZK修改为false2. hbase-site.xmlvi hbase-site.xml <configuration&g
2020-08-27 17:39:00
158
原创 大数据学习3-Zookeeper搭建
Zookeeper搭建的前提条件:Hadoop分布式环境已经搭建好可以参考我之前写的博客hadoop分布式搭建前的准备、hadoop分布式搭建上传解压使用Xftp将Zookeeper压缩包上传到root目录下 (可以根据自己需求上传到哪个目录)Zookeeper下载链接Zookeeper3.4.5版本,提取码:5xvgtar zxf zookeeper-3.4.5.tar.gz #解压到当前的root目录mv zookeeper-3.4.5 zookeeper #重命名修改环境变量
2020-08-27 17:00:22
173
原创 大数据学习2-Hadoop分布式搭建
下载hadoophadoop下载提取码:vqkm(也可以自己去官网下载)上传解压下载完了之后使用Xshell连接master主机并上传到root目录下tar zxfv hadoop-2.6.0.tar.gz #解压hadoopmv hadoop-2.6.0 hadoop #重命名修改环境变量vi /etc/profile在后面添加以下配置export HADOOP_HOME=/root/hadoopexport PATH=$PATH:$JAVA_HOME/bin:$HADOOP_
2020-08-18 19:51:14
141
原创 大数据学习1-Hadoop分布式搭建前的一些准备
博主目前也在学习阶段,把学到的东西和容易犯错的地方分享给大家需要用到的软件:CenOS和MobaXterm_Personal(Xshell也可以)在CenOS上克隆3台主机右键主机名->管理->克隆,也可以自己创建1)2)3)虚拟机名称masterslave1slave2修改主机名重启后才会生效vi /etc/hostname --master --slave1 --slave2修改IPnmtui注意:每台主机都要修改,3台主机ip不
2020-08-18 14:59:38
133
原创 Pycharm远程连接Linux系统上的Mariadb数据库
python远程连接linux系统上的Mariadb数据库这是我的第一篇博客,有不妥之处多多包涵,欢迎留言提意见1.关闭防火墙2.打开mariadb,输入命令 --> systemctl start mariadb3.然后设置数据库权限是否禁止远程登录，默认是禁止的，这里我直接初始化数据库进行设置，输入命令–>mysql_secure_installation然后会进入数据库的一些权限设置4.设置完之后进入mysql中创建一个新的用户（我觉得最好自己新建一个用户用于远程连接使用
2020-08-17 14:15:13
789
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人