m0_59659098-CSDN博客

原创可视化程序

matplotlib: 1.官网 https://matplotlib.org/ 2.概述： Matplotlib is a comprehensive library for creating static, animated, and interactive visualizations in Python. Matplotlib就是一个数据可视化的东西和大数据数据可视化有区别【Matplotlib他...

2022-04-22 10:31:30 170

原创机器学习2

机器学习： 1.概念 Simple and efficient tools for predictive data analysis 【预测数据分析结果】用机器代替人做决策数据集 =》训练 =》模型 2.Built on NumPy, SciPy, and matplotlib、pandas2.机器学习里面的常用术语： 1.数据集准备色泽= 绿色、根=弯曲、敲声 = 浑浊 =》熟的 ...

2022-04-22 10:28:35 69

原创机器学习1

机器学习： 1.概念 Simple and efficient tools for predictive data analysis 【预测数据分析结果】用机器代替人做决策数据集 =》训练 =》模型 2.Built on NumPy, SciPy, and matplotlib、pandas2.机器学习里面的常用术语： 1.数据集准备色泽= 绿色、根=弯曲、敲声 = 浑浊 =》熟的 ...

2022-04-22 10:27:41 50

原创大数据专业大框

大数据专业：面试：linux： tail -f F 区别hadoop：读写流程、yarn、mapreduce【不会问的、shuffle】 hdfs：小文件如何解决 nn ha yarn hahive： 1.sql 2.调优： 1.数据倾斜=》 join group by 2.使用过哪些参数flume：tail -f F ...

2022-04-22 10:26:31 60

原创 Python爬虫

爬虫： 1.百度百科 2.自己理解：通过代码、模拟浏览器上网然后抓取数据的过程2.爬虫是否合法？ 1.法律允许 2.有法律风险的3.统一规定？【法律界限】 robots.txt协议4.爬虫的分类： 1.获取一整张页面【通用爬虫】 2.获取一整张页面部分数据【聚焦爬虫】 3.检查页面更新、获取页面最新的更新的数据【增量式爬虫】5.爬虫的规则： 1.反爬策略：门户网站通过...

2022-04-22 10:25:25 41

原创 Python函数

1.函数：函数 =》方法【区别不大】 scala 【有区别】 1.内置函数【常用类的api】 1.数学相关的【math 包下的】 2.自定义函数 3.匿名函数【没有名字的函数】 1.内置函数【常用类的api】 print(abs(-10)) #绝对值 print(max(1, 2, 3, 4, 5)) print(min(1, 2, 3, 4)) print(sum([1, 2, 3]))...

2022-04-22 10:24:35 36

原创 Python1

Python: 1.概述： 1.语言 2.开发起来简洁 =》 java 2.使用场景： 1.数据分析 =》 numpy 、pandas 2.web 开发 =》用的不多、百度 3.游戏开发 =》用的不多 4.AI （机器学习、深度学习） 5.爬虫 1.部署安装： 1.安装： 1.python 原生的安装包 www.pyt...

2022-04-22 10:22:24 456

原创 vm命令1

基本命令：1.mv + cp 1.mv 剪切 2.cp 复制 mv =》文件个数始终是1分 cp =》文件个数始终是2分 1.移动 [root@sygy10 bigdata]# mv 1.log ../1.log [root@sygy10 bigdata]# cp ~/1.log ./ 2.改名字 [root@sygy10 ~]# mv 1.log 1.log_blk ...

2022-04-22 10:13:27 655

原创 linux

linux模板机： 1. ip 动态ip =》静态ip 1.内网 2.学习方便 2.关闭防火墙： 1-65535 关闭防火墙 3.额外的安装包： 1.jdk =》卸载掉 2.mysql =》 mysql自带的额外包【安装mysql 去掉就行】【superset mysql自带的额外包】ip： 1.win =》 vmware ： ...

2022-04-22 10:08:57 71

m0_59659098的博客