![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
base
文章平均质量分 85
星尘逸风
求道而非求术
展开
-
coding相关
文章目录并行任务进度监控python接口服务并行任务进度监控import psycopg2 as pgdef doDB(sql,flag): # flag=1是操作增删改,2是查 conn = pg.connect(database="i_twin", user="postgres", password="123456", host="192.168.1.96", port="5432") cur = conn.cursor()原创 2022-04-08 15:22:37 · 1618 阅读 · 0 评论 -
spark相关
文章目录简介安装hdfs命令概念流程RDD函数运行模式standalone运行模式yarn运行模式流处理监控端口监控文件停止任务问题最后更新2022.03.09简介分布式计算的前提是 计算的数据 分区后 各区无状态,适合用spark分布式管理分布式计算的前提是数据最好是分布式存储 然后各个算子(算法)计算的结果与结果之间不相关(无依赖,无状态)一般写spark可以用java、scala、pythonspark有固定的格式,需要创建任务只要部署好spark,然后任务在主节点提交就可以了,原创 2022-03-09 16:19:39 · 3039 阅读 · 0 评论 -
一些常用的python绘图包
文章目录matplotlibseabornpyechartspygalplotlyturtlenetworkxmayaviopengl最后更新2022.02.09绘图库大全:matplotlib底层灵活可实现复杂操作seaborn是mp的上层更简单pyecharts百度的图表可视化库basemap地理地图pygal矢量图networkx网络plotly地图趋势turtle作画mayavi三维可视化opengl开放图形库其他的还有pyqtgraph、pyQT5、PIL(pill原创 2022-02-09 22:40:49 · 3493 阅读 · 0 评论 -
工作总结2019-
文章目录SMLSML原创 2020-01-11 15:55:03 · 966 阅读 · 0 评论 -
linux笔记
文章目录系统EMHsh记录系统Edf -h 查看内存使用scp xx/x/x.txt root@192.168.1.1:/xx/x/ 跨服务器cv,需输对方密码mv 剪切mv xxx{ ,.bak } 重命名为xxx.bakcp -r 递归cvfind / -name xxx 在整个 / 里查找文件ldd xxx 查看可执行文件的依赖chmod 777 xxx 给文件全部权限......原创 2019-10-11 14:41:14 · 636 阅读 · 0 评论 -
算法基础----最小生成树
在连通网的所有生成树中,所有边的代价和最小的生成树,称为最小生成树。prim算法(加点法)构建一个所有顶点集合V,从随机一个点开始(令初始集合u={s}),v=V=u在uv能组成的边中,选择一条代价最小的边u0v0,加入到最小生成树中,并把v0并入到集合u中直到最小生成树有n-1条边或点集合有n个点为止时间复杂度为O(n2),适合于求稠密网的最小生成树kruskal算法(加边法)把...原创 2018-10-04 17:38:30 · 364 阅读 · 0 评论 -
设计模式简介
正在学习,择日完成原创 2018-10-01 18:49:04 · 226 阅读 · 0 评论