- 博客(72)
- 收藏
- 关注
RSS订阅原创 Obsidian的初步了解、安装及使用
Obsidian 既是一个 Markdown 编辑器，也是一个知识管理软件。而且Obsidian是一款开源免费的软件，摆脱了坐地起价、停止运营和广告增收等问题。
2024-04-10 17:18:19
1453
原创 为什么要从ArcMap转向ArcGIS Pro？
ArcMap与ArcGIS Pro的区别是什么？为什么要从ArcMap转向ArcGIS Pro？
2022-09-14 00:15:52
3038
转载 【转载】python requests.post 阻塞/很慢问题
第一次写post请求，发现请求一次没有问题，连续请求就特别慢，最后在此博客找到解决方案。http://blog.szwyll.com/archives/1227requests.post，这货默认是阻塞的，除非显式指定了timeout值，否则不会做超时处理。 1 response = requests.post(url, data = body, headers = http_headers, timeout=5 ) ...
2021-04-12 16:38:40
2238
转载 【转载】根据已知点通过COORD七参数计算
感谢欧特_Glodon 原文链接：https://blog.csdn.net/m0_37251750/article/details/99941276参考致谢：微信公众号 GIS前言问题：同一个点的经纬度坐标在不同地理坐标系下是否相同？答案：目前国土资源部门要求矿权登记采取西安80坐标系登记，以前都是采用的北京54坐标系，本以为两个坐标系同一点的经纬度应该相同，不同的只是换算后的直角坐标不同。后来经国土部门提供的已知点两个不同坐标系下的坐标可以确定，两个地理坐标系下同点经纬度有较大差别。并且目前.
2021-01-22 21:14:50
1288
转载 【转载】excel坐标导入Qgis
感谢 阿酷亚莫塔塔 的贡献，转载自：https://blog.csdn.net/qq_31793023/article/details/103512110我们通常用ARCGIS打开EXCEL中的点坐标导入XY坐标，选中EXCEL文件（*.xls）就行，在QGis中打开EXCEL文件（*.xls）是需要先将EXCEL文件（*.xls）转换成*csv文件后才能导入坐标数据。步骤如下：1.用EXCEL打开坐标文件（*.xls），另存为*.csv文件。2.打开QGis，图层-->添加图层--&.
2021-01-18 17:30:18
4156
原创 【docker运维】docker基础快速上手小教程
docker基础操作部分包括docker安装，docker启动，docker操作，docker关闭，docker删除几个部分。主要是针对普通用户，需要深入了解的建议进行系统学习。docker基础来源于菜鸟教程【https://www.runoob.com/docker/docker-tutorial.html】Docker 是一个开源的应用容器引擎，基于 Go 语言 并遵从 Apache2.0 协议开源。Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流
2020-12-12 22:22:32
226
转载 【转载】ArcGIS山体阴影过于突出问题
飞舞的羽毛：arcgis出的山体阴影不如别人的清秀，总是大块大块的，也不是数据不好，今天又学习了！2018-08-31 15:15106961原创Oracle 18c本文链接：https://blog.csdn.net/hequhecong10857/article/details/102483690/制作步骤：1. 下载区域内的DEM数据，数据下载网站，可参考“地理空间数据云”2. 根据DEM生产山体阴影（HIllshade）为了使晕渲图具有一定的立体效果，需要生成立体阴影，在.
2020-12-02 15:01:42
2734
1
转载 【转载】Oracle 低版本客户端连接 18c 报ORA-28040 和 ORA-01017 错误的解决方法
飞舞的羽毛：在使用别人写的工具进行数据库连接的时候，提示ORA-28040错误，按照网上的方法进行修改以后提示密码错误ORA-01017，最后在原博主那里得到了解决，非常感谢，转载过来，没有经过博主的许可，但是文章甚好！益处甚多！共同学习！2018-08-31 15:15106961原创Oracle 18c本文链接：https://www.cnblogs.com/scoluo/p/13864672.htmlOracle 11g 的生命周期已经 ，18c 也已经正式发布，那么在安装Oracle.
2020-11-25 23:35:29
1149
原创 python通过高德地图接口获取指定范围POI
参考出处：https://blog.csdn.net/weixin_47796965/article/details/108372378高德地图的POI数据是开放使用的，最近看到参考文章，也决定试一下。免费使用请求最多返回1000条信息，本文主要通过对目标区域分块进行请求，实现对限制的规避，以达到解决问题的目标步骤：1.获取高德地图目标区域的范围2.将目标范围内划分为适量的区域，并生成中心点3.计算中心点的四至，并赋予中心点4.编写程序。依据高德地图LBS开放的多边形搜索功能，实现对各区域的.
2020-09-09 12:00:29
2852
2
原创 MySQL zip版本安装
原文链接：https://www.cnblogs.com/lxlin/p/9635350.htmlhttps://baijiahao.baidu.com/s?id=1630347658327095638&wfr=spider&for=pc 1.在MySQL官网上下载免安装版的zip文件（本文以mysql-5.7.14-winx64.zip为例） 2.将zip文件解压到本地，本文解压到如下目录：D:\softwares\mysql-5.7.14-winx64...
2020-08-31 09:58:43
118
转载 Python Matplotlib库 plt.title等中文乱码问题
转载自：https://www.cnblogs.com/shanger/p/13021452.html不少 python 的绘图程序，多会涉及下面两行代码plt.rcParams['font.sans-serif'] = 'SimHei'plt.rcParams['axes.unicode_minus'] = False一直费解，今天彻底搞清楚！matplotlib 是为 python 提供强大绘图功能的第三方库，它的配置文件即 .rc 文件，为 matplotlib 输出图形的几乎所.
2020-08-30 09:20:18
2813
原创 【Centos7】防火墙端口管理
需求背景在系统部署过程中，发现目标服务器之间网络正常，但是端口不通，检查防火墙状态，显示防火墙开启，外网服务器不应该轻易关闭防火墙，因此需要对防火墙进行端口配置。防火墙状态检查和改变：#1、查看防火墙状态sudo systemctl status firewalld#或firewall-cmd --state #2、开启防火墙sudo systemctl start firewalld #//马上生效，重启会恢复原来状态sudo systemctl enable firew
2020-06-06 18:48:38
313
原创 【python】实现类似sublime正则表达式的批量文件修改功能
需求背景因为通过sublime批量替换10多个G的xml文件遇到困难，sublime批量修改的时候，会打开指定文件，导致内存空间爆炸，哪怕内存容量够，每5G的修改，会在开始替换的时候再次内存爆炸。因此，本文计划以python的方式，实现sublime中的正则表达式查找替换指定内容的功能。环境python3 + vscode参考文章https://blog.csdn.net/sinat_36811967/article/details/86570911正文#%%import osimpor
2020-05-27 18:12:58
325
原创 【python】pandas匹配拼接两个excel列
在excel处理大量数据匹配过程中，虽然可以使用vlookup，但是数据量超过10万进行批量匹配的时候，效率非常差，因此使用python。经查，发现python通过pandas库的merge可以实现类似于SQL中join的功能，具体参考下文：https://pandas.pydata.org/pandas-docs/stable/getting_started/comparison/comparison_with_sql.html#compare-with-sql-joinimport..
2020-05-18 17:16:08
4811
4
原创 【oracle18c安装-2】centos7 + oracle18c建库启动
情景设定： 在完成系列1文章当中，oracle18c数据库安装后，进行sqlplus / as sysdba，可以登录到oracle，但是在启动的时候，startup，发现启动异常。调试了半天，试了各种手动配置.ora文件，新建ctl等，都以失败告终，最后采用了dbca建立数据库方式解决。首先复制一份$ORACLE_HOME/assistants/dbca/dbca.rsp 文件，按照文件说明，...
2020-05-07 15:15:42
203
原创 pyinstaller打包python（py）脚本为exe文件时的坑（os和sys）
今天写了一个简单的批处理脚本，为了给没有环境的同事用，通过pyinstaller -F xxx.py进行打包成可执行的单个exe文件py文件在调试的时候一切正常，但是打包成exe文件以后，运行出现一闪而退的现象。最后通过cmd命令 .\xxx.exe的方式，发现出现WinError 123错误，通过排查，发现pyinstaller打包后，os.path、sys.path为空，或者会是一些想不到的...
2020-04-13 22:38:08
2561
转载 【转载自CNBLOG】centos7 升级openssh版本
搬运自nmap的cnblog：https://www.cnblogs.com/nmap/p/10779658.html 测试后有效centos7.3和centos7.6升级完毕测试登录ssh以及重启后登录ssh均无问题。前期请自行配置好yum源（如果不会请百度）整个过程不需要卸载原先的openssl包和openssh的rpm包。不影响我们的操作本文的环境都是系统自带的op...
2020-04-12 16:01:55
583
原创 按sheet顺序合并有多个sheet的多个excel文件
按顺序合并有多个sheet的多个excel文件。在业务中，遇到要合并一个文件夹下多个包含同名、同顺序sheet的xlsx文件，通过python3，参考（copy大部分）代码：https://www.cnblogs.com/zlhuan/p/8011304.html除此之外，还有pandas方法的，以后再继续学习实现。实现说明：所有xlsx文件放在一个文件夹下，没有其他文件。pytho...
2020-04-11 10:04:23
760
2
原创 【centos-1】centos7 挂载硬盘，并将空间分配到home目录
最近在使用centos的时候，发现硬盘装了但是没有挂载，最后/home空间不够，不能存文件。所以有了此文。目标： 硬盘挂载的两种情况 格式化分区新硬盘 挂载新增空间到指定节点 硬盘挂载的两种情况 第1种是直接添加一块新硬盘，然后进行挂载。 第2种是对硬盘进行扩容后，对扩容后的空间进行分区再进行挂载。 情况一：新硬盘挂载流程在插上新硬盘以后，输...
2020-03-12 00:32:59
13174
2
原创 【oracle18c安装-1】centos7 + oracle18c安装
oracle18c安装和以前的11g差不多，这里挂出来的部分并不完全，仅针对我在安装过程中遇到的问题。流程大致如下：确定系统是否满足要求下载oracle18c安装包安装依赖包配置oracle安装路径和用户配置环境变量安装测试开始之前，先简单介绍一下oracle的安装方式。常见的安装方式有两种，一种在图形化界面下安装，另一种在命令行安装。图形化界面安装的教程较多，主要要注意编码...
2020-03-08 00:06:58
1380
原创 新手爬虫采集常遇到的墙问题
但凡多采集一些网站，多持续采集一段时间，就一定会被管理员发现，他们可能采取一系列的手段来阻止我们的采集过程。主要表现就是访问不了了、访问几次就断了，然后手动访问，或者换个终端以后完全没问题。面对这种情况，首先，我们要明确以下几个问题：我的爬虫是否过于频繁访问，给对方服务器带来了不可承受的负担，影响了对方服务器的业务？我的爬虫是否在采集对方不对外公布的信息，导致触犯了对方的防御机制？我的爬...
2020-02-13 12:26:39
550
转载 【转载】爬虫常见反爬思路
原始链接：https://blog.51cto.com/14237227/2362691爬虫立场爬虫的目的就是大规模地、长时间地获取数据，不过，总使用一个IP去爬网站，大规模集中对服务器访问，时间一长就有可能被拒绝，爬虫长时间爬取数据，还可能会要求验证码，即便是多个账号轮流爬取仍然会出现要求输入验证码的情况。下面5个技巧是爬虫常用的：技巧一：设置下载等待时间/下载频率大规模集中访问对服...
2020-02-13 08:50:34
255
转载 python--pip--安装超时的解决办法
pip安装包经常失败，原因是网速慢，国外服务器连接超时，默认15s解决办法如下：1、2都可以3没试过1、使用timeout参数增加时间 python -m pip install --upgrade pip --timeout 60002、更改安装源到国内镜像pip install --pre scapy[complete] -i https://mirrors.ali...
2020-02-13 00:37:52
1058
原创 selenium基础3-修改header、cookies等webdriver初始options
虽然ip可以使用代理，但是在爬取过程中，浏览器请求还是很容易被waf等工具识别出来，非常容易被墙，所以在使用selenium的时候，就在想，能不能在发送请求的时候像使用request一样，动态修改header。先说结论，在查阅资料以后，证明selenium不支持动态修改header请求，有些博主也给出了一些说法。github issueWebDriver lacks HTTP respon...
2020-02-13 00:35:58
8683
原创 selenium基础2-优缺点、三种等待方式wait和局限
最近用selenium进行采集，遇到一些麻烦，对selenium的优缺点有了更深刻的理解。先说说优点吧：可视化界面，初学容易上手。不深入理解动态加载和后端的交互也可以进行数据采集比较符合普通人操作网页进行复制粘贴的习惯缺点也很明显：加载效率低，容易造成阻塞，采集效率也就不高比较不易迁移，要适配没有界面的linux需要进行较多修改可视化的采集容易遇到浏览器问题，比较不稳健我...
2020-02-12 17:27:50
2057
原创 Python爬虫库-1-BeautifulSoup的使用
Beautiful Soup是一个可以从HTML或XML文件中提取数据的Python库，简单来说，它能将HTML的标签文件解析成树形结构（网页原本就是一个树形结构），然后获取到指定标签的对应属性。通过Beautiful Soup库，我们可以将指定的class或id值作为参数，来直接获取到对应标签的相关数据，是python爬虫当中的常用库，python 3环境下。内容大纲：安装 调用...
2019-12-17 13:48:00
655
转载 VScode快捷键
按 Press 功能 Function Ctrl + Shift + P，F1 显示命令面板 Show Command Palette Ctrl + P 快速打开 Quick Open Ctrl + Shift + N 新窗口/实例 New window/instance Ctrl + Shift + W 关闭窗口/实例 Close window/in...
2019-12-10 09:30:08
172
转载 【转载】Python-替换或去除不能用于文件名的字符
今天在爬虫的时候，爬了二十条程序就莫名卡着不动了，还以为是被服务器禁止访问。还去加了user-agent池，随机获得user-agent构成headers，没想到居然是最后文件命名的时候出问题了。用于命名的字符串出现了非法的字符。网上查找资料，构造一个函数，通过正则表达式除去字符串中发非法字符：import redef validateTitle(title): rstr = ...
2019-12-09 15:56:14
305
原创 selenium基础1
selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。常用的当然是模拟Firefox和Chrome，毕竟方便调试。通过这种可视化、模仿人浏览的方式，更为简单、直观的的获取页面上的信息...
2019-11-27 16:02:11
144
转载 【git】新建本地仓储并上传到GitHub
GitHub是常用的代码管理仓库，便于我们对代码版本更新迭代进行管理，对于菜鸟来说，也有助于随时随地可以获取自己写的代码信息，与其他人进行分享和交流。菜鸟教程有非常全面的描述，这里把操作简化成直接的流程：一般工作流程如下：克隆 Git 资源作为工作目录。 在克隆的资源上添加或修改文件。 如果其他人修改了，你可以更新资源。 在提交前查看修改。 提交修改。 在修改完成后，如果发现...
2019-08-03 22:53:08
93
原创 【GreedyAI作业2】第四周课程心得
决策树与随机森林决策树是一个类似于流程图的树结构（类似二叉树），支持非线性运算。一、一种决策树示例如何判断如何决策？方法之一：信息熵的方法条件熵：在固定条件下，信息的不确定程度信息熵：信息的不确定程度信息增益：信息熵的变化量信息熵示例：抛硬币如何做决策？信息熵、条件熵、信息增益的关系。例如预测是否打高尔夫的例子，先计算各条件与是否打...
2019-07-20 21:13:55
238
翻译 《软件项目管理》阅读总结2-软件项目实施步进式方法
标识项目目标和范围 标识目标及有效度量 目标：要完成、要交付的结果是什么？ 有效度量：交付的底线是什么？交付的成果是什么？目标要做到明确、具体、可度量。 确立项目全权负责人 项目全权操作、负责人，要有人做决定，有人背锅，有人说了算。 标识利益相关者 用户内部、用户外部 对于用户，多重利益诉求，可以成立代表委员会，确定具体利益的具体代言人。 ...
2019-07-19 08:00:54
323
转载 机器学习中的格式变化之--data.values.reshape(-1,1)
转自：https://blog.csdn.net/wld914674505/article/details/80460042data.values.reshape(-1,1)z = np.array([[1, 2, 3, 4], [5, 6, 7, 8], [9, 10, 11, 12], [13, 14, 15, 16]...
2019-07-10 00:05:52
16578
1
转载 使用CentOS7卸载原装openjdk安装自己的JDK1.8
关于JDK1.8 与之前的版本相比有哪些变化和新特性我也不在这详细的说明了,毕竟一度娘啥都有了,既然不多说那就直接开始吧!!准备资料: 1、已经在VMware安装好了的虚拟机,本文使用的是CentOS7,我就以这个为例,如果又不知道怎么安装的朋友可以参考我第一篇文章,上面详细的介绍了如何安装CentOS7 下载安装centos7 2、jdk:jdk-8u1...
2019-07-09 16:53:20
4440
2
转载 linux系统查找目前使用的JDK路径
原文链接：https://www.cnblogs.com/cnmenglang/p/6270375.html1.echo $JAVA_HOME使用$JAVA_HOME的话能定位JDK的安装路径的前提是配置了环境变量$JAVA_HOME，否则如下所示，根本定位不到JDK的安装路径[root@localhost ~]# java -versionjava version "1.7.0_...
2019-07-09 09:46:36
508
原创 【GreedyAI作业2】第二周课程心得
本周课程主要学习了线性/逻辑回归和朴素贝叶斯两个内容。课程讲解十分清晰，收获很大，下来消化巩固还不够，还应该再把老师的代码再从新学习和输出一遍，切切！线性回归线性回归是利用数理统计中回归分析，来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法，运用十分广泛。其表达形式为y = w'x+e，e为误差服从均值为0的正态分布。回归分析中，只包括一个自变量和一个因变量，且二者的...
2019-07-06 16:36:57
275
原创 《软件项目管理》阅读总结1-软件项目管理的主要内容
软件项目管理的目标，是确保保质保量的完成一个软件项目，完成项目的同时，还要考虑效益和自身发展。这个过程中涉及项目前期可研、项目前期、项目中和项目后期四个部分的内容。 前期可研 项目前期 项目中期 项目后期 1.前期可研一个项目是否可行，主要涉及项目价值、项目要求与自身实力匹配、项目风险、项目实施客观条件等内容，关系到是否需要继续跟进一个项目的具体工...
2019-07-01 21:27:30
2053
原创 【GreedyAI作业1】第一周课程心得
第一周直播课期间，主要自学了基础课，又上了两节直播课，对机器学习有了初步的理解。机器学习其实可以理解成统计学在计算机支持下的的延伸，对于统计学、线性代数、高等数学、计算机编程、算法等基础知识都有一定的要求，可以在学习机器学习的过程中，结合相关问题对基础知识在进行更深入的学习。第一课主要对机器学习的基本概念、流程、预处理、分类等简单内容进行了介绍，通过一个广告投放的案例对线性回归模型的实现进...
2019-06-28 17:07:03
289
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人