- 博客(49)
- 收藏
- 关注
RSS订阅原创 聊一聊Oracle的空间计算函数SDO_NN
上面这个表达式的含义也就是说在test2中找到一个距离test1很近的，sdo_num_res=1参数就是找一个，0.5是在0.5度或者米的范围内找。网上对这个函数介绍的很少，对使用上也很模糊，我来补充一下，让大家了解一下这个函数。test1的需要找到表，test2是从哪个表找，这样子应该可以理解了哈，
2024-07-08 15:55:45
176
原创 简单聊一下Oracle，MySQL，postgresql三种锁表的机制，行锁和表锁
Oracle，MySQL，postgresql三种锁表的机制，主要介绍行锁和表锁的机制和案例分析
2024-06-10 21:28:32
564
原创 分享一个自己写的很有用的python脚本，用于查看python所有包名称和大小的
这个脚本可以把所有包的名称+大小打印出来，然后可以方便让自己卸载一些不用的很大的
2024-06-06 16:52:39
605
原创 获取boss直聘的岗位信息--2023年7月份
在本篇博客中，我将分享如何使用Selenium进行网页数据采集，并展示一个具体的代码示例。我们将通过Selenium访问一个招聘网站，抓取招聘信息，并将数据保存到CSV文件中。
2024-06-05 10:44:40
505
原创 国内“大模型”AIGC产品体验分享
随着腾讯元宝APP的正式上线，国内大模型产品市场迎来了又一位重要参与者。我有机会体验过一些国内外的“大模型”AIGC产品，如百度的文心一言、阿里的通义千问、OpenAI的GPT-4，以及刚上线的腾讯元宝。
2024-06-05 10:34:04
477
原创 程序员职业生涯中的重要职业素养
作为程序员，具备上述职业素养对职业生涯的成功至关重要。持续学习、写出高质量代码、有效沟通、具备责任感和职业道德、适应变化并创新，都是每个程序员应努力培养的素质。在实际工作中，展示这些职业素养，不仅有助于个人职业发展，也对团队和项目的成功起到了积极作用。
2024-06-05 10:32:31
300
原创 GPT-4o横空出世：技术革命的新篇章
GPT-4o是OpenAI最新发布的语言模型，展现了在自然语言理解和生成方面的显著进步。与之前的版本（GPT-3.5和GPT-4.0）相比，GPT-4o具备更强的上下文理解能力、高质量的文本生成，以及优秀的多模态处理能力，同时在多语言支持和专业领域应用上也有明显提升。
2024-06-05 10:26:58
875
原创 大众点评店铺信息及好评，中评，差评的爬虫程序最新版2024-5月份之差评数据的采集
将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来，都是直接换个cookie就可以用了
2024-05-31 11:52:52
605
原创 大众点评店铺信息及好评，中评，差评的爬虫程序最新版2024-5月份之中评数据的采集
将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来，都是直接换个cookie就可以用了
2024-05-31 11:51:14
129
原创 大众点评店铺信息及好评，中评，差评的爬虫程序最新版2024-5月份之好评数据的采集
将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来，都是直接换个cookie就可以用了
2024-05-31 11:48:53
577
原创 大众点评店铺信息及好评，中评，差评的爬虫程序最新版2024-5月份之店铺详情信息采集
将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来，都是直接换个cookie就可以用了
2024-05-31 11:40:06
178
2
原创 大众点评店铺信息及好评，中评，差评的爬虫程序最新版2024-5月份之基础店铺采集
将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来，都是直接换个cookie就可以用了
2024-05-31 11:35:50
447
1
转载 第一篇：爬虫基础内容回顾
我发现博客园里面作者死不悔改奇男子更新的js逆向爬虫系列非常好，特意这里一下发给大家看看，有条件的去关注一下原作者哟，每天一篇
2024-05-19 22:58:53
29
原创 使用fme工具把数据入到数据库中，如MySQL，Oracle，postgresql等
使用fme工具把数据入进数据库的方法，这个fme工具使用教程比较少，所以特意写了一篇文章来介绍常规的入数据的方法。另外如果有需要，你们可以留言，我介绍一下如何使用fme入有空间属性的数据，比如gis数据的导入。
2024-05-19 15:27:57
381
原创 知网相关文章采集
step为每批次爬取的页数，group_num是能够爬取完整step的组数。Save_path = r'C:\Users\Childers\中国知网关键词.xlsx'print(f'第{j}页爬取失败！# 当能够获取完整step时，循环最大值设置为step。# 当不能够获取完整的step时，循环最大值设置为剩余获取页数。# 解决代理报错问题。print(f'正在爬取第{j}页')"""step为每批次爬取的页数，开始页数，保存路径"""# 保存获取失败的网页页码。# 上次无响应的页数。
2024-05-11 10:06:31
348
原创 大数据三大组件(spark,hadoop,hive)的安装之spark之伪分布式
1、首先进入spark-shell命令窗口输入import org.apache.spark.sql.hive.HiveContext。说明一下，本次安装的spark是经过编译后的可以直接处理hive数仓的spark2.4.0版本。6、配置sparksql的远程连接。3、下面这个些命令是解压spark的，解压完可以直接用。5、测试是否可以正确访问hive中的数据库成功。8、测试链接，这个是我在datagrip测试的。
2024-02-23 22:02:30
416
原创 大数据三大组件(spark,hadoop,hive)的安装之hive之伪分布式
cp mysql-connector-java-5.1.40/mysql-connector-java-5.1.40-bin.jar /usr/local/hive/lib #将mysql-connector-java-5.1.40-bin.jar拷贝到/usr/local/hive/lib目录下。sudo tar -zxvf ./apache-hive-3.1.2-bin.tar.gz -C /usr/local # 解压到/usr/local中。
2024-02-15 13:40:40
841
原创 hive远程连接时报无法创建数据库或表的权限问题
然后可以在Hadoop的bin目录下执行这个命令bin/hdfs dfs -chmod -R 777 /usr/local/hadoop/tmp/dfs/data。报这个错误是因为对应的/usr/local/hadoop/tmp/dfs/data目录没有给Hadoop等执行权限。如果大家遇到像我这种问题可以这样子解决。
2024-02-03 14:40:23
352
原创 大数据三大组件(spark,hadoop,hive)的安装之Hadoop之伪分布式
主要分享安装spark,hadoop,hive的教程，还有一些远程连接需要注意的问题
2024-02-02 21:02:58
768
原创 Ubuntu20安装postgres12以及配置远程连接
3、安装完了可以看看是否安装成功，可以用sudo -u postgres psql -c "SELECT version();2、再执行安装postgres命令sudo apt install postgresql postgresql-contrib。8、再输入sudo vim /etc/postgresql/12/main/pg_hba.conf配置这一行。4、依次用这两条命令可以使用超级用户psql登录，方便修改默认密码。6、修改postgres超级用户的密码。13、也可以，到这里就结束了。
2024-01-20 23:45:08
773
1
原创 python调用某德地图的地址与经纬度转换
你就可以把地址比如清华大学转为（116.326582,40.002436）。反过来说也可以通过经纬度转为地址。2然后创建一个应用选取key值。主要取到应用的key值。3然后可以用代码转换了。
2023-11-05 17:00:46
248
原创 google浏览器使用edge浏览器的插件
在C:\Users\用户名\AppData\Local\Microsoft\Edge\User Data\Profile 1\Extensions找到lpmhmbogdfoddanepgnbngfeofdjdnge(这个是GS的文件夹)这个是我的目录C:\Users\23138\AppData\Local\Google\Chrome\User Data\Default。3：把这个文件夹复制到谷歌浏览器的插件目录下面去，查找方法和上面一样的（chrome://version）5：加载已解压的程序。
2023-09-13 14:25:17
1082
原创 谷歌浏览器历史版本109-114的，需要其他版本的我再更新
链接：https://pan.baidu.com/s/1IsNuOhQLHAi1igpSjThpkA?
2023-08-21 15:20:45
1812
10
原创 17k小说网站找登录接口
然后输出账号密码登录，再去找两个新的login接口，就可以找到了，而且这个时候为post请求。1 实现进入到网站中勾选这两个地方（保留日志，已停留节流模式）3可以找到两个login接口。
2023-07-16 13:52:22
177
原创 用insert into在Oracle插入中文字符乱码
注意值就是你查select userenv('language') from dual;--查看编码是否一致。进入此电脑的属性选择系统设置，添加一个NLS_LANG。然后在path路径再加一条%NLS_LANG%;注意我是修改后的了，你们一般都是不一致的。查看这两个图片编码是否一致，重启电脑后重新插入就完美解决。插入中文会报乱码错误。
2023-06-11 16:13:08
920
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人