奋斗的阿杰的博客

原创 数据资产图谱 – 更新中

本人整理了1940-2026年的日月年站点数据；也包含来源于CMA的常规气象要素等，包含降水/日照时长/辐射等，以及各种属性数据汇总，有意向的斯我。

原创 中国地面资料V3数据集

【中国地面资料V3数据集】极速发货，电子版资料，直接发邮箱或网盘，方便快捷！

原创 国内340多个城市房价信息汇总

国内340个城市，月度和年度一手房二手房房价元/m2数据。

原创 中国国家级地面气象站基本气象要素日值数据集(V3.0)

该数据集包含1951年1月至今中国2474个国家级地面气象站的日值观测数据，总量21.3GB，以TXT文本格式存储。涵盖气温、湿度、风速、日照、降水、蒸发、气压和地温等8类气象要素，包含平均、最高、最低值等详细指标。数据仅供科研使用，禁止商用。

原创 个人耗费好几个月整理采集

原创 通过WebService获取气象局数据

摘要：本文介绍了ktj作业的数据获取流程，主要包括5个核心部分：当日气象要素、预警信息、降水量等数据、未来5天天气预报及3小时间隔的精细化预报。同时提供了存量数据的获取方式，用户可通过私信联系获取历史气象数据。该流程为气象数据分析提供了完整的数据采集方案。

原创 MySQL 8.0 生产环境备份脚本 (Percona XtraBackup 8.0+)

MySQL 8.0生产环境备份脚本摘要 本脚本使用Percona XtraBackup 8.0+工具实现MySQL 8.0数据库的备份管理，主要功能包括： 备份类型： 全量备份(full)：完整数据库备份 增量备份(inc)：基于最近备份的增量备份 核心功能： 自动备份链管理 备份准备(prepare)功能用于恢复前准备 备份验证(verify)检查备份完整性 自动清理过期备份(默认保留7天) 安全特性： 使用独立凭证文件存储密码 备份目录锁定保护 日志记录和邮件告警功能 性能优化： 多线程备份(默认4线程

原创 关于Oracle执行计划杂谈

本文详细介绍了Oracle执行计划的相关概念和优化方法。主要内容包括：1.关键概念：Rowid伪列、Recursive SQL、行源(RowSource)、谓词(Predicate)等；2.数据访问方法：全表扫描(FTS)、ROWID访问、索引扫描(包括唯一扫描、范围扫描、全索引扫描和快速扫描)；3.表连接方式：排序合并连接(SMJ)、嵌套循环(NL)和哈希连接(HJ)的原理及适用场景；4.连接优化建议：根据数据量大小、索引情况和查询条件选择合适的连接方式。文章通过实例说明如何分析执行计划，帮助DBA和开发

原创 全国邮政编码，包括：省份 市 县区 长途区号 邮政编码

全国邮政编码，包括：省份 市 县区 长途区号 邮政编码

原创 webservice生成各种时间维度&节假日&调休日&工作日&农历&老黄历

1、公立日期2、农历日期3、老黄历4、季节5、工作日&节假日&调休日6、放假天数&调休建议7、二十四节气等

原创 数据接口实现行业代码及其分类

行业代码及其分类:1、行业大类2.、行业名称&层次3、行业名称&英文4、行业绝对路径，用于快速检索

原创 行政区划XML接口数据文件

行政区划XML接口数据文件（省份+区县+政府所在地）

原创 webservice获取全国省份区县编码（拼音全拼+拼音简写）

全国省级字典(省+区县)1、各级编码2、拼音全拼3、拼音缩写

原创 使用webservice生成节假日/双休日/工作日信息

节假日维度信息,包含工作日/双休日/调休日/节假日

原创 Oracle之提高PLSQL的执行性能

在Oracle实际开发中，在大数据量的时候，如何减少解析的次数，减少解析次数可以大大的提高数据库的性能

原创 Oracle热备过程中对数据库崩溃的处理方法

Oracle热备过程中，出现数据库崩溃，断电等突发情况如何处理

原创 使用RMAN联机重做日志文件、数据文件损坏的恢复

使用RMAN联机重做日志文件、数据文件损坏的恢复

原创 Oracle之Rman非归档模式下的完全恢复

磁盘损坏导致Oracle数据文件、控制文件、重做日志文件都删除情况下，如何全库恢复。

原创 Oracle数据仓库之字典标准设计

Oracle数据仓库数据字典设计

原创 Oracle对数据库行和数据库的监控

本文是实现Oracle对数据行、数据库的监控，仅供参考

原创 Docker离线和在线安装部署

docker离线和在线部署安装

原创 Nginx在线部署和离线部署方式

允许sendfile方式传输文件，默认为off，可以在http块，server块，location块。#连接超时时间，默认为75s，可以在http，server，location块。#最大连接数，默认为512。

原创 Oracle数据立方体多维数据用CUBE处理

Oracle数据立方体多维数据用CUBE处理

原创 【经验03】spark处理离线数据速度缓慢遇到的坑

03-spark处理离线数据速度缓慢遇到的坑

原创 【经验02】记录一次生产spark离线任务产生数据倾斜的问题处理

记录一次生产spark离线任务产生数据倾斜的问题处理

原创 【经验01】spark执行离线任务的一些坑

spark跑离线任务的一些坑

原创 Oracle闪回数据库【Oracle闪回技术】（二）

Oracle默认是不开启闪回数据库的。如果开启闪回数据库的前提条件是，开启Oracle归档模式并启用闪回恢复区。因为闪回日志文件存放在闪回恢复区中，如果在RAC环境下，必须将闪回恢复区存储在集群文件或者ASM文件中。

原创 理解Oracle闪回级别【Oracle闪回技术】（一）

Oracle闪回技术

原创 Oracle优化重做日志缓冲区【数据库实例优化系列四】

Oracle优化重做日志缓冲区【数据库实例优化系列四】

原创 Oracle数据常驻程序内存优化【数据库实例优化系列三】

在生产中，为提高用户的访问速度。可以将经常使用的表常驻与内存中。避免频繁的访问磁盘，降低IO。虽然会占用一定的内存，但是效果还是很明显的。如果不是用了，DBA可以将其删除。

原创 Oracle程序常驻程序内存优化【数据库实例优化系列二】

Oracle程序常驻程序内存优化【数据库实例优化系列二】

原创 Oracle系统参数调整【数据库实例优化系列一】

Oracle实例是：内存组件和相关的后台进程组成。这些内存组件提高了数据库的运行，而后台进程负责管理系统和内存组件。

原创 Oracle之RMAN联机和脱机备份（二）

Oracle之RMAN联机和脱机备份（二）

原创 Oracle之RMAN连接数据库及备份与恢复（一）

Oracle之RMAN连接数据库及备份与恢复（一）

原创 Oracle解析exp、imp及常见的问题

Oracle解析exp、imp及常见的问题

原创 Oracle之SQL plus的一些经验心得

Oracle之SQL plus的一些经验心得

原创 Oracle删除数据库的步骤【谨慎操作】

Oracle删除数据库的步骤【谨慎操作】

原创 Oracle使用内部包自定义创建表空间和用户

Oracle使用内部包自定义创建表空间和用户

原创 【已验证】PostgerSQL之pg_rman项目实战

PostgerSQL之pg_rman项目实战

原创 【已测试】PostgreSQL备份和还原

pg的备份和还原，生产环境容灾