Apache ShardingSphere(Incubating)周报 2019.3.11-2019.3.15

本周工作

ShardingSphere功能开发


新模块开发


1. 完成ShardingSphere数据脱敏与京东数科数据安全部门对接,下周可开始联调测试。

2. 独立脱敏数据源&分片脱敏数据源测试用例编写。

3. 新增Sharding-JDBC和Sharding-Proxy的Docker-Compose方式启动配置。

4. Sharding-Proxy事务模块完全SPI化。


功能优化&重构


1. 重构Sharding-Core模块,完成对Sharding-Core中api/common/parse/optimize/rewrite/route/execute/merge模块的解耦。

2. 优化Sharding-Core的Optimize模块、数据脱敏模块。

3. ShardingSphere-Examples项目工程迁移及重构。


Bug修复


1. 修复多线程并发情况下,Insert解析结果无法正确缓存、执行报错问题。

2. 修复Sharding-Proxy在异常情况不返回error response的问题。

3. 修复SQL表达式中丢失空格解析的问题。

4. 修复DB. TABLE中空格解析问题。

5. 修复一个线程内创建多个ShardingConnection场景下,XA事务资源重复注入报错问题。

6. 修复Sharding-Proxy使用PrepareStatement时,INSERT语句使用自增主键报错问题。


Issue处理


1.处理回复#1979,#2012,#1971,#1967,#1954,#2036,#2034,#1711,#1827,#1980,#1990。


ShardingSphere生态建设


官网建设


1. ShardingSphere-4.0.0官方文档更新部署上线。

2. 新增对官方文档的数据脱敏、性能测试、使用手册、Sharding-Proxy章节的英文翻译。

3. 新增ShardingSphere分布式事务Saga模块官方文档。


发版准备


1. 完成ShardingSphere Apache Release的Copyright校对替换。

2. 完成ShardingSphere POM文件版本变更过替换。

3. 完成ShardingSphere POM文件版本变更过替换。

640?wx_fmt=jpeg



640?wx_fmt=jpeg 640?wx_fmt=jpeg


下周计划

ShardingSphere功能开发


新模块开发


1. ShardingSphere数据脱敏与京东数科数据安全部门解密联调测试。

2. ShardingSphere独立加解密数据源多场景测试。

3. 新增SpringBoot启动、Orchetration配置保存对Collection类型参数的支持。

4. 分布式事务自动化集成测试编写。


问题调研


1. 调查读写分离场景下,主库路由查询问题。

2. 调查Sharding-Proxy读写分离场景下多SchemaSHOW COLUMNS报错问题。


ShardingSphere生态建设


官网建设


1. 分布式事务相关官方文档编写。


对外宣传


1. DBAPlus社区ShardingSphere技术分享(2019-3-15周三晚8:00)

2. 京东技术说ShardingSphere技术分享(2019-3-23周六下午2:00)


发版准备


1. 模拟发布ShardingSphere-4.0.0 Apache Release。


640?wx_fmt=gif


Apache ShardingSphere(Incubating)自2016开源以来,不断精进、不断发展,被越来越多的企业和个人认可:Github上收获6000+的stars,70+公司企业的成功案例。此外,越来越多的企业和个人也加入到Apache ShardingSphere(Incubating)的开源项目中,为它的成长和发展贡献了巨大力量。


我们从未停息过脚步,聆听社区伙伴的需求和建议,不断开发新的、强大的功能,不断使其健壮可靠!

开源不易, 我们却愿向着最终的目标,步履不停!

那么,正在阅读的你,是否可以助我们一臂之力呢?分享、转发、使用、交流,以及加入我们,都是对我们最大的鼓励!

项目地址:

https://github.com/apache/incubator-shardingsphere


更多信息请浏览官网:

http://shardingsphere.apache.org/


640?wx_fmt=jpeg


扫码进群

640?wx_fmt=jpeg


在使用Python来安装geopandas包时,由于geopandas依赖于几个其他的Python库(如GDAL, Fiona, Pyproj, Shapely等),因此安装过程可能需要一些额外的步骤。以下是一个基本的安装指南,适用于大多数用户: 使用pip安装 确保Python和pip已安装: 首先,确保你的计算机上已安装了Python和pip。pip是Python的包管理工具,用于安装和管理Python包。 安装依赖库: 由于geopandas依赖于GDAL, Fiona, Pyproj, Shapely等库,你可能需要先安装这些库。通常,你可以通过pip直接安装这些库,但有时候可能需要从其他源下载预编译的二进制包(wheel文件),特别是GDAL和Fiona,因为它们可能包含一些系统级的依赖。 bash pip install GDAL Fiona Pyproj Shapely 注意:在某些系统上,直接使用pip安装GDAL和Fiona可能会遇到问题,因为它们需要编译一些C/C++代码。如果遇到问题,你可以考虑使用conda(一个Python包、依赖和环境管理器)来安装这些库,或者从Unofficial Windows Binaries for Python Extension Packages这样的网站下载预编译的wheel文件。 安装geopandas: 在安装了所有依赖库之后,你可以使用pip来安装geopandas。 bash pip install geopandas 使用conda安装 如果你正在使用conda作为你的Python包管理器,那么安装geopandas和它的依赖可能会更简单一些。 创建一个新的conda环境(可选,但推荐): bash conda create -n geoenv python=3.x anaconda conda activate geoenv 其中3.x是你希望使用的Python版本。 安装geopandas: 使用conda-forge频道来安装geopandas,因为它提供了许多地理空间相关的包。 bash conda install -c conda-forge geopandas 这条命令会自动安装geopandas及其所有依赖。 注意事项 如果你在安装过程中遇到任何问题,比如编译错误或依赖问题,请检查你的Python版本和pip/conda的版本是否是最新的,或者尝试在不同的环境中安装。 某些库(如GDAL)可能需要额外的系统级依赖,如地理空间库(如PROJ和GEOS)。这些依赖可能需要单独安装,具体取决于你的操作系统。 如果你在Windows上遇到问题,并且pip安装失败,尝试从Unofficial Windows Binaries for Python Extension Packages网站下载相应的wheel文件,并使用pip进行安装。 脚本示例 虽然你的问题主要是关于如何安装geopandas,但如果你想要一个Python脚本来重命名文件夹下的文件,在原始名字前面加上字符串"geopandas",以下是一个简单的示例: python import os # 指定文件夹路径 folder_path = 'path/to/your/folder' # 遍历文件夹中的文件 for filename in os.listdir(folder_path): # 构造原始文件路径 old_file_path = os.path.join(folder_path, filename) # 构造新文件名 new_filename = 'geopandas_' + filename # 构造新文件路径 new_file_path = os.path.join(folder_path, new_filename) # 重命名文件 os.rename(old_file_path, new_file_path) print(f'Renamed "{filename}" to "{new_filename}"') 请确保将'path/to/your/folder'替换为你想要重命名文件的实际文件夹路径。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值