- 博客(2)
- 资源 (4)
- 收藏
- 关注
原创 使用Presto查询hive表数据时报"Error opening Hive split hdfs"问题,及解决方法
问题如下,在使用presto查询hive表中数据时,报了“Error opening Hive split hdfs”,详细的日志,意思是Hive在处理数据的时候使用的是ORC文件有问题,但是看了读取的文件,明显是snappy格式的文件,所以读取的文件是畸形的ORC文件。现在很简单,查看我们的Hive建表语句。show create table xxx表。查看了一下Hive的建表语句,发现...
2018-11-14 20:56:13 5124 2
原创 mysql大表的解决方案,及Hive分页查询
先说一下遇到的问题,然后给出自己的解决方案,虽然不一定是最佳的解决方法,但是目前确实解决了公司的大表数据问题,如果其他小伙伴有更好的解决方法,也请多多交流,给出自己的解决方法。目前所有的数据和工具组件都是基于腾讯云搭建和管理,先说下我们遇到的情况:1.mysql表查询数据量较大(最大的一张表已经达到33亿条数据,整个mysql已经达到2.9T的数据存储),2.mysql表每日新增数据量...
2018-11-05 10:48:23 2630
Windows下git bash工具和gitui下载 版本2.17.6 64位 亲测可以使用
2020-07-25
gitlab-ce-10.8.4-ce.0.el7.x86_64.rpm
2020-07-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人