大数据
Evan-^_^
这个作者很懒,什么都没留下…
展开
-
如何使用python查看百度指数
百度指数获取原创 2022-10-25 17:34:59 · 34 阅读 · 1 评论 -
百度指数爬虫城市对应代码
【代码】百度指数爬虫城市对应代码。原创 2022-09-15 16:28:43 · 2100 阅读 · 1 评论 -
车牌对应省份城市
车牌对应省份城市原创 2022-07-28 17:13:00 · 757 阅读 · 0 评论 -
ignite 表结构数据导出到csv文件
目前暂未找到ignite提供的导出sql命令,但是提供了一个outputformat参数,可以设置sql结果的导出格式那么其实可以直接使用linux自带的 > 命令将csv文件格式数据加到指定文件中最终命令如下./sqlline.sh --verbose=true -u jdbc:ignite:thin://127.0.0.1 --run=/tmp/out.sql --outputformat=csv | sed "s/'/\"/g" > /tmp/aa.csv其中out.sql为一原创 2021-07-01 16:22:35 · 452 阅读 · 1 评论 -
ignite在使用jdbc连接插入数据时,开启分区感知功能后会变慢的问题
近日在使用ignite的过程中,为了提升读写速度,开启了分区感知功能,经过测试,key-value结构的数据读写速度都有很大提升,但是当使用表结构存储的时候,返现读取速度确实变快了,但是写入速度反而变慢由于测试几轮都是这样的结果,同时官网确实有写jdbc也支持分区感知功能,于是有点怀疑其代码的合理性debug了一下并研究源码之后,发现问题所在主要问题出现在如下两个方法中:一个是更新关联缓存的分区信息/** * Recreates affinity cache if affinity to原创 2021-06-28 14:56:16 · 545 阅读 · 0 评论 -
yanagishima-18连接presto,报错:Query did not match any selection rule
yanagishima-18连接presto,报错:Query did not match any selection rule当安装完yanagishima,正常启动后,UI页面也可以看到,但是无法显示库,表等信息,sql查询也无法使用,同时报错:Query did not match any selection rule原因为你的presto配置了resource_groups,同时yanagishima有自己的resource,而yanagishima的source不在你presto配置的sour原创 2021-06-28 14:17:35 · 1161 阅读 · 0 评论 -
hbase常用 java api
package com.sxt.hbase;import java.io.IOException;import java.util.ArrayList;import java.util.List;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell;import org.ap...原创 2019-06-22 15:39:34 · 139 阅读 · 0 评论