[28]CarbonData
hjw199089
从事大数据
(1)查询引擎开发-presto深度开发-hive开发-自研查询引擎开发
(2)大数据用户行为分析
(3)spark、sparkstreaming、storm、druid开发应用经验
(4)数据仓库开发
展开
-
[1]CarbonData Introduction And Docs 笔记
CarbonDataApache CarbonData is a new big data file format for faster interactive query using:advanced columnar storage,index,compressionencodingtechniques to improve computing efficiency, whi...原创 2019-03-18 12:27:40 · 232 阅读 · 0 评论 -
[2]Installing and Configuring CarbonData to run locally with Spark Shell
官方文档:Quick StartRun locally with Spark Shellbin/spark-shell --jars /Users/xxx/Documents/software/carbondata/apache-carbondata-1.5.2-bin-spark2.2.1-hadoop2.7.2.jar.....Welcome to ____ ...原创 2019-03-18 15:11:10 · 261 阅读 · 0 评论 -
[3]CarbonData编译与可能的依赖错误
carbondata 编译依赖错误(1)拉取carbondata master分支build失败Could not resolve dependencies for project org.apache.carbondata:carbondata-core:jar:1.6.0-SNAPSHOT这可能是当前的master分支相关依赖在maven中央仓库中不存在。如现在mater分支为1....原创 2019-03-22 22:04:16 · 497 阅读 · 0 评论 -
[4]Carbondata integration-presto查询carbondata
1、编译carbondata获得presto connector相关jar.参考:CarbonData编译与可能的依赖错误在presto(建议0.210+版本,否则spi接口不一致presto无法识别carbondata)安装目录的plugin目录下新建carbondata目录,将carbondata编译生成的相关jar拷贝到该新建目录:cd pluginmkdir carbondata...原创 2019-03-22 22:44:58 · 826 阅读 · 0 评论