大数据就是个大杂烩
文章平均质量分 89
大数据工程师 === SQL BOY
硅谷工具人
一颗么得灵魂的工具人,学废了。
展开
-
Elasticsearch基础
分词器是es中一个组件,它会将一段文本按照一定的逻辑,分析成多个词语,同时对这些词语进行常规化的一种工具;在/opt/local/elasticsearch/plugins/目录下创建ik目录。ES会将text格式的字段按照分词器进行分词,并编排成倒排索引,这样es的查询就非常快。将以下2个配置,修改为自己安装的elasticsearch对应的版本号,不然会报错。同样kibana不能用root启动,所以修改权限和所有者为es。执行以下命令,是临时修改的,重启后会失效的。然后修改权限和所有者为es。原创 2023-08-29 15:22:21 · 703 阅读 · 0 评论 -
Spark项目Java和Scala混合打包编译
实际开发用有时候引用自己写的一些java工具类,但是整个项目是scala开发的spark程序,在项目打包时需要考虑到java和scala混合在一起编译。今天看到之前很久之前写的一些打包编译文章,发现很多地方不太对,于是重新整理更新如下。原创 2023-08-24 15:07:20 · 1621 阅读 · 0 评论 -
【五一创作】Springboot+多环境+多数据源(MySQL+Phoenix)配置及查询(多知识点)
除了在yml中配置spring.datasource.mysql或者spring.datasource.phoenix自定义数据源以外,还需要再java中单独配置数据源。新建config文件夹,针对不同的数据源进行单独的配置。原创 2023-04-30 22:13:09 · 2793 阅读 · 4 评论