- 博客(12)
- 资源 (6)
- 收藏
- 关注
原创 Flink1.12.0简单实现wordcount
文章目录前言一、Flink1.12.0简单实现wordcount二、使用步骤1.引入pom.xml2.主类3.运行结果总结前言Flink1.12.0简单实现wordcount一、Flink1.12.0简单实现wordcountFlink1.12.0简单实现wordcount二、使用步骤1.引入pom.xml代码如下(示例):<?xml version="1.0" encoding="UTF-8"?><project xm.
2021-03-31 15:53:39 462
原创 Flink基于 DataStream API 实现欺诈检测
目录系列文章目录文章目录前言一、Flink基于 DataStream API 实现欺诈检测二、使用步骤1.引入pom.xml2.主类3.欺诈逻辑判断类4.运行结果:总结前言在当今数字时代,信用卡欺诈行为越来越被重视。 罪犯可以通过诈骗或者入侵安全级别较低系统来盗窃信用卡卡号。 用盗得的信用卡进行很小额度的例如一美元或者更小额度的消费进行测试。 如果测试消费成功,那么他们就会用这个信用卡进行大笔消费,来购买一些他们希望得到的,或者可以倒卖的财物。在这个.
2021-03-31 15:16:31 873
原创 flink写入clickhouse报错:No ExecutorFactory found to execute the application
解决:添加flink的client的jar包
2021-03-25 11:24:35 177
转载 clickhouse设置用户权限和登录密码
转载文章:https://www.freesion.com/article/44071403671/
2021-03-24 15:52:11 1713
原创 idea运行flink程序报错:static methods in interface require -target:jvm-1.8
解决:添加-target:jvm-1.8 到Scala Compiler或者在pom.xml文件中添加如下配置<configuration> <addScalacArgs>-target:jvm-1.8</addScalacArgs></configuration>
2021-03-23 14:43:19 381 2
原创 kafka启动报错--broker id
原因:broker id 不一致!解决:修改broker id 后需要删除 /var/local/kafka/data 目录下的meta.properties 文件。重启kafka服务,即可正常访问!
2021-03-11 14:16:24 1165
原创 kafka-eagle 8048页面报错:500
解决:1、修改eagle目录 ./bin/ke.sh文件,注释掉下面的几行内容:2、删除eagle目录 ./kms/webapps/ke/WEB-INF/lib下的jar包3、重启eagle./bin/ke.sh restarta
2021-03-10 13:24:44 305
原创 CDH集成flink服务步骤说明,并且运行报错:Could not retrieve the execution result
CDH集成flink服务:https://blog.csdn.net/ygdlx521/article/details/106527724/CDH集成flink服务后,运行测试案例:sudo -u hdfs flink run -m yarn-cluster -yn 4 -yjm 1024 -ytm 1024 /opt/cloudera/parcels/FLINK/lib/flink/examples/streaming/WordCount.jar --input hdfs://10.30.202
2021-03-09 13:55:56 1482
原创 大数据平台执行报错,权限问题。
原因:没权限解决:加上sudo -u hdfsflink run -m yarn-cluster -yn 4 -yjm 1024 -ytm 1024 /opt/cloudera/parcels/FLINK/lib/flink/examples/streaming/WordCount.jar --input hdfs://10.30.202.21:8020/tmp/word.txt --output hdfs://10.30.202.21:8020/tmp/result...
2021-03-08 17:50:42 220
原创 hive进行select等操作时,报错,提示没有权限。
原因:解决:1.柔和:配置权限2.暴力:beeline -n hdfs -u jdbc:hive2://IP:10000
2021-03-08 10:57:03 946
原创 clickhouse通过jdbc连接
clickhouse通过jdbc连接步骤:pom.xml文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.
2021-03-03 17:16:41 3158 2
原创 python读取properties配置文件并解析
ld.properties#配置信息database.type=Argodatabase.name=dddatabase.ip=10.12.15.225database.port=10000database.username=userdatabase.password=passwdproperties_handler.py#!/usr/bin/python# -*- coding: utf-8 -*-'''脚本名称:properties_handler.py脚本功能:解
2021-03-02 14:50:00 2886
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人