自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(24)
  • 资源 (1)
  • 收藏
  • 关注

原创 Windows 10睡眠失效解决办法

如果你之前安装过之后卸载了,请再安装上然后消勾选再卸载。如果返回结果不为空说明有程序阻止睡眠。如果返回结果为空则进行下一步。找到对应的程序将其退出即可。打开终端,执行如下命令。如果你安装了UU加速器。

2023-07-06 23:49:02 1094

原创 DataGrip以SYSDBA的身份连接到Oracle

DataGrip如何以SYSDBA的身份连接到Oracle

2022-07-20 22:42:57 1293 1

原创 win10蓝牙声音断断续续卡顿解决方法

蓝牙声音断断续续卡顿可能有几个原因:功率不够,带宽不够,有干扰.解决方法如下:关闭蓝牙耳机的麦克风关闭蓝牙最小电量使用打开设备管理器,找到蓝牙,在高级选项卡找到Minimum Power Consumption 将其值设为Disable断开其他不用的蓝牙设备...

2022-02-21 00:39:57 67405 3

原创 Flink实现外部模型预测遇到的问题

1. ‘float’ object has no attribute ‘encode’ File "/opt/anaconda3/lib/python3.6/site-packages/apache_beam/runners/worker/sdk_worker.py", line 289, in _execute response = task() File "/opt/anaconda3/lib/python3.6/site-packages/apache_beam/runners/wor

2022-02-16 16:14:07 1703

原创 无需兑换码下载来自设备制造商的 HEVC 视频扩展

缺乏HEVC编码支持,除了影响视频播放,甚至还会影响图片开启。我们知道很多新手机例如iPhone都是用了HEIF格式来保存图片,实际上HEIF图片可以看作是HEVC视频编码的图片版本。不支持HEVC编码,HEIF图片的开启也会受到影响。微软给出解决方法。在Win10商店中,微软官方提供了HEVC视频的解码器,然而它却是要收费的。下面提供两种方法获取来自设备制造商的 HEVC 视频扩展。方法一通过微软应用商店下载哔哩哔哩动画,然后再设置功能内的播放功能设置找到安装HEVC视频解码器扩展,跳转到微软应用商

2022-02-16 15:28:15 17984 1

原创 Flink集成Hudi遇到的问题

1. NoSuchMethodError: io.javalin.core.CachedRequestWrapper.getContentLengthLong()Jjava.lang.NoSuchMethodError: io.javalin.core.CachedRequestWrapper.getContentLengthLong()J at io.javalin.core.CachedRequestWrapper.<init>(CachedRequestWrapper.kt:22)

2021-08-06 17:02:11 669

翻译 何时以及如何在 Apache Flink 中使用 RocksDB 状态后端

何时以及如何在 Apache Flink 中使用 RocksDB 状态后端Flink中的状态什么是RocksDB?Flink中的RocksDB什么时候使用RocksDBStateBackend如何使用RocksDBStateBackend集群级别作业级别最佳实践和高级配置状态在RocksDB中的位置RocksDB故障诊断总结流处理应用程序通常是有状态的,“记住”已处理事件中的信息,并使用它来影响进一步的事件处理。在Flink中,记住的信息,即状态,被本地存储在配置的状态后端中。为了防止发生故障时丢失数据,

2021-03-17 19:16:53 2567 4

原创 [漏洞预警]Apache Flink 高危漏洞预警(CVE-2020-17518 CVE-2020-17519)

2021年1月5日,Apache Flink官方发布安全更新,修复了由蚂蚁安全非攻实验室发现提交的2个高危漏洞:CVE-2020-17519:攻击者可通过REST API使用…/跳目录实现系统任意文件读取;CVE-2020-17518:通过构造恶意的http header,可实现远程文件写入。1. 漏洞描述Flink核心是一个流式的数据流执行引擎,其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。Flink 1.5.1引入了REST API,但其实现上存在多处缺陷,导致目录遍历

2021-01-07 16:43:06 1849

原创 Intel Optane(tm) Memory Pinning 无法加载DLL"iaStorAfsServiceApi.dll":找不到指定模块。

在应用和功能里找到Intel@OptanerM Pinning Explorer Extensions,点击,修改等进度条百分百就行了

2020-04-26 14:05:20 1662 4

原创 Flink 1.10 发布到自建Maven仓库,报Could not transfer artifact 。。。

报错:[ERROR] Failed to execute goal org.apache.maven.plugins:maven-deploy-plugin:2.8.2:deploy (default-deploy) on project force-shading: Failed to deploy artifacts: Could not transfer artifact org.apac...

2020-03-03 12:12:45 1409

原创 Flink 1.10 编译报: unreported exception X; must be caught or declared to be thrown

jenkins上的jdk版本为jdk1.8.0_60,同事使用的是1.8.91都会报这个错,可能Flink使用的特性需要特定的小版本支持,测试过jdk1.8.0_141,1.8.221都可以。欢迎关注公众号:大数据开发者...

2020-03-03 12:03:36 2388

原创 IDEA升级到2019.3.1 编译Flink 1.10 Error:java: 无效的标记: --add-exports=java.base/sun.net.util=ALL-UNNAMED

解决办法:调出Maven侧边栏,取消勾选java11欢迎关注公众号:大数据开发者

2020-01-15 15:17:18 7521 4

原创 Flink线上问题: The assigned slot container_xxx was removed

Flink线上问题: The assigned slot container_xxx was removed客户现场使用Flink(on Yarn)进行数据抽取,Source是JDBC,Sink是Kafka,客户反映流程差不多跑10天左右就挂,让我看看.环境:Flink: 1.5.2jdk: 1.8.0_25Hadoop: 2.4.1jobmanger和TaskManger都分配1G内...

2019-12-27 14:19:06 5313

翻译 Flink Broadcast State实用指南

从1.5.0开始,Flink提供了一种新的State类型,称为Broadcast State。在这篇文章中,我们将解释什么是Broadcast State,并展示如何将其应用于评估事件流上的动态模式的应用的示例。我们将向您介绍处理步骤和源代码,以实现此应用。什么是Broadcast State?Broadcast State可用于以特定方式组合和联合处理两个事件流。第一个流的事件被广播到一个算...

2019-06-27 19:24:17 3517 1

原创 Flink源码阅读:如何使用FlinkKafkaProducer将数据在Kafka的多个partition中均匀分布

使Flink输出的数据在多个partition中均匀分布FlinkKafkaProducerBase的子类可以使用默认的KafkaPartitioner FixedPartitioner(只向partition 0中写数据)也可以使用自己定义的Partitioner(继承KafkaPartitioner),我觉得实现比较复杂.构造FlinkKafkaProducerBase的子类的2种情况 p

2017-12-15 22:39:09 7496

原创 Flink源码阅读:流中的四种值类型

Flink DataStream中的四种值类型DataStream中有的元素有四种类型,分别是Watermark,StreamStatus,StreamRecord和LatencyMarker.它们都是StreamElement的子类.继承关系图:Watermark指示元素timestamp小等于watermark的值都已经到了,算子通过调用org.apache.flink.streaming.ap

2017-12-13 11:56:58 1841

原创 Hive 不支持 intersect 的解决办法

问题有一个SQL语句要在hive里执行但是hive不支持intersect,所以要使用其他方法代替思路intersect就是取交集,可以使用inner join进行连接然后取其中一列并去重原SQLselect s_store_name ,sum(ss_net_profit) from store_sales ,date_dim ,store, (sele

2017-03-17 12:55:04 7674

原创 将Hive数据库存储格式转换为orc

Hive的存储格式textfilehive的默认存储格式 存储方式:行存储 磁盘开销大 数据解析开销大 压缩的text文件 hive无法进行合并和拆分SequenceFile二进制文件,以Hive导入数据的几种方式从本地文件系统中导入load data local inpath 'customer .data' into table customer;从HDFS上导入load da

2017-03-17 12:54:07 14846 1

原创 Centos 6.5下安装MySQL 5.6

1.下载Linux对应的RPM包http://dev.mysql.com/downloads/mysql/5.6.htmlwget http://cdn.mysql.com//Downloads/MySQL-5.6/MySQL-5.6.33-1.el6.x86_64.rpm-bundle.tar2.解压tar包tar -xvf MySQL-5.6.33-1.el6.x86_64.rpm-bundle

2017-03-16 21:01:59 1778

原创 解决 Linux 下 ssh 登陆慢的问题

原因反向 DNS 解析默认值设置为 yes, 将其改为 no 之后就好了 解决方法编辑 sshd_config 文件:vi /etc/ssh/sshd_config把 UseDNS 前面的 #号去掉, 把 yes 改变为 no,UseDNS no重启下 ssh:service sshd restart

2017-03-16 20:54:37 554

原创 错排公式

定义:n 个元素排成一列,若每个元素所处位置的序号都与它的编号不同,则称这个排列为 n 个不同元素的一个错排.理解:首先把第1个元素放到第k位一共有(n-1)种选择,第k位的元素有两种选择.第一种是把第k位的元素放到第1位,则剩下的元素一共有D(n-2)种排法,第2种是把第k位放到其他位置,则剩下的元素(包括k)一共有D(n-1)种排法.后面的元素也按这种方式排列,所以递归式如下.公式:D(n)=(

2017-03-14 22:07:12 559

原创 计算一个数字的长度的几种方法

给定一个简单类型可以存储的正整数,求这个正整数的长度.普通方法每次去掉一位,sum加1.int length(int n){ int sum=0; while(n) { n/=10; sum++; } return sum;}递归法每次去掉一位,递归求剩下的数字的长度.int length(int n){ if(n

2017-03-14 22:05:55 13413

原创 Zeppelin 的安装及简单使用

下载首先到zepplin官网下载Binary package with all interpreters包安装解压: tar -zxvf zeppelin-x.x.x-bin-all.tgz到conf目录把zeppelin-site.xml.template复制一份为zeppelin-site.xml,更改zeppelin.server.port的值以免和其他应用的端口冲突把zeppelin-env

2017-03-06 22:00:40 1322

原创 马拦过河卒

Description如图,A点有一个过河卒,需要走到目标 B点。卒行走规则:可以向下、或者向右。同时在棋盘上的任一点有一个对方的马(如上图的C点),该马所在的点和所有跳跃一步可达的点称为对方马的控制点。例如上图 C点上的马可以控制 9个点(图中的P1,P2 … P8和 C)。卒不能通过对方马的控制点。  棋盘用坐标表示,A点(0,0)、B点(n,m)(n,m为不超过 17的整

2015-07-29 16:27:14 706

hive-jdbc-1.1.0-hadoop-2.6.0.jar

hive-jdbc-1.1.0-hadoop-2.6.0

2021-10-19

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除