数据开发
彪悍大蓝猫
少说话多撸码,人间不值得~
展开
-
医院系统关键设备配置算法
关键设备配置算法1、网络配置网络划分:内网(业务办公)和外网(移动用户和远程用户)。网络冗余:内外网核以层和汇聚层都是双冗余架构的。网络速率:千兆核心百兆到桌面。网络安全:外网用户需要通过授权的ssl vpn帐号才可以访问内网的数据,网络部署防火墙、IPS、IDS、上网行为管理、防病毒网关等网络安全设备。2、在线存储配置医院数据交换平台每天新增数据量200G,为医生提供1年内的在线资...原创 2020-03-24 22:31:41 · 468 阅读 · 0 评论 -
SparkStreaming整合Flume的pull启动报错:Unable to load sink type: org.apache.spark.streaming.flume.sink
Flume配置文件:simple-agent.sources = netcat-sourcesimple-agent.sinks = spark-sinksimple-agent.channels = memory-channel#Describe/configure the sourcesimple-agent.sources.netcat-source.type = netcat...原创 2019-10-16 11:47:16 · 1395 阅读 · 0 评论 -
真坑!Spark Streaming 之 netty 冲突
最近在写一个Spark Streaming 处理 socket 数据的程序,代码被review没有问题,但是本地测试时就会报以下的错误:Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties19/10/12 09:59:35 INFO SparkContext: Running Spar...原创 2019-10-12 10:05:54 · 1206 阅读 · 0 评论