BigData
文章平均质量分 54
数智客栈
十多年开发和管理经验;
擅长C/C++、Objective-C、Swift、Python和Java编程技术;
熟悉Windows、Linux、Mac、Android、IOS平台应用开发;
博客专注于分享这些年工作学习的技术经验,持续更新
展开
-
大数据-Spark批处理实用广播Broadcast构建一个全局缓存Cache
大数据-Spark批处理实用广播Broadcast构建一个全局缓存Cache原创 2023-07-29 10:52:24 · 991 阅读 · 0 评论 -
大数据处理框架-Spark DataFrame构造、join和null空值填充
大数据处理框架-Spark DataFrame构造、join和null空值填充原创 2023-07-29 10:14:34 · 562 阅读 · 0 评论 -
Spark的DataFrame和Schema详解和实战案例Demo
Spark的DataFrame和Schema详解和实战案例Demo原创 2023-07-29 09:51:56 · 934 阅读 · 0 评论 -
安装 CDH执行scm_prepare_database.sh报错,java.sql.SQLException: Access denied for user ‘scm‘@‘localhost‘
java.sql.SQLException: Access denied for user 'scm'@'localhost' (using password: YES)原创 2023-07-18 21:55:57 · 851 阅读 · 0 评论 -
Kafka消息监控管理工具Offset Explorer的使用教程
Offset Explorer是一款用于监控和管理Apache Kafka集群中消费者组偏移量的开源工具。它提供了一个简单直观的用户界面,用于查看和管理Kafka消费者组偏移量的详细信息。原创 2023-07-18 21:33:34 · 8450 阅读 · 0 评论 -
Flink订阅Kafka消息队列实战案例
Kafka是一款开源的分布式消息系统,最初由LinkedIn公司开发并开源。它被设计用于处理海量的实时数据流,可以支持高吞吐量和低延迟的数据传输。原创 2023-07-18 21:28:19 · 1974 阅读 · 0 评论 -
Kafka消息队列基础入门和实战例子
Kafka消息队列基础入门和实战例子原创 2023-07-18 21:20:53 · 1140 阅读 · 0 评论 -
大数据篇Kafka消息队列指定Topic打印Key、Value、Offset和Partition
大数据篇Kafka消息队列指定Topic打印Key、Value、Offset和Partition原创 2023-07-16 20:52:52 · 4531 阅读 · 0 评论 -
Spark ‘PHYSICAL‘ memory limit. Current usage: 1.6 GB of 1.5 GB physical memory used;
大数据Spark如何解决内存不足问题,is running 111923200B beyond the 'PHYSICAL' memory limit. Current usage: 1.6 GB of 1.5 GB physical memory used; 3.5 GB of 3.1 GB virtual memory used. Killing container.原创 2023-04-24 20:51:34 · 624 阅读 · 0 评论 -
Scala 遍历打印com.alibaba.fastjson.JSONObject所有的Key和Value
Scala 遍历打印com.alibaba.fastjson.JSONObject所有的Key和Value原创 2023-04-21 21:46:48 · 1366 阅读 · 0 评论 -
Scala操作列表List、数组Array和集合Set
Scala操作列表List、数组Array和集合Set原创 2023-04-16 18:15:56 · 644 阅读 · 0 评论 -
大数据Spark SparkSession的3种创建方式 Scala语言实现
大数据Spark SparkSession的3种创建方式 Scala语言实现原创 2023-04-16 17:51:37 · 4430 阅读 · 0 评论 -
Caused by: java.sql.SQLDataException: [Cloudera][JDBC](10140) Error converting value to Timestamp.
sql自定义方言原创 2023-03-19 12:32:46 · 414 阅读 · 0 评论