Spark系列-5、Spark的部署方式之Spark on YARN 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录官方网址:http://spark.apache.org/、https://databricks.com/spark/about目录前言属性配置设置环境变量历史服务MRHistoryServer地址历史服务HistoryServer地址配置依赖Spark Jar包YARN 资源检查启动服务提交应用结束前言将Spark Application提交运行到YARN集群上,至关重要,
Spark系列-4、IDEA应用开发 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录官方网址:http://spark.apache.org/、https://databricks.com/spark/about目录介绍构 建 Maven Project应用入口:SparkContext编程实现编程实现:TopKeySpark 应用提交应用提交语法基本参数配置Driver Program 参数配置Executor 参数配置官方案例应用打包运行结束介绍实际开发
保存系统的操作日志,通过swagger注解获取请求描述(通用版本) 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录前言系统之前没有全局的记录操作日志,只是个别单个功能记录了操作日志,这样个别功能没有记录操作日志,就会出现和运营扯皮的问题,我们4月份就出现这个问题,活动商品在活动结束后,运营统计商品下单数量,发现超卖了,卖的数量比上架的库存要多,找了两天发现是运营在活动进行中的时候,改了商品库存(第一次上架库存的运营和改库存的运营不是一个人,而且改后没有同步),还好最后发现编辑活动的操作日志是有
SpringCloud+nacos+gateway+feign+seata 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录Seata官网服务器版本:nacos-server-2.0.4seata-server-1.4.2代码使用版本:spring-boot-starter-parent:2.1.6.RELEASEspring-cloud-dependencies:Greenwich.SR2spring-cloud-alibaba-nacos-discovery:2.1.0.RELEA
Hbase系列-2、Hbase基础 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录Hbase的官网目录Hbase的基本简介Hbase的基本介绍Hbase的应用场景Hbase的发展历程Hbase的特点Hbase与RDBMS、HDFS 、Hive的区别Hbase的表模型Hbase的相关操作-命令式Hbase的基础操作命令Hbase高级shell管理命令Hbase的基本简介Hbase的基本介绍NoSQL是一个通用术语,泛指一个数据库并不是使用SQL作为主要语言
Kafka系列-5、Kafka-Tool 2 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。大数据系列文章目录kafka的中文网站目录推荐个好用的kafka客户端安装包我已经给大家准备好了,饭来张口~~ 张嘴链接提取码:8888...