- 博客(8)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 解决 bash: nc: command not found 和 nc: Protocol not available 问题
目录：1.问题 2.方案1.问题 解决 bash: nc: command not found 和 nc: Protocol not available 问题2.方案步骤如下：yum erase nc wget http://vault.centos.org/6.6/os/x86_64/Packages/nc-1.84-22.el6.x86_64.rpm rpm ...
2019-01-28 00:14:13
1146
1
原创 spark-sql 中不能使用hive创建表，报/user/hive/warehouse is not a directory or unable to create one错误
目录1.问题 ：/user/hive/warehouse is not a directory or unable to create one错误 2.方案：修改spark 配置文件1.问题spark-sql 中不能使用hive创建表，报/user/hive/warehouse is not a directory or unable to create one 错误2.方案...
2019-01-27 19:15:17
4175
原创 spark 版 WordCount 程序分析
目录1、开发环境 idea+maven+spark 2、程序代码 3、集群提交1、开发环境 idea+maven+spark使用idea，创建maven工程，使用scala 编写程序，打包jar并运行在集群中2、程序代码package cn.learn.sparkimport org.apache.spark.{SparkConf, SparkContext}obj...
2019-01-20 22:21:09
305
原创 Scala 2.10.X 的 actor 与Java 多线程对比，及使用 actor 多线程完成wordcount 思路及实例代码
目录1.scala 中处理多线程解决方案 2.scala 与 java 在多线程对比 3.scala actor 多线程完成 wordcount 程序1.scala 中处理多线程解决方案scala 2.10.x 之前使用 actor；scala 2.11 之后使用 akka；Scala中的Actor能够实现并行编程的强大功能，它是基于事件模型的并发机制；Scala是运用消...
2019-01-17 11:24:09
512
原创 scala版 wordcount 程序整体分析及分步分析
目录1.待处理数据 2.scala版 wordcount 程序之整体分析 3.scala版 wordcount 程序之分部分析1. 待处理数据lines = List("hello tom hello jerry", "hello jerry", "hello kitty")2.scala版 wordcount 程序之整体分析处理程序val result = lines....
2019-01-15 21:03:58
229
原创 推荐系统基础知识
目录1、定义 2、分类 3、常用推荐算法 4、应用场景 5、实现步骤1、定义为了解决信息过载、用户无明确需求的问题，找到用户感兴趣的物品，才有了个性化推荐系统。2、分类按照目标用户划分：基于大众行为推荐，基于个性化推荐；按照数据源划分：基于人口统计学推荐，基于内容推荐，基于协同过滤推荐；按照推荐模型划分：基于关联规则推荐，基于机器学习模型推荐。3、常用推荐算法...
2019-01-13 21:11:25
513
原创 BIOS启动模式 UEFI 与 Legacy ，及对应的硬盘文件格式GPT与MBR
目录 1、遇到问题：将 Dell 灵越系列自带WIN10系统替换为win 7 旗舰版时遇到问题，其一是找不到 bios sequence，其二是用U盘重装系统后，报 no bootable devices found 错误... 2、解决方案：将BIOS 启动模式 将UEFI 改为 Legacy，使用U盘装系统是将文件格式为 MBR 格式。 3、知识总结：UEFI 与 Legacy , ...
2019-01-07 20:29:57
17000
原创 大数据 big data 相关技术框架整理 ING...
目录整体框架 big data 部分框架 redis 部分框架 scala 部分框架 hdfs1、整体框架 big data 2、部分框架之 redis3. 部分框架 scala4. 部分框架 hdfs
2019-01-06 09:15:54
582
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人