分布式
冯巩2.0
这个作者很懒,什么都没留下…
展开
-
hadoop分布式框架的使用中的问题
文章目录 64位的系统中安转hadoop会出现部分native 中的库不能使用的问题,所以64 位系统必须手动编译安转hadoop 对于jdk版本号大于9的可能会出现无法启动resourcemanager 与nodemanager的情况,原因是jdk版本过高的话,与hadoop 的兼容 对于C++ 开发hadoop的问题,如果出现第一种情况的话,会出现链接库错误,hadooppipes.a中的多...原创 2019-06-27 09:56:57 · 1125 阅读 · 0 评论 -
【hadoop】关于HDFS的四大机制与两大核心
文章目录 hdfs是hadoop 生态系统的一部分,主要功能是为大数据的处理提供分布式存储的环境,关于hdfs的理解,先来看一张图 hdfs的四大机制和两大核心: hdfs 提供的是高容错性的分布式的数据存储方案, ...原创 2019-07-24 23:14:21 · 1600 阅读 · 0 评论 -
redis
文章目录原创 2019-07-27 09:18:43 · 960 阅读 · 0 评论 -
nginx的高并发模式
文章目录多进程实现的并发模式 多进程实现的并发模式 ngnix 采用的 多进程+ IO复用 的并发模式 1、节省锁带来的开销。每个 worker 进程都是独立的进程,不共享资源,不需要加锁。同时在编程以及问题查上时,也会方便很多。 2、独立进程,减少风险。采用独立的进程,可以让互相之间不会影响,一个进程退出后,其它进程还在工作,服务不会中断,master 进程则很快重新启动新的 worker 进程...原创 2019-07-27 09:19:35 · 1163 阅读 · 0 评论 -
【hadoop】yarn资源调度
文章目录 现在在运行程序的时候, runjar进程 MRAppMaster Yarnchild 在hadoop1.0中运行的时候有两个进程 jobtracker 整个计算程序的老大 ( 负责资源调度,随机调度,监控程序运行的状态 ,启动运行程序) tasktracker ...原创 2019-07-27 22:43:48 · 1186 阅读 · 0 评论