- 博客(5)
- 收藏
- 关注
RSS订阅转载 MYSQL级连表查询优化
https://blog.csdn.net/Tim_phper/article/details/78344444?locationNum=9&fps=1https://blog.csdn.net/Tim_phper/article/details/78357016
2018-04-25 11:21:20
256
原创 HDFS 副本存放磁盘选择策略详解
在 HDFS 中，DataNode 将数据块存储到本地文件系统目录中，具体的目录可以通过配置 hdfs-site.xml 里面的 dfs.datanode.data.dir 参数。在典型的安装配置中，一般都会配置多个目录，并且把这些目录分别配置到不同的设备上，比如分别配置到不同的HDD（HDD的全称是Hard Disk Drive）和SSD（全称Solid State Drives，就是我们熟悉的...
2018-04-23 10:56:41
1892
原创 Linux批量删除文件
一、删除几个文件 rm 文件1 文件2 删除文件夹下面所有文件 rm * -rf 删除某些固定字母开头的文件 rm xxx* 删除一类文件 rm *.txt二、利用命令：find . -name "*.c" | xargs rm -rf发现当前文件夹及其子目录下面都没有了.c文件。三、假设要删除的目录/manyfiles下面有大量的文件...
2018-04-18 11:28:17
13599
原创 Spark Streaming 中管理 Kafka Offsets 的几种方式
Offset管理概述Spark Streaming集成了Kafka允许用户从Kafka中读取一个或者多个topic的数据。一个Kafka topic包含多个存储消息的分区（partition）。每个分区中的消息是顺序存储，并且用offset（可以认为是位置）来标记消息。开发者可以在他的Spark Streaming应用中通过offset来控制数据的读取位置，但是这需要好的offset的管理机制。O...
2018-04-17 17:32:14
339
原创 谈谈反向代理Nginx
一、先讲个故事很久以前，老王去饭店吃饭，需要先到饭店，七荤八素点好菜，坐等饭菜上桌，然后大快朵颐，不亦乐乎。有了第三方订餐外卖平台（代理），老王懒得动身前往饭店，老王打个电话或用APP，先选好某个饭店，再点好菜，外卖小哥会送上门来。由于某个品牌的饭店口碑特别好，食客络绎不绝涌入，第三方订餐电话也不绝于耳，但是限于饭店接待能力有限，无法提供及时服务，很多食客等得不耐烦了，纷纷铩羽而归，饭店老总看着煮...
2018-04-16 15:40:19
152
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人