- 博客(25)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 健身笔记（六）---健身四个月后总结
首先要感谢自己，能坚持这么久，多少有些出乎意外。主要是因为心中揣着一个梦想，那就是恢复健康，梦想着身体机能最少要恢复到25岁的水准，正因为梦想的驱动，从不敢放弃。同时也惊喜的看到，这几个月的辛苦付出得到了对应的回报。当然，作为一位新手，这中间肯定也遇到困难，走过弯路。所以借这个总结，将这些经验和教训统一汇总下，以提升后续训练质量。经验1：靠墙站立是增强股四力量，进而保护膝盖，特别是减少膝盖...
2019-01-25 16:39:58
707
2
原创 读书笔记（四）---读《说文解字》的快乐点滴
想读这本书的缘由在于，我经常背英语单词；为了更牢靠的记住英语单词，使用了某些例如按词根记住单词的技巧，突然想到自己对汉字也有很多是不认识的，学习一门外语花了这么大力气，为何学习母语反而不下工夫呢？于是决定多花些心思在母语的学习上。那么，学习的第一要点肯定是要记住自己不懂的生字。傻傻的背字典不是一个明智的做法，较为明智的应该是在看书的过程中，若发现有不认识的字，查完字典后记在生词本中，就如我先前...
2018-11-21 19:05:28
718
原创 安全认证（一）--- 概貌
安全特性一般包括加密、认证和鉴权。hadoop的安全认证过程很复杂，但玩大数据的人，总要知道一些基本概念、业务框架和大致业务过程。我的博文是来自其他高手总结，加上一些书籍摘要和个人理解，汇总而成，不为其他，只为方便自己查阅。若有写得不对的 ，请大家帮忙指正。先澄清几个基本概念：【关于JAAS和Java GSS-API】（来自https://docs.oracle.com/javase/1...
2018-10-31 11:17:00
225
原创 读书笔记三--高效能人士的7个习惯
书的内容有点啰嗦，但几个讲解还是挺到位，简单总结下，算是读书笔记。习惯1：积极主动采取主动，为自己过去、现在和未来的行为负责，依据原则和价值观，而非情绪或外在环境来下决定。习惯2：以终为始习惯3：要事第一以当前最重要的事为要，而不是眉毛胡子一把抓，这个要，那个也不能丢，待两者充满矛盾时，就纠结不已，往往是纠结的时间超过了干事的时间。习惯4：双赢思想习惯5：知彼解己诚
2016-11-13 19:38:48
486
原创 关于RPC的一些总结
关于RPC的思考：1.RPC是一种跨进程（网络）交互的思想；2.为了方便大家使用RPC，出现了很多RPC框架，例如Protol Buffer、AVRO和Thrift等，它们具有各自的语法（IDL）和将用户使用它们语法描述生成的业务逻辑（协议）生成指定编程语言（例如JAVA/C/C++）的 实现（例如JAVA语言的，会生成class文件)；3.用户在采用某个RPC框架时，必须
2016-11-13 11:19:04
1098
原创 关于密码方面的一些总结
最近在学习时，遇到一本密码方面的科普读物《现代密码学趣味之旅》，内容讲解很通熟易懂。下面是简单的读书笔记，有些内容仍然比较深，单靠短期阅读就能完全理解有点托大，待后续再深入理解。【对称密码学】从传统密码学触发，人们逐步深入对称密码学（加密和解密都用同一个密码）的研究，开发出了如下算法：1.DES（数据加密标准）：借助分组加密算法原理；但后来慢慢被攻破，加深了分组密码长度（秘钥长度）仍然
2016-08-23 21:20:19
559
原创 计算机网络系统学习--说说物理层
最近在学习王达写的《深入理解计算机网络》，下面基本是看这本书的学习笔记。物理层并不是特指某种传输介质，而是指通过传输介质，以及相关的通信协议、标准建立起来的物理路线。“物理层”的主要任务是定义和传输介质、连接器及其接口相关的机械特性、电气特性、功能特性和规程（协议）特性这四个方面。数据传输方式：1.串行传输：一个bit一个bit的传输数据，这会存在字符同步的问题，即如何识别一个字符
2016-08-22 21:20:24
577
原创 socket的总结（2016-02）
socket是一个基础内容，包括hadoop里面的RPC等，都会用到它，所以简单学习了一下，如下是一个总结。socket的理解：1.socket 这个概念没有对应一个具体的实体，它描述计算机之间完成相互通信的一种抽象功能；2.socket的产生背景：解决网络中进程之间如何通信。如何识别网络中的进程？使用了网络节点（IP地址）+协议+端口号的信息来解决。3.利用三元组（IP地
2016-03-14 23:04:30
385
原创 如何用IDE调试MR任务(一)（2016-01）
MR任务和普通的JAVA进程不太一样的地方是：它们是将jar包等搬到YARN上（MR的资源调度平台）去执行的。调试起来有些地方就不太懂了。最近自己摸索了下，用于解决如下两个场景，将其跑通：1.在提交MR任务后，跟踪MR任务逻辑处理；2.在整个调试过程中，同时印证MR的工作原理；还未搞明白的问题：1.业务逻辑代码对应的jar包，经过MR的接口处理后，会放在HDFS
2016-02-28 20:14:35
782
原创 如何用IDE调试MR任务(二)（2016-01）
一个实际调试过程：1.采用原理是JAVA的远程调试机制；2.在map任务/reduce任务（跑在一个container上的进程）启动时，添加jar远程调试的命令：-Xdebug -Xnoagent -Xrunjdwp:transport=dt_socket,address=8000,server=y,suspend=y具体添加操作方式：找map任务/reduce任务启动时的输入
2016-02-28 20:11:10
651
原创 读书笔记（二）--- 程序是怎样跑起来的
书籍信息：书名：程序是怎样跑起来的作者：矢泽久雄李逢俊 译内容：这本书很详细的介绍了计算机的原理，并介绍一个程序从被开发完，到如何在计算机上运行完成功能，作者写得非常的通俗易懂，是到目前为止，我所见过的对这方面内容写得最为深入浅出的书籍。这两三天趁着有空，匆匆浏览了一遍，至少解决了我长久以来存在脑海里的几个小问题：1.负数在计算机上的存放模式；2.浮点数的表示形
2016-02-22 00:45:03
476
原创 读书笔记（一）-- Flume组件的详细介绍
书籍信息：名称：Flume 构建高可用、可扩展的海量日志采集系统作者：Hari shreedharan 马廷辉 史东杰译内容：本书作者是flume组件的设计和开发人员，其水平可想而知，更难得的作者文笔不错，描述事物很到位。我粗略看了一小章，很受启发。部门同事写的flume培训胶片，确实没法与之相比。我甚至有了一份想法：在读完这本书后，自己写一个培训胶片，替
2016-02-22 00:32:47
545
2
原创 十年之念
十年眨眼即过下一个十年何去何从在迷茫中寻找答案可以肯定的是如下的顺序是肯定的健康、能力、经济。。。 所以，不要把太多时间花在没必要的事情上勇敢向前毫不犹豫绝不退缩
2015-12-05 20:46:13
388
原创 关于责任、钱和技术
人到了一定的年龄，总要负起相应的责任。例如结婚了就要担起作丈夫的责任，，例如孩子出生了就要担起做父亲的责任。而一般情况下，责任两字展示最大的内容就是经济--就是金钱。 钱，更多的钱，以保证好质量的生活。那么，更多的钱是：来自于更高的工资，来自于炒股票、炒房子，来自于做生意。。。 一个在技术上混了好几年的老棍子，养成的毛病就是，只看着工作，只喜欢跟机器打交道；因为经济没跟上大环境
2015-10-11 22:57:47
345
原创 管理杂谈（三）--必须的思想
1.管理是长久的事情，所以一定要和周边建立良好关系；不能浮躁，不要乱发脾气，沉稳才是管理者必须的素质；2.管理的首要职责是梳理，将混沌转变为有序；3.不要惧怕问题，管理就是来解决问题的，要相信办法总比问题多；
2015-08-02 17:11:28
291
原创 心路（一）
工作的繁忙淹没了内心真正的追求工作的不顺又加剧了心中的迷茫所以，生活中，越来越没有快乐，越来越不知道自己追求的是什么经常思考，还是不明白 但是，实际上问题没有自己想象中的那么复杂，回归到自己确切的状况，答案就在眼前那就是亲人的幸福生活在我心目中应该没有比这更重要的事情了我爱他（她）们，珍惜他（她）们的一切我的所有，都是为了上面这些难道还有比这更珍贵的吗答
2015-04-19 15:10:52
312
原创 管理杂谈（二）--再谈心态
总体而言，多年的习惯还是让自己性格变得比较内向，不喜欢高谈阔论，不喜欢在陌生人面前发言，例如组织会议，给其他同事培训，走向客户面交流信息，凡此种种，这些都是比较排斥，很不喜欢的痛苦事物。但作为版本管理这些又是职责所在，不可避免，甚至是常态。所以需要我克服这种不好的心态，应该以一个自信和自如的形象，把自己展现出来。不能老呆在自己的舒适区里，而是要勇敢的走出来，即使是痛苦，也要当做是种磨练
2015-04-11 12:00:56
347
原创 管理杂谈（一）-- 谈谈心态
工作了这么多年，主要还是跟代码和及其打交道，最近工作内容变化，走上版本管理岗位。这是一个挑战兼着磨合痛苦的过程。在走上新岗位前，也去借了些书本，但真正走入，还是被冲击很大。这一个多月来，在管理上的认识，真的超过我有史以来的所有认识。希望自己能心怀若谷，战战兢兢，始终抱着总结过去，踏实现在，展望未来，在这个岗位上能有更好的认识，以此提升自己，磨练自己，并让自己得到更好的发展。首要
2015-04-11 11:46:54
311
原创 交换机和路由器的关系
很好的参考资料，有空要理下：http://zhidao.baidu.com/link?url=bphE73cnsjiBlFHMWHLct-lcAzJSfnWtn735UU6_uV_6VvZpGe1t7VZp1VW7moIn7kBWKFf08LoVZyAkjThM7q
2013-09-14 23:49:41
1010
原创 Namenode学习（1）--初始化流程
从概述里面大致知道了namenode该做哪些事情。下面开始分析下namenode的初始化流程。它主要完成如下事情：1.初始化各个重要成员变量（包括rpc服务器等），初始化FSNamesystem（加载FMImage文件）2.创建和启动HTTP服务器；3.启动RPC服务器；4.启动回收站线程。详细的代码阅读如下：重要方法NameNode.initialize（）在in
2013-07-26 14:17:49
1601
原创 Namenode学习（1）--概述
首先先明确namenode节点需要完成什么工作。了解一个东西，一般可以从了解它的数据结构（存放什么东西），推断出它担任着什么责任，从事什么工作。对于namenode，它维护着两种重要的信息：1：文件元数据（目录/文件名称等）和其数据块索引；--常称为第一种关系；2：数据块和datanode节点的对应关系。 -常称为第二种关系；其中：1.对于文件元数据和数据块索引：其内容
2013-07-25 18:15:07
592
原创 DNS服务的学习
对于DNS，之前接触不多，最近刚好遇到一个简单的任务，涉及到DNS服务。上网查了一把，发现有不少好资料，现整理如下，方便以后查阅：比较全面的资料：http://www.2cto.com/os/201108/102155.html鸟哥的东西一直都很经典：http://linux.chinaitlab.com/server/730671_5.html最全面的资料：http:
2013-07-25 14:49:11
380
原创 从零开始学习HDFS--搭建HDFS的eclipse工程
新版本的HDFS代码需要用到maven，要集成此工具到eclipse，找了好多资料，才搞定。具体可以参考这个：http://www.huqiwen.com/2012/04/26/eclipse-install-maven-plugin/
2013-07-18 22:21:19
397
原创 从零开始学习HDFS-初步计划
Namenode initialization flowNameNode的初始化流程，分析启动过程中涉及的主要类结构fsimage的加载过程加载本地fsimage的过程fsimage存储的格式editlog的加载过程本地和Bk的editlog加载editlog存储的格式editlog的写、读、finalize
2013-07-12 19:08:37
375
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人