大数据技术周报第 002 期

最新推荐文章于 2022-11-30 20:16:15 发布

程序员小陶

最新推荐文章于 2022-11-30 20:16:15 发布

阅读量383

点赞数

分类专栏：大数据技术周报文章标签： hadoop big data

本文链接：https://blog.csdn.net/qq_31975963/article/details/120371853

版权

大数据技术周报专栏收录该内容

9 篇文章 2 订阅

订阅专栏

这里记录过去一周，大数据相关值得分享的东西，每周日发布。

在这里插入图片描述

今天尝试写第二期，记录过去一周一点所见所闻。本周划水太严重了，主要还是陪女朋友比较重要=-=

文章目录

图片
文章
资源
- 摘录
订阅

图片来自PM熊叔

图片

1、Google 开发者大会提前预热，公众号发彩蛋！

**今年9月，谷歌开发者大会将再次登录上海，**为大家带来新一轮的干货与惊喜。

<!DOCTYPE html>
<html lang=”zh-cn“>

<head>
  <title>Hello World</title>
  <meta charset=”UTF-8“>
  <meta name=”keywords“ content=”keynote ,session, code lab , workshop , sandbox“>
</head>

<body>
  <h1>2019 Google 重头戏</h1>
  <h2> 等你来发现</h2>
  <ul>
    <li>9月10-11日</li>
    <li>上海浦东</li>
  </ul>
  <p>大量惊喜等待解锁</p>
  <img src="http://t.cn/AijsPmUN">
  <h3>期待相见！</h3>
</body>

</html>

2、百度搜索 VS Google 搜索

最近试了下在百度和 Google 搜索自己的id，结果真的差距不小。百度给 CSDN 的权重太高了。。（让人喷饭！）

最近字节跳动也在招募搜索工程师，字节跳动已经低调上线搜索产品。看样子也要动一块搜索的蛋糕了，很看好！

文章

1、美团：Hadoop Yarn 调度性能优化实践

YARN作为Hadoop的资源管理系统，负责Hadoop集群上计算资源的管理和作业调度。
美团的YARN以社区2.7.1版本为基础构建分支。目前在YARN上支撑离线业务、实时业务以及机器学习业务。

2、HBase应用 | 用户购物行为分析(订单路径树）

分析用户从打开某网站到最终下单所点击的路径为订单路径树。

3、信息论入门教程 – 阮一峰

信息论在信号处理、数据压缩、自然语言等许多领域，起着关键作用。虽然，它的数学形式很复杂，但是核心思想非常简单，只需要中学数学就能理解。本文使用了一个最简单的例子，帮助大家理解信息论。

4、Hive 参数官网原文

Hive 参数调优官方指南。

资源

1、Hadoop 2.x HDFS 源码解析，作者徐鹏

仅供学习，为了更好的体验可购买正版书籍。

链接:https://pan.baidu.com/s/1FFSjFENEhx1Hqqow6a4WEg 密码:qzmt

2、《从paxos到zookeeper分布式原理的实践》

分布式架构、一致性协议、Paxos 的工程实践、Zookeeper 与 Paxos、使用 Zookeeper、Zookeeper 的典型应用场景、Zookeeper 的技术内幕、Zookeeper 运维。

链接:https://pan.baidu.com/s/1XGahayfZUXZo-oq-__8zwg 密码:vz6x

摘录

1、看懂经济

搭框架肯定看教材最有效：

《经济学微观部分》—阿西莫格鲁
《经济学宏观部分》—阿西莫格鲁
《微观经济学》—克鲁格曼
《宏观经济学》—克鲁格曼
《宏观经济学》—曼昆
《宏观经济学》—多恩布什
《微观经济学》—平狄克
《货币金融学》—米什金
《计量经济学基础》—古扎拉蒂
《计量经济分析》—格林
《国际经济学：理论与政策》—克鲁格曼

倒不用硬啃，反正呆着没事儿看两页就行。另，看了你就会知道，遇上一个愿意正常和你说话的人有多不容易。

– via 老钱

2、看房

找个链家门店，报上首付预算，让他照着地图给你讲一遍。人家有一线经验，最有发言权。

3、方法论

「最近流行一句话叫“develop a company as a product”。我觉得更酷的是“develop a company as your lifestyle. or even your belief”。把一家公司当产品一样运营。这个对于聪明人来讲，在脑袋里观念一转就能立马上手。把你的公司跟你的生活融合起来，把这家公司做成信仰的载体。这个就不是思路的问题了。那需要极强大的心力了。

我一直在看，哪些人身上有单纯的聪明和勤奋所不能攻克的东西。这些人是真正稀缺的。比如你去看很多功名显赫的牛人，聪明和勤奋没的说，可是总觉得少了一样东西。让你心里不踏实。

如果王兴一直在饭否上不间断的把自己的所行所悟分享出来。我就知道他还是那个勤恳敏锐的人，并且坦诚。

如果王兴的这些分享一直紧跟最前沿，比如最近他把中本聪比做区块链的马克思，把扎克伯格比做列宁，我就一天相信这个人的强大的探索欲望还没有耗尽。

如果王兴的分享还时不时保持着对“无用之用”的好奇，比如刀有几种用法，一个穿西装啃甘蔗的人多么有趣，我就一天相信这个人还在一直小心观望着未知的边界，并且保持着平衡。

– 来自刘思毅的分享。