2018年02月_大数据v

转载波士顿动力放出新视频：谁都挡不住机器狗开你的门

本文经机器之心（微信公众号：almosthuman2014）授权转载，禁止二次转载”作者：Matt Simon参与：路雪、李亚洲还记得那只像狗一样的机器人 SpotMini 吗？上周波士顿动力发布了一则视频，视频中这只「机器狗」可以给同伴开门了！刚刚，波士顿动力发布了一则新视频，一个人拿着一根曲棍球棒努力阻止机器人开门，比如拖拽，机器人开始不停地挣扎。但是人类的阻止并没有用。这只机器狗赢了，成功地

2018-02-28 00:00:00 864

转载【知识】人工智能数学基础知识

数学是打开科学大门的钥匙。——培根数学基础知识蕴含着处理智能问题的基本思想与方法，也是理解复杂算法的必备要素。今天的种种人工智能技术归根到底都建立在数学模型之上，要了解人工智能，首先要掌握必备的数学基础知识，具体来说包括：线性代数：如何将研究对象形式化？概率论：如何描述统计规律？数理统计：如何以小见大？最优化理论：如何找到最优解？信息论：如何定量度量不确定性？形式逻辑：如何实现抽象推理？01 线

2018-02-28 00:00:00 3153

转载最新！外国人最常说的100个“中国词”出炉第一个你绝对想不到…

近几年，“汉语热”在全球兴起，外国人说的念的中国词儿变多了！那外国人最常说的、最热的“中国词”到底是啥呢？2月17日，中国外文局首次发布《中国话语海外认知度调研报告》。报告显示，近两年中国话语以汉语拼音的形式在国外的接触度、理解度急剧上升。在认知度排在前100名的中国词中，文化类的词语所占比重最大，像春节、重阳等中国传统节日悉数上榜，而排名最靠前的还是非中国功夫莫属，“少林”一词高居榜首。来，直接

2018-02-27 00:00:00 592

转载【工具】55种开源数据可视化工具简介

工欲善其事必先利其器。本文对55个流行的数据可视化工具进行了简单的介绍，包括著名的D3.js、R、Gephi、Raphaël、Processing.js、Tableau Public、Google Chart Tools、Arbor.js等软件。介绍主要围绕以下几个方面展开：类型、开源协议、主页、文档以及案例等。1 Arbor.js类型: 库技术: JavaScript开源协议: MIT资源链接主

2018-02-26 00:00:00 3754

转载 Ruby 和 Python 分析器是如何工作的？

原文出处： Julia Evans 译文出处：开源中国你好！我作为一名编写Ruby profiler的先驱，我想对现有的Ruby和Python profiler如何工作进行一次调查。这也有助于回答很多人的问题：“你怎么写一个profiler？”在这篇文章中，我们只关注CPUprofiler（而不是内存/堆profiler）。我将解释一些编写profiler的一般基本方法，给出一些代码示例

2018-02-26 00:00:00 383

转载哪些行业形势好？大数据帮你预测今年就业“风口”

2018年，哪些行业最好找工作？如何最准确把握就业的风口？近日，中国人民大学中国就业研究所联合智联招聘，共同发布了2017年第四季度《中国就业市场景气报告》。从这些大数据中，或许你也能从中嗅到2018就业市场走势。金融行业就业形势分化一个行业的用工需求，往往能看出这个行业的一些潜在变化。从第四季度行业的需求同比数据来看，传统“香馍馍”金融行业用工需求同比下降23%，再次出现负增长。不过，金融行业城

2018-02-25 00:00:00 1066

转载为什么你的数据分析成果总是难以落地?

为什么你的数据分析成果总是难以落地?数据分析的价值总是远远低于预期?相信看完这篇文章，每个人都能找到一个属于自己的答案。以下为从事电力、军工、金融等行业担任数据分析师从业者的多年行业经验，希望能对大家有所帮助。01 遵循数据分析标准流程数据分析遵循一定的流程，不仅可以保证数据分析每一个阶段的工作内容有章可循，而且还可以让分析最终的结果更加准确，更加有说服力。一般情况下，数据分析分为以下几个步骤：1

2018-02-24 00:00:00 1662

转载清华大学朱旭峰：中国智库大数据报告2017预发布

大数据、人工智能、虚拟现实等新锐弄潮儿，在这个会场上袒露心声，让我们继续智慧的交融与碰撞，来看看2018年大数据重构行业下的新机遇。在1月28日的清博盛典中，清华大学公共管理学院副院长朱旭峰为我们分享了关于智库大数据的演讲。受邀演讲嘉宾：清华大学公共管理学院教授、副院长朱旭峰以下为朱旭峰演讲实录各位专家、各位嘉宾，大家好，很高兴有这个机会来参加清博盛典。在此我想向大家分享一个关于智库的大数据研究报

2018-02-24 00:00:00 1175

转载 2018生活消费趋势：越来越多95后开始泡枸杞

1月24日，第一财经商业数据中心（CBNData）联合口碑发布了《2018生活消费趋势报告》，基于口碑、阿里、淘票票、饿了么等数据，全方位洞悉国民生活消费最新趋势。1月24日，第一财经商业数据中心（CBNData）联合口碑发布了《2018生活消费趋势报告》，基于口碑、阿里、淘票票、饿了么等数据，全方位洞悉国民生活消费最新趋势。来源：CBNData精彩活动福利 · 阅读 | 免费申请读大数据新书第

2018-02-23 00:00:00 1059

转载教育部发文：AI、算法等2018年进入全国高中课程！

最新教育部召开新闻发布会，介绍了《普通高中课程方案和语文等学科课程标准（2017年版）》的有关情况，并重新修订了语文等14门学科的课程标准。在此次“新课标”改革中，正式将人工智能、物联网、大数据处理正式划入新课标。修订版本的方案中，把高中学习内容分成了必修课、选择性必修课和选修课。具体在信息技术课程上，课程结构如下图所示：高中信息技术必修课程是全面提高高中生信息素养的基础，包括“数据与计算”和“信

2018-02-23 00:00:00 663

转载非985/211毕业的我，该如何在三年内月入过万？

01 985，211和普通本科首先关于985，211和普通本科学生的差距用一些数据来说话：关于就业从上面两张图可以看出，不同水平高校毕业生期望的起始薪酬水平有非常明显的差距。985高校学生能够接受5000元以下起薪的不到两成，而普通本科毕业的同学能接受这样待遇的则超过65% 。985高校学生中，近50%的人表示自己期望的首份工作地点是北上广深特大城市，而普通本科学生选择这几个一线城市的比例则只有2

2018-02-22 00:00:00 2199 2

转载【揭秘】中国四大银行的大数据应用已到了哪个阶段？

对于大数据给企业带来的价值，已经毋庸置疑。在国内，银行业应该是IT建设更为领先的行业之一。特别中、农、工、建四大银行，更是走在整个银行业的前面。那么，他们对于大数据是如何看待的?在这四大银行，大数据的应用又走到了什么阶段呢?下面，我们来听听这四大银行相关IT负责人的分享。01 中国建设银行信息技术管理部资深经理林磊明1）银行压力越来越大从十二五走到十三五期间，银行业面临的各方面的压力越来越大，从我

2018-02-22 00:00:00 10635

转载爬了知乎200万数据，图说程序员都喜欢去哪儿工作~

因为最近和朋友吃饭，大家都到了大三季，都在纠结自己该以哪里作为自己职业发展的起点？也想看看自己的背景，能不能找到靠谱的师哥师姐帮忙，那么师哥师姐都在哪里发光发亮呢？我当时也是午休的时候想到，知乎有那么多结构化的好的数据，不如抓取之，拿来分析可以看看名校生们都在哪？我们行业的人都喜欢哪，哪里每年带走一堆人？然后花半小时写了个多线程爬虫，爬下来几百万数据（其中每个学校的大圆圈占比代表该校学生在调研总数

2018-02-21 00:00:00 1060

转载春招快到了，送你一份数据分析常见面试题

找了半年工作，面试了几个data science的职位，总结了一些常见的问题，在这儿抛砖引玉。自我介绍几乎所有的面试都免不了以自我介绍为开头。对于考官，通常也会想基于自我介绍发现接下来要问的问题。所以，自我介绍非常重要。我参考的模板：教育背景：简单说说哪年在哪里获得什么学位。相关经验：按时间顺序讲一下2个做过的项目，介绍下用了什么办法，比如用了什么编程语言，最后的成果是什么。最好有些量化的指标，比

2018-02-21 00:00:00 1568 1

转载跳槽失败：数据分析师+211硕士+掌握工具+做过BI项目

元旦前，听闻我一朋友跳槽失败，近日喝酒顺便交流下，又提及旧闻，我答：HR拒绝你，一点没毛病。我这哥们学东西快，市场营销出身，做了2年互联网运营后，自学的Python、统计学、数据库……一系列数据分析师必备技能后，逐渐成为了以为拥有数据分析技能的高级运营，因为公司发展，并且熟悉业务，开始参与公司的数据产品获得非常宝贵的产品经验…….随着年龄增加和经验的累计，以及对未来的憧憬，17年下半年一直研究着飞

2018-02-20 00:00:00 10068

转载 2018年房价到底会不会涨！

从长期来看，由于我国人口基数大，以及目前我国的城市化进程已经进入“下半场”，人口流向是从小城市流向中心城市，一二线城市的住房需求还有膨胀空间；从中期来看，我国的土地供应肯定是逐步缩减的，尤其是一二线城市，受限与各城市总体规划，以及城市本身的体量，未来一二线城市土地供应会继续下降；从短期来看，目前我国的调控政策已经可以说是“史上最严”，房产调控也逐步定为长效机制，但是高压之下，我国房价仍然保持小幅上

2018-02-20 00:00:00 3216

转载身为数据科学家怎么能不掌握这四大技能！

来源：大数据文摘作者：seattle data guy编译：王梦泽、吴双、蒋宝尚想成为一名高级数据科学家除了拥有卓越的专业技能，你还需要其它技能来拉近和业务经理的距离。这看起来简单，但随着每年新技术的不断累积，技术和业务之间的距离会继续增大。因此，我们发现管理者和数据科学家有清晰的合作方向是非常重要的。业务和IT知识都是十分专业的，然而由于技能的专业化，许多企业都出现了两个专业间的空白。我们的任务

2018-02-19 00:00:00 341

转载秦始皇：请叫我数据治理专家

来源：EAWorld公众号（ID：eaworld）历史背景经过春秋时期旷日持久的争霸战争，周王朝境内的诸侯国数量大大减少，诸侯国互相攻伐，战争不断。三家分晋后，赵国、魏国、韩国跻身强国之列，又有田氏代齐，战国七雄的格局形成，七国分别是：齐、国楚国、燕国、韩国、赵国、魏国、秦国。公元前238年，秦王政在李斯、尉缭等人的协助下制定了“灭诸侯，成帝

2018-02-18 00:00:00 1522

转载 12款堪称神器的 Chrome 插件，Max 你的工作效率！

导语：好的工具插件是提高程序员生产力的法宝，本文介绍了 12 款Chrome 插件，非常高效实用，还附带下载地址，果断收藏~工欲善其事，必先利其器，程序员的日常工作根本就离不开 Chrome 浏览器（还不知道的请面壁思过130s）！其他功能优达菌就不啰嗦了，今天来说说 Chrome 如何提高你的生产力—— Chrome 支持大量扩展插件，能帮你短时间内完成更多工作，同时比一些 App 消耗

2018-02-18 00:00:00 9686 1

转载最暖数据：除夕有6.88亿人用微信红包传递狗年祝福

来源：微信派精彩活动福利 · 阅读 | 免费申请读大数据新书第23期推荐阅读2017年数据可视化的七大趋势！全球100款大数据工具汇总（前50款）论大数据的十大局限大数据时代的10个重大变革大数据七大趋势第一个趋势是物联网Q: 你的新年是如何度过的？有的话，你猜有多少呢？欢迎留言与大家分享请把这篇文章分享给你的朋友转载 / 投稿请联系：hzzy@hzbook.com更多精彩文章，请在公众号

2018-02-17 00:00:00 567

转载北京焦灼？上海颓废？看大数据如何解读城市性格

城市如人，在形成的过程中也会显现出独特的性格。具有特殊文化品格和精神气质的城市，无疑是最具吸引力而叫人难忘的。但你是否想过，如何用大数据深度探寻一个城市专属的性格特色，了解城市心理？近日，城市象限的地产业务总监张希煜，通过挖掘分析歌词、豆瓣、点评等多维数据，对城市性格特征进行轮廓侧写，有趣生动地为我们讲述了如何用大数据解密城市性格。作者：数据侠张希煜来源：DT数据侠何谓城市性格？今天我分享的主题

2018-02-17 00:00:00 482

转载从0到1：Python爬虫知识点梳理

做数据分析和任何一门技术一样，都应该带着目标去学习，目标就像一座灯塔，指引你前进，很多人学着学着就学放弃了，很大部分原因是没有明确目标，所以，一定要明确学习目的，在你准备学爬虫前，先问问自己为什么要学习爬虫。有些人是为了一份工作，有些人是为了好玩，也有些人是为了实现某个黑科技功能。不过可以肯定的是，学会了爬虫能给你的工作提供很多便利。小白入门必读作为零基础小白，大体上可分为三个阶段去实现。第一阶段

2018-02-16 00:00:00 579

转载漫画：什么是数据仓库？

一个故事在很久很久以前，世界上生活着许多种族，有人类，有矮人，有精灵......他们有着不同的信仰，不同的文化，彼此相安无事。可是，有一个猥琐男却偏偏想要统治整个世界。如何统治这么多不同文化信仰的种族呢？猥琐男想出一个馊主意，打造出几枚拥有魔力的戒指，免费送给不同种族的领袖，让他们可以更好地统治各自的族人。当各个种族的领袖美滋滋地戴上各自的魔戒，走上人生巅峰的时候，猥琐男又打造出一枚独一无二的至尊

2018-02-16 00:00:00 739

转载学好Python爬取京东知乎价值数据

Python爬虫为什么受欢迎如果你仔细观察，就不难发现，懂爬虫、学习爬虫的人越来越多，一方面，互联网可以获取的数据越来越多，另一方面，像 Python这样的编程语言提供越来越多的优秀工具，让爬虫变得简单、容易上手。利用爬虫我们可以获取大量的价值数据，从而获得感性认识中不能得到的信息，比如：知乎：爬取优质答案，为你筛选出各话题下最优质的内容。淘宝、京东：抓取商品、评论及销量数据，对各种商品及用户的消

2018-02-14 00:00:00 1469

转载数据分析师、大数据开发、Hadoop开发工程师、数据挖掘、算法工程师的工资薪水到底怎么样？

据最新发布的《大数据人才报告》显示,目前全国的大数据人才仅46万,未来3-5年内大数据人才的缺口将高达150万。领英报告表明，数据分析人才的供给指数最低，仅为0.05，属于高度稀缺。数据分析人才跳槽速度也最快，平均跳槽速度为19.8个月。根据中国商业联合会数据分析专业委员会统计，未来中国基础性数据分析人才缺口将达到1400万，而在BAT企业招聘的职位里，60%以上都在招大数据人才。■大数据专业就业

2018-02-14 00:00:00 13121 1

转载 Python超越R，为何Python攀上数据科学巅峰？

根据 KDnuggets最新调查，Python 生态系统已经超过了 R，成为了数据分析、数据科学与机器学习的第一大语言。本文对 KDnuggets 的此项调查结果做了介绍，并补充了一篇文章讲解为何 Python 能成为数据科学领域最受欢迎的语言。Python vs R：调查结果近日，KDnuggets 发起了一项调查，问题是：你在 2016 年到现在是否使用过 R 语言、Python（以及它们的封

2018-02-13 00:00:00 1843 1

转载不懂这37个数据中心术语，怎么混数据圈饭局！

这是一篇很长长长长长长长长长长长长长长长长长长长长长长长的干货，看到最后的都是沉迷知识不能自拔的学习劳模认证，没错了。在今天的IT行业佼佼者中，“现代数据中心”这个概念得到了越来越多的重视。当然，它受到如此多的关注也是理所应当的。云计算，闪存存储，软件网络，容器以及大量的编排和自动化工具相结合形成现代数据中心的基础，这已经成为了数字时代企业的发展需求。不过也许最重要的概念应该是数据中心并不一定是一

2018-02-13 00:00:00 840

转载零基础搭建Hadoop大数据处理环境

由于hadoop需要运行在Linux环境中，而且是分布式的，因此个人学习只能装虚拟机，本文都以VMware Workstation为准，安装CentOS7，具体的安装此处不作过多介绍，只作需要用到的知识介绍。VMware的安装，装好一个虚拟机后利用复制虚拟机的方式创建后面几个虚拟机，省时省力，需要注意的是需要修改每个虚拟机的IP与主机名。所有虚拟机采用NAT模式上网，而且要保证与物理主机的IP互相

2018-02-12 00:00:00 362

转载 17年数据分析经验告诉你大数据行业的门道

本文根据具有十七年数据分析行业经验的嘉宾陈晨的纪实采访整理。专访嘉宾：陈晨简历：现任电通安吉斯 – 美库尔(DAN – Merkle) 中国(上海/南京) 数据与分析部高级总监，兼任Merkle南京公司总负责人。十七年以上美国、加拿大及中国咨询业及行业领先公司数据营销、风险分析、定量模型，客户关系管理策略的经验，拥有市场营销、定量方法、经济计量和统计学方面坚实基础，和建立银行/金融/零售业营销模

2018-02-12 00:00:00 813

转载干货 | 34页PPT解读国家大数据标准

导语：本文是中国电子标准化研究院信息中心副主任吴东亚为读者解读国家大数据标准，非常干货2017年，我国大数据产业保持高速发展态势，各级政府和企业大力推进，技术创新取得明显突破，大数据应用推进势头良好。展望2018年，大数据产业发展将迎来“黄金期”，产业集聚将进一步特色化发展，创新驱动仍将是产业发展主基调，大数据融合应用进程加速，为做大做强数字经济、带动传统产业转型升级提供新动力。微信后台回复：“国

2018-02-11 00:00:00 670

转载张泉灵：时代抛弃你时，连一声再见都不会说

导读：互联网、人工智能、区块链...在这个瞬息万变的时代，新鲜事物不断涌现，思维方式更迭换代，我们生活的时代充满了巨大的不确定性。每一个追求上进的人，都会担心自己跟不上时代，但究竟怎样做才能消弭内心深处的不安全感呢？能给出标准答案的人不多。在今天推送的这篇文章中，原央视主持人、著名互联网投资人张泉灵，结合自身经历以及感悟，深入分析了这个问题。张泉灵（图片来源：百度百科）先跟大家分享一个故事。我前天

2018-02-11 00:00:00 2720

转载 12个数据可视化工具，人人都能做出超炫图表

导语：今天我们带来一篇来自 Adobe 工程师 Rohit Boggarapu 的文章。他在文章中介绍了一些适合网页开发者的数据可视化和绘图工具，让你不必再花大力气与枯燥的数据抗争。部分工具不要求写代码也可以使用！我们诠释数据的方式和数据本身之间存在着巨大的鸿沟。尤其是当我们唯一的选择是盯着表格中一列列不知所云的数字时。这可能是最无聊的一种格式了。没有哪个网页开发者会喜欢电子表格。好消息是，现在我

2018-02-10 00:00:00 120491 6

转载收藏 | Linux常用156个命令汇总！

本文为大家带来Linux系统中156个常用的命令。linux命令是对Linux系统进行管理的命令。对于Linux系统来说，无论是中央处理器、内存、磁盘驱动器、键盘、鼠标，还是用户等都是文件，Linux系统管理的命令是它正常运行的核心，与之前的DOS命令类似。linux命令在系统中有两种类型：内置Shell命令和Linux命令。命令功能说明线上查询及帮助命令 (2 个)man查看命令帮助，命令的词典

2018-02-10 00:00:00 448

转载 500款各领域机器学习数据集,总有一个是你要找的

目录：金融交通商业推荐系统医疗健康图像数据视频数据音频数据自然语言处理社会数据科研和竞赛数据金融美国劳工部统计局官方发布数据：http://dataju.cn/Dataju/web/datasetInstanceDetail/139沪深股票除权除息、配股增发全量数据，截止 2016.12.31 http://dataju.cn/Dataju/web/datasetInstanceDetail/34

2018-02-09 00:00:00 2270

转载北上广年终奖地图

年终将至，你是期待着春节过年还是期待着年终奖？可以肯定的是年终奖在前春节在后，没有年终奖很可能过不好年……北京 2017年，中国经济整体态势向好，北京城的年终奖稳中有升。纵观全城，年终奖会呈现：西稳东晃，北涝南旱的总体布局。可点击放大查看位于北京城西北角的后厂村，依旧会站在年终奖鄙视链的顶端。腾讯、百度、滴滴、网易……网络新贵皆聚于此。对于它们而言，年终奖发多少不是问题，怎么发才是问题。HR们要考

2018-02-09 00:00:00 519

转载他们调查了3.9万名程序员，制作了这份开发者技能报告

这是一份样本数超过 3.9 万人的调查报告，参与调查的开发者遍及全球。除了四分之一的开发者在学会开车前先学会编程之外，还有这些调查结果等你发现。对照这份调查报告，看看你跟世界上其他国家地区开发者之间的异与同各是什么？Hello World：未来的工作可能发生巨变，不管从事何种工作，学会编程总是大有裨益。编程有助于培养计算性思维，而计算性思维在制定决策的过程中发挥着重要作用。传统的简历可能会消失，招

2018-02-08 00:00:00 468

转载工信部发布《区块链数据格式规范》标准（PPT全文）

近日，在由工业和信息化部信息化和软件服务业司指导、工业和信息化部中国电子技术标准化研究院主办的“中国区块链技术和产业发展论坛第二届开发大会”上，《区块链数据格式规范》标准正式发布，该标准的发布有助于为区块链系统的数据结构设计提供参考，为区块链行业应用提供统一的数据标准，对我国区块链标准建设具有重要意义。单击图片可缩放查看高清大图来源：中国电子技术标准化研究院精彩活动福利 · 阅读 | 免费申请读

2018-02-08 00:00:00 1976

转载 2017互联网技术人薪资报告，你搬的砖够绕地球几圈？

2017 年，互联网人的薪资状况是怎样的？为什么大多数人都在吐槽自己没有达到平均水平？高端人才的薪资真有那么令人咋舌吗？看完本文，你准备跳槽吗？本次报告基于 Dolphin 真实案例数据和拉勾网统计数据。Dolphin 是猎头行业的特种兵，专注在高科技及金融领域的中高端人才猎头以及咨询服务。报告中涉及的薪资是由候选人 12 个月年薪加固定奖金部分构成，不包括候选人浮动奖金，股票和期权收益。互联网哪

2018-02-07 00:00:00 2258

转载柱状图用腻了？玉玦图给你更美的数据呈现

拥有古色古香名字的玉玦图，不仅名字好听，用起来也非常简单。这个外形极像环图的图表，实则是柱状图变形。那玉玦图到底怎么读？怎么用？我们今天就来看一看！满者为环，缺者玦玦（jué）是我国最古老的玉制装饰品，玉有缺则为玦。常见的玉玦是一个带有缺口的环形，形如玉玦的玉玦图（Radial Bar Chart）看上去就像拥有缺口的环图（Donut Chart），但它在用法上却和环图有很大的不同。玉玦图与环图环

2018-02-07 00:00:00 4473 1

转载《人类简史》作者：巨变将至！数据决定你未来是什么物种

（本文编选自《人类简史》作者尤瓦尔·赫拉利教授近日在瑞士达沃斯举行的第48界世界经济论坛的演讲，原标题为“Will the Future Be Human?”）今天我想聊聊我们这个物种的未来，以及生命的未来。我们应该是最后一代智人。再过一两百年，世界将被完全不同的实体统治。它们和我们的差距，也许比我们和黑猩猩的差距还要大。之所以这样说的原因是，未来几代人会学着改造人体、大脑、思维。这是21世纪经济

2018-02-06 00:00:00 444

空空如也

空空如也