![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
996工作党
这个作者很懒,什么都没留下…
展开
-
大数据Hadoop的13个开源工具
Hadoop是由Apache基金会开发的一个大数据分布式系统基础架构,最早版本是2003年原Yahoo!DougCutting根据Google发布的学术论文研究而来。用户可以在不了解分布式底层细节的情况下,轻松地在Hadoop上开发和运行处理海量数据的应用程序。低成本、高可靠、高扩展、高有效、高容错等特性让Hadoop成为最流行的大数据分析系统,然而其赖以生存的HDFS和MapReduc...原创 2019-05-25 21:59:40 · 1371 阅读 · 0 评论 -
208个最新最全大数据/人工智能专有名词术语 中英对照(强烈推荐收藏)
一个产业的蓬勃发展离不开基础知识点的整理与沉淀。我们相信这一份「208个关于大数据和人工智能的专用名词术语」中英文对照版 ;会成为大家以后日常工作中常用的工具,无论是你在翻译、写产品文档、写论文、又或者尝试国外新技术的时候都会用得上。所以,我们很高兴可以把它整合并且分享出来,并且按照字母进行了排序。由于文字太多,今天先放出从A-I部分,明天会放出J-Z部分。感谢大家长期以来的关注和支持...原创 2019-05-25 21:49:29 · 5215 阅读 · 1 评论 -
月薪8k 与 月薪38K的大数据程序员差距在哪里?
回想自己做开发的这么多年,我获得了很多,技术能力、培训、出国、大公司的,还记得刚刚出来第一年那段时间,太多东西不懂的,我都是一切听从老大的安排,敲敲代码,看看数据库,测试自己和别人的代码;这样浑浑噩噩干了一年。第二年的时候我就在想,自己还要这样吗?当然是否定的,不可能的,一年的经验自己完全可以入行了,是时候该学习怎么进行需求分析,怎么设计数据库,怎么写各类文档,怎么写更好的代码?所以说...原创 2019-05-25 21:49:33 · 243 阅读 · 0 评论 -
大数据HBase在阿里搜索中的应用实践
HBase作为淘宝全网索引构建以及在线机器学习平台的核心存储系统,是阿里搜索基础架构的重要组成部分。本文我们将介绍HBase在阿里搜索的历史、规模,应用的场景以及在实际应用当中遇到的问题和优化。HBase在阿里搜索的历史、规模和服务能力历史:阿里搜索于2010年开始使用HBase,从最早到目前已经有十余个版本。目前使用的版本是在社区版本的基础上经过大量优化而成。社区版本建议不要使用1.1....原创 2019-05-25 21:49:36 · 307 阅读 · 0 评论 -
2019年决定你薪资的大数据相关的【十大技术】
大数据技术指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。1、Java编程技术Java编程技术是大数据学习的基础,Java是一种强类型语言,拥有极高的跨平台能力,可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等,是大数据工程师最喜...原创 2019-05-25 21:49:39 · 322 阅读 · 0 评论 -
大数据,是个没有感情的杀手?一文解析大数据时代的利和弊
01瘆人的大数据上个月小柒邀请闺蜜们来家喝茶聊天,大家讨论去海边的旅游计划。聊着聊着,小爱同学突然插话:“我也要去”,吓得我赶紧拔掉了小爱的插头。姐妹们各回各家,小柒躺下刷手机,今日头条给我推送了刚才讨论的海边民宿,顿时睡意全无……周末去上海学习了两天《信息技术与管理》,再次被大数据的发展震撼到。伴随着近几年大数据的发展,我们的衣、食、住、行、社交,几乎完全被大数据掌控。...原创 2019-05-25 21:49:42 · 721 阅读 · 0 评论 -
2019年大数据工程师面试题,99%会机率碰到的海量题
现在全国各省正处于招聘的高峰期,面试者也越来越紧张,都希望有高人指点一二,倘若有面试题能提示一下,那面试能拿到offer的机会便大的多,下面就是一些常见的大数据面试题,希望能帮助你们一二:打起十二分精神 加油/加油在说整体之前,我们先了解下大数据,曾经哈佛大学社会学教授加里·金(崇拜/崇拜)说:“这是一场革命,庞大的数据资源使得各个领域开始了量化进程,无论学术界、商界还是政府,所...原创 2019-05-25 21:59:32 · 3697 阅读 · 1 评论 -
【零基础学习】大数据挖掘的33个知识点整理
下面是一些关于大数据挖掘的知识点,今天和大家一起来学习一下。1. 数据、信息和知识是广义数据表现的不同形式。2. 主要知识模式类型有:广义知识,关联知识,类知识,预测型知识,特异型知识3. web挖掘研究的主要流派有:Web结构挖掘、Web使用挖掘、Web内容挖掘4. 一般地说,KDD是一个多步骤的处理过程,一般分为问题定义、数据抽取、数据预处理、.数据挖掘以及模式评估等基本阶段。...原创 2019-05-25 21:59:36 · 371 阅读 · 0 评论 -
不懂技术也能看懂的云计算/大数据/人工智能
今天要讲这三个话题,一个是云计算,一个大数据,一个人工智能,我为什么要讲这三个东西呢?因为这三个东西现在非常非常的火,它们之间好像互相有关系,一般谈云计算的时候也会提到大数据,谈人工智能的时候也会提大数据,谈人工智能的时候也会提云计算。所以说感觉他们又相辅相成不可分割,如果是非技术的人员来讲可能比较难理解说这三个之间的相互关系,所以有必要解释一下。一、云计算最初是实现资源管理的灵活性我们首...原创 2019-05-25 21:59:38 · 4751 阅读 · 0 评论 -
【就业】数据分析师、大数据开发、Hadoop开发工程师、数据挖掘、算法工程师各路人才薪资怎么样?
据最新发布的《大数据人才报告》显示,目前全国的大数据人才仅46万,未来3-5年内大数据人才的缺口将高达150万。领英报告表明,数据分析人才的供给指数最低,仅为0.05,属于高度稀缺。数据分析人才跳槽速度也最快,平均跳槽速度为19.8个月。根据中国商业联合会数据分析专业委员会统计,未来中国基础性数据分析人才缺口将达到1400万,而在BAT企业招聘的职位里,60%以上都在招大数据人才。大数...原创 2019-05-26 22:05:46 · 490 阅读 · 0 评论