lele989
码龄6年
求更新 关注
提问 私信
  • 博客:129,047
    129,047
    总访问量
  • 11
    原创
  • 25
    粉丝
  • 0
    关注
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:广西
加入CSDN时间: 2019-05-27
博客简介:

lele989的博客

查看详细资料
个人成就
  • 获得28次点赞
  • 内容获得0次评论
  • 获得147次收藏
  • 博客总排名930,536名
创作历程
  • 60篇
    2019年
成就勋章
TA的专栏
  • 大数据
    63篇

TA关注的专栏 0

TA关注的收藏夹 0

TA关注的社区 0

TA参与的活动 0

创作活动更多

王者杯·14天创作挑战营·第2期

这是一个以写作博客为目的的创作活动,旨在鼓励码龄大于4年的博主们挖掘自己的创作潜能,展现自己的写作才华。如果你是一位热爱写作的、想要展现自己创作才华的小伙伴,那么,快来参加吧!我们一起发掘写作的魅力,书写出属于我们的故事。 注: 1、参赛者可以进入活动群进行交流、分享创作心得,互相鼓励与支持(开卷),答疑及活动群请见https://bbs.csdn.net/topics/619735097 2、文章质量分查询:https://www.csdn.net/qc 我们诚挚邀请你们参加为期14天的创作挑战赛!

66人参与 去参加
  • 最近
  • 文章
  • 专栏
  • 代码仓
  • 资源
  • 收藏
  • 关注/订阅/互动
更多
  • 最近

  • 文章

  • 专栏

  • 代码仓

  • 资源

  • 收藏

  • 关注/订阅/互动

  • 社区

  • 帖子

  • 问答

  • 课程

  • 视频

搜索 取消

大数据入门,到底要怎么学习大数据?

很多人都知道大数据很火,就业很好,薪资很高,想往大数据方向发展。但该学哪些技术,学习路线是什么样的呢?其实就是想告诉你的大数据的三个发展方向,平台搭建/优化/运维/监控、大数据开发/设计/架构、数据分析/挖掘。请不要问我哪个好学,哪个钱多。学习大数据想要了解更多大数据相关知识,请关注微信公众号【金牛大数据开发学习】领取免费资料及课程​先说一下大数据的4V特征:数据量大,...
转载
发布博客 2019.06.18 ·
491 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

通过Spark SQL实时归档SLS数据

今天,我再举例说明一下如何使用Spark SQL进行流式应用的开发。本文主要分成三部分:流式计算和SQL 简要介绍Spark SQL流式开发语法 实时归档SLS数据到HDFS1. 流式计算和SQL数据的价值随着时间逐渐降低。及时尽早的对数据进行处理提升了数据的价值,所以流式计算系统的应用也越来越广泛。目前常用的流式计算框架有Storm,Spark Streaming及Flink等,也...
原创
发布博客 2019.06.17 ·
831 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据人工智能发展趋势与前景

上周,南京大学开设了国内第一家人工智能学院,机器学习大牛周志华领衔院长,可谓实至名归。最近几年,以大数据和人工智能为代表的前沿信息技术,备受各界关注,相关领域的风投和创新、创业高烧不退,学术界大牛们纷纷下海,大数据深度学习研究和应用也在逐步落地,就连×××的支持政策也是一个接一个。还有Facebook扎克伯格和Tesla埃隆马斯克为代表的大佬们就AI威胁站队互掐,AlphaGo的成功营销与W...
转载
发布博客 2019.06.17 ·
8650 阅读 ·
0 点赞 ·
0 评论 ·
9 收藏

干货:PHP与大数据开发实践

大数据是使用工具与技术,来处理大量和复杂数据集合的专用术语,能够处理大量数据的技术称为MapReduce。何时使用MapReduceMapReduce特别适合涉及大数据的问题。它通过把数据处理工作分成非常小的片(或称块),方便被多个系统处理。由于MapReduce将一个问题分片并行工作,与传统软件系统相比,此解决方案速度会更快。大概有如下场景会应用到MapReduce:1 计数和统计...
原创
发布博客 2019.06.16 ·
2552 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

大数据与Hadoop有什么关系?大数据Hadoop入门简介

学习着数据科学与大数据技术专业(简称大数据)的我们,对于“大数据”这个词是再熟悉不过了,而每当我们越去了解大数据就越发现有个词也会一直被提及那就是——Hadoop那Hadoop与大数据有什么关系呢?所谓大数据,就是从各种类型的数据中,快速获得有价值信息的能力。大数据是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。它是对那些超出正常处理范围和大小...
原创
发布博客 2019.06.16 ·
711 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

大数据Hadoop快速上手技巧,学习的方式

Hadoop是目前最火热和普遍的大数据处理工具。一提起大数据,就绕不开Hadoop。那么今天就给大家介绍一些快速学习大数据Hadoop的方式。对于小白学习大数据需要注意的点有很多,但无论如何,既然你选择了进入大数据行业,那么便只顾风雨兼程。正所谓不忘初心、方得始终,学习大数据你最需要的还是一颗持之以恒的心。学习的方式【大数据开发学习资料领取方式】:加入大数据学习交流群9...
转载
发布博客 2019.06.16 ·
499 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

概念普及-云计算 大数据 Hadoop BI

一、云计算云计算的概念最早是 2006 年由 Google 提出的。1、云计算定义云计算是一种可以通过网络方便地接入共享资源池,按需获取计算资源的服务模型。资源包括:网络、服务器、存储、应用、服务等共享资源池中的资源可以通过较少的管理代价和简单业务交互过程,而快速部署和发布。2、云计算特点按需提供服务:以服务的形式为用户提供应用程序、数据存储、基础设施等资源,根据用户需求自...
转载
发布博客 2019.06.16 ·
429 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

新职业 | 大数据工程师

2019年1月25日,人力资源和社会保障部职业技能鉴定中心官网发布《关于拟发布新职业的公示通告》,就15个拟发布新职业进行公示。其中“大数据工程技术人员”在列,该职业俗称就是“大数据工程师”。下面,我们一起来了解一下什么是“大数据工程师”。定义在《关于拟发布新职业的公示通告》中,“大数据工程技术人员”的定义为:从事大数据采集、清洗、分析、治理、挖掘等技术研究,并加以利用、管理、维护和...
转载
发布博客 2019.06.15 ·
450 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

果不其然 大数据工程师薪资 最高!

知道大家比较喜欢薪资问题,所以现编专门在网上搜索到2016年程序员职业薪酬报告,毋庸置疑,大数据工程师薪资最高。下面一起解读一下这份报告:如果掉下一块砖砸到程序员,他十有八九是后端或者前端,最不可能的是测试工程师。5年工作经验的最有资格逃离北上广程序员工资一直居高不下。北京程序员平均工资是12715元,和此相差无几的是上海、深圳、南京和西安,所以程序员在逃离北上...
原创
发布博客 2019.06.14 ·
481 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

详解Kafka: 大数据开发最火的核心技术

大数据时代来临,如果你还不知道Kafka那你就真的out了(快速掌握Kafka请参考文章:如何全方位掌握Kafka核心技术)!据统计,有三分之一的世界财富500强企业正在使用Kafka,包括所有TOP10旅游公司,7家TOP10银行,8家TOP10保险公司,9家TOP10电信公司等等。LinkedIn、Microsoft和Netflix每天都用Kafka处理万亿级的信息。Kafka主...
转载
发布博客 2019.06.13 ·
233 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据开发及和大数据相关的技术

在现如今,随着互联网技术飞速的发展,目前有不少朋友询问关于大数据方面的问题,比如什么是大数据开发啊,和大数据相关的技术是什么呢等问题,我们今天就浅谈一下大数据开发及和大数据相关的技术的问题。首先,大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。...
转载
发布博客 2019.06.13 ·
448 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

最全最新的大数据系统交流路径!!

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段,处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统数据处理手段所无法完成的,其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等,汇集了当前IT领域热门流行的IT技术。大数据入门,需要学习以下这些知识点:1、Java编程技术Java编程技术是大数据学习的基础,Java是一种强类型语言,...
原创
发布博客 2019.06.13 ·
158 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

算法工程师、软件工程师、大数据工程师,傻傻分不清楚

这里有最简单易懂适合HR的技术干货,咱们国家的科技水平已达到了一个前所未有的水平,区块链微服务容器人工智能大数据云计算,以后可能和程序员聊天都困难!说声抱歉,告诉你。我们回归啦!自2018年6月之后,我去到了一家新公司负责区域的管理。因为过于忙碌,实在是无法抽出身来为各位TechHR的小伙伴们撰写相关的内容。在过去的4个月里,我也备受煎熬。最终决定离开原来的公司,开始重拾过去的猎头...
转载
发布博客 2019.06.12 ·
4960 阅读 ·
0 点赞 ·
0 评论 ·
4 收藏

这次,大数据工程师赢了!

大数据时代已经到来,它俨然成为了企业的战略资源,成为了提高竞争力的关键要素。为此,各个行业都开始用数据指导决策,从微信朋友圈、淘宝京东等电商APP的商品推荐 ,今日头条、抖音快手等媒体的新闻和视频推送,甚至到出行路线优化,这背后,都严重依赖于以数据为基础的决策结果。随着大数据的爆发,中国IT业内环境也将面临新一轮的洗牌,不仅是企业,更是从业人员转型可遇而不可求的机遇。看下图,在未来技术...
转载
发布博客 2019.06.12 ·
401 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

大数据蓝皮书:解读中国大数据发展十大趋势

2018年5月28日,在以“数化万物 智在融合”为年度主题的2018中国国际大数据产业博览会举办期间,由大数据战略重点实验室研究编著的大数据最新理论成果《大数据蓝皮书:中国大数据发展报告No.2》正式发布。该书由社科文献出版社出版,通过对数字中国的建设与展望、大数据发展指数优化与评估、数据权保护与立法、大数据应用与实践等方面的探讨与分析,从理论与实践的角度探索数字中国建设路径。据悉,该书是《大数据...
转载
发布博客 2019.06.12 ·
1882 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

你们是不是很缺大数据工程师?

缘起之所以有这个话题,是因为周末加班中午吃饭与一个同行朋友聊起了这个话题,之后再细细地结合一些其他接触的东西,确实是有些感触的。并且对于行业的一些现状,也的确有些自己的看法,对不对先不论,这玩意儿也没有对错之分,每个人都有自己想法,当然也包括我博客虫了。所以,有些东西、有些想法我还是愿意分享出来的,畅所欲言吧~~01class我眼中的大数据现状!其实个人在大数据在大数据这...
转载
发布博客 2019.06.11 ·
349 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据工程师是做什么的?需要具备什么能力?

如何成为大数据工程师 由于目前大数据人才匮乏,由于18年是各个大学第一年开设大数据专业,所以暂时也没有相关专业的大数据专业人才投入到社会中。对于公司来说,很难招聘到合适的人才。 阿里巴巴曾经举办了一个大数据竞赛,通过这个竞赛来激励内部员工,同时也发现外部人才,让各行业的大数据工程师涌现出来。各个领域的达人只要学会运用数据,也可以成为大数据工程师。 如果曾经没有大数据相关经...
转载
发布博客 2019.06.11 ·
6392 阅读 ·
2 点赞 ·
0 评论 ·
5 收藏

哪些人适合学习大数据呢?有难度吗?

在科技的一次次冲击之下,传统行业面临的困境也越来越多,寻求变革已经成为了一种必然。无论是电商行业的产生,还是移动营销模式的出现,都让传统行业感到压力,而如今,随着大数据出现,传统行业想要不被时代抛弃,转型已经迫在眉睫。而相对应的,大数据的出现也让众多的从业者看到来了新的发展机会。随着国家战略的支持和大数据技术的快速发展,大数据的应用场景在不断的深入,产生的影响也在不断的加大。马爸爸说...
原创
发布博客 2019.06.11 ·
1109 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据学习路线,0基础小白怎么学习大数据?

大数据的领域非常广泛,往往使想要开始学习大数据及相关技术的人望而生畏。大数据技术的种类众多,这同样使得初学者难以选择从何处下手。希望能为你开始学习大数据的征程提供帮助,以及在大数据产业领域找到工作指明道路。https://upload-images.jianshu.io/upload_images/15299086-f99594d21a05af86.png?imageMogr2/aut...
转载
发布博客 2019.06.10 ·
203 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据研究员:数据科学很大,在你身边很小

作为下一代革命性技术人工智能的重要依托技术,国内的大数据行业在全球走在了前列。(图片来源:全景视觉)经济观察网记者 饶贤君21世纪什么最贵?葛优在《天下无贼》里告诉我们,答案是人才,但他没想到的是,短短八年后的2012年,奥巴马向全世界宣布,数据才是新时代下最有价值的存在,对数据的占有和控制甚至将成为陆权、海权、空权之外的另一种国家核心资产,“数据是未来的新石油”。...
转载
发布博客 2019.06.08 ·
408 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏
加载更多