- 博客(27)
- 收藏
- 关注
RSS订阅原创 大数据应该这样学：数据挖掘与数据分析知识流程梳理
编辑文章数据挖掘和数据分析的不同之处：在应用工具上，数据挖掘一般要通过自己的编程来实现需要掌握编程语言；而数据分析更多的是借助现有的分析工具进行。在行业知识方面，数据分析要求对所从事的行业有比较深的了解和理解，并且能够将数据与自身的业务紧密结合起来；而数据挖掘不需要有太多的行业的专业知识。交叉学科方面，数据分析需要结合统计学、营销学、心理学以及金融、政治等方面进行综合分析；数据...
2018-12-31 13:18:41
1598
原创 Python与人工智能的关系到底是怎么样的？
人工智能掀起了世界的新一波科技浪潮，如今，你要是不懂点AI、机器学习和python都不好意思说你是现代人，那么python究竟和人工智能什么关系，为什么人工智能把python也给带火了，今天就给大家简单介绍下python和人工智能的关系及应用，以及想要学人工智能的你，究竟需要学些什么python的知识，先来上两张图人工智能和python的图。 在这里给大家推荐一个python系统学习q群：25...
2018-12-29 14:46:19
417
1
原创 超级详细的阐述：大数据、云计算和人工智能的关系
云计算、大数据和人工智能，这三个东西现在非常火，并且它们之间好像互相有关系：一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。但如果是非技术的人员，就可能比较难理解这三者之间的相互关系，所以有必要解释一下。对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解...
2018-12-28 22:03:22
7950
4
原创 "大数据工程师"和"java后台开发"的技术要求有什么区别？
大数据工程师和后台开发的技能差别有多大？本人非计算机专业出身，java没系统学过，喜欢写代码，要找工作了。现在很迷茫，不知道应该往哪个方面突击突击，是老老实实的弄弄java看看hadoop源码？还是研究研究scala，还是用Python写写爬虫搞搞网络编程？还是把C++好好复习复习，马上就找工作了，不知道该把时间往哪个技能上冲。对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的...
2018-12-27 13:55:32
2370
原创 大数据有十大应用领域，看看你用到了哪个？
如果提到“大数据”时，你会想到什么?也许大部分人会联想到庞大的服务器集群;或者联想到销售商提供的一些个性化的推荐和建议。如今大数据的深度和广度远不止这些，大数据已经在人类社会实践中发挥着巨大的优势，其利用价值也超出我们的想像。本文就来介绍大数据的十大应用领域。1.了解和定位客户这是大数据目前最广为人知的应用领域。很多企业热衷于社交媒体数据、浏览器日志、文本挖掘等各类数据集，通过大数...
2018-12-26 11:12:24
1201
原创 0基础转行，学Java和大数据有什么区别？大数据学习步骤是什么？
Java和大数据如何选 大数据方向有很多，目前我们经常说的大数据学习，其实指的是大数据开发！大数据开发顾名思义学习的主要技术就是编程技术，零基础学习大数据是需要从java和linux学起的。当然，学习大数据需要的java技术有限，主要学习javaSE和部分javaEE知识点。那下面就谈谈java和大数据如何选择1、java 可以称之为常青树，我个人最早也是做java出身的。...
2018-12-25 09:46:27
552
原创 编程零基础学习大数据，就该有这样的学习思路
我们在系统学习大数据的之前，要先了解大数据开发是在什么系统平台下进行的。所以我们在学之前要先学习Linux的知识，这部分显得格外的重要。1、Linux学习学习如何使用VMware安装Linux镜像------认识linux的桌面环境、shell环境------在shell环境下进行文件系统的操作，掌握more、touch、cp、mv、rm等20多个常用命令------学习linux的网络管...
2018-12-24 10:55:48
174
原创 SQL与NoSQL数据库入门基础知识详解
这几年的大数据热潮带动了一激活了一大批hadoop学习爱好者。有自学hadoop的，有报名培训班学习的。所有接触过hadoop的人都知道，单独搭建hadoop里每个组建都需要运行环境、修改配置文件测试等过程。对于我们这些入门级新手来说简直每个都是坑。国内的发行版hadoop那么多，似乎都没有来填这样的坑？不知道是没法解决，还是没有想到？安装运行环境这样的坑，那些做国产大数据底层开发的，如果不能...
2018-12-22 14:31:27
139
原创 朋友圈大数据：你的朋友圈出卖了你，大数据就是这么给力！！！
很多老观念早该颠覆了，比如“路遥知马力，日久见人心”。据统计，现代人看篇文章平均不超过5分钟、每次嘿咻平均不超过6分钟。如此讲究效率，哪有心思体验“马力”，哪有工夫跟你“日久”！大数据时代，交友越来越讲究快、狠、准。比如微信，喷得来就玩，喷不来立马拉黑。现代人饭局多，往往八竿子打不着的人聚一块，推杯换盏，吆五喝六，半瓶下肚，一圈转完，微信里便能扫进去五六个“朋友”。喝晕回家睡觉，第二天一睁眼就...
2018-12-21 15:48:59
2125
1
原创 Machine Learning:十大机器学习算法
机器学习算法大致可以分为三类：监督学习算法 (Supervised Algorithms）:在监督学习训练过程中，可以由训练数据集学到或建立一个模式（函数 / learning model），并依此模式推测新的实例。该算法要求特定的输入/输出，首先需要决定使用哪种数据作为范例。例如，文字识别应用中一个手写的字符，或一行手写文字。主要算法包括神经网络、支持向量机、最近邻居法、朴素贝叶斯法、决策树...
2018-12-20 16:38:52
438
原创 助你事半功倍的数据科学工具大集合
无论您在工地搬砖(作者并无瞧不起建筑工人之意)，还是在财富500强的企业中工作，拥有一套合适的工具是必不可少的。如今，各个企业为了能够顺畅地“构建出自己的商业大厦”，他们需要通过各种不同的工具，来达到事半功倍的效果。同时，为了能够在数字全球化的环境中保持竞争力，各大公司都将注意力投向了如何建立一套完备的数据分析策略。因此，他们需要运用各种数据科学工具，通过各种途径，来对运营中的企业数据实现分类...
2018-12-19 18:33:06
345
1
原创 大数据平台Hadoop的分布式集群环境搭建，官网推荐
1 概述本文章介绍大数据平台Hadoop的分布式环境搭建、以下为Hadoop节点的部署图，将NameNode部署在master1，SecondaryNameNode部署在master2，slave1、slave2、slave3中分别部署一个DataNode节点NN=NameNode（名称节点）SND=SecondaryNameNode（NameNode的辅助节点）DN=Dat...
2018-12-18 11:35:50
143
原创 银行业9大数据科学应用案例
在银行业中使用数据科学不仅仅是一种趋势，它已成为保持竞争的必要条件。 银行必须认识到， 大数据技术可以帮助他们有效地集中资源，做出更明智的决策并提高绩效。 以下我们罗列银行业使用的数据科学用例清单， 让您了解如何处理大量数据以及如何有效使用数据。 [TOC] 1 欺诈识别 机器学习对于有效检测和防范涉及信用卡，会计，保险等的欺诈行为至关重要。 银行业务中的主动欺诈检测对...
2018-12-17 11:23:09
4169
1
原创 用图说话：数据行业职业薪资“钱景”：平均薪资轻松过万，最高5万
近年来，大数据越来越火，相关产业也在各项利好政策下蓬勃发展。越来越多的人开始考虑网大数据方向发展，这其中，高薪资是主要原因。据数联寻英发布《大数据人才报告》显示，目前全国的大数据人才仅46万，未来3-5年内大数据人才的缺口将高达150万。而在BAT企业招聘的职位里，60%以上都在招大数据人才。如此热门的行业，很难不让人心动。1.大数据开发工程师基础大数据服务平台，大中型的商业应用包括我...
2018-12-16 22:43:49
220
原创 2018年最新大数据学习路线（清华大学大数据专业赵老师制定）
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。大数据入门，需要学习以下这些知识点：先附上一张自己总结的学习线路图 1、Java编程技术Java编程技术是大数据学...
2018-12-15 23:00:02
515
原创 全民AI时代：干洗店老板、高中生齐上阵啦
1975年冬天，旧金山半岛的广告牌上出现了一则有点“奇怪”的消息。 “你是否在尝试自己做电脑开发呢？，如果是的话，参加我们的聚会！” 这则通告来自当年的Homebrew计算机俱乐部。Homebrew是一个业余爱好者社区，俱乐部成员对一种当时叫做微处理器的新型组件的潜力很感兴趣。 Homebrew的第一次会议是在加利福尼亚州的Menlo Park的一个车库召开的，有32人参加...
2018-12-14 23:41:24
214
原创 hadoop 伪分布式模式学习笔记
前言Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础。这是一篇记录我自己学习的文章，Hadoop的学习方法很多，网上也有很多学习路线图。hadoop介绍Hadoop是一个能够对海量数据进行分布式处理的系统架构。我采用的是hadoop-2.8.0,它主要包含3大块： hdfs:分布式存储系统HDFS(Hadoop Distributed File S...
2018-12-13 23:53:31
214
原创 学习大数据，我不会数学怎么办？还要不要学啦？
由于工作关系，在我的周围存在这两类人，一是正在学校学习的大学生，二是在IT公司从事研发设计的工程师。他们在数学学习和应用方面出现了两个极端。在校大学生，特别是大一、大二的学生每学期都有一些诸如数学分析、线性代数、数论之类数学课程，尽管在课堂上可以听到莱布尼茨和牛顿的纠葛故事、笛卡尔的爱情故事，但是他们往往感到很迷茫，因为不知道所学的数学知识到底有什么用。对于IT公司的研发人员来说，他们在进入大数据...
2018-12-12 23:29:31
2183
原创 JAVA转大数据的学习之路，就该这样走（内附1T大数据资料）
如今使用了 23 年的 Java不再免费了，Java程序员是时候该转移了，现在大数据的时代下，更是Java程序员们转型可遇而不可求的机遇。为什么要这么说呢？因为Java程序员转型大数据工程师有着天然进阶优势，不仅仅是前景和薪资。技术层面来说，大数据使用的Hadoop(在分布式服务器集群上存储海量数据并运行分布式分析应用的一种方法）基本都是用Java语言完成，即使你没有学过Java上手Hadoo...
2018-12-11 22:50:07
470
原创 详细解读：大数据分析的学习
以大数据分析师为目标，从数据分析基础、JAVA语言入门和linux操作系统入门知识学起，系统介绍hadoop、HDFS、MapReduce和Hbase等理论知识和hadoop的生态环境。大数据 一、大数据分析的五个基本方面 1，可视化分析 大数据分析的使用者有大数据分析专家，同时还有普通用户，但是他们二者对于大数据分析基本的要求就是可视化分析，因为可视化分析能够直观的呈现...
2018-12-10 21:38:38
407
原创 Hadoop SQL客户端工具之Dbeaver安装及使用
提示：代码块部分可以左右滑动查看噢1文章编写目的本篇文章Fayson主要介绍另外一款工具DBeaver的安装及使用。测试环境1.RedHat7.22.CM和CDH版本为5.15.03.Window Server 2012R22DBeaver的安装1.通过如下地址下载DBeaver安装包 2.双击安装包dbeaver-ce-5.2.5-x86_64...
2018-12-08 18:53:51
675
原创 当你谈论大数据的时候你还在说Hadoop？
现在再写这篇文章感觉有些不合时宜，目前，貌似很少人再讨论大数据，也很少人再讨论hadoop。整理这篇文章，是为了探寻新的技术方向。 先来看看几篇讨论文章(有删减)： Hadoop是否已死，Spark称霸 由于Hadoop的MapReduce高延迟的死穴，导致Hadoop无力处理很多对时间有要求的场景，人们对其批评越来越多，Hadoop无力改变现在而导致正在死亡。 原先支持H...
2018-12-07 18:04:45
212
原创 0基础学Python，你就差这个圈
作为编程语言届的新秀，Python在近两年可谓是风生水起 不难看出python的势头还是很猛的，一路高涨，持续被行业人士关注，那么有人要问了，那些波谷咋回事？ 细心机智的粉丝就会去查找波谷是什么原因造成的？一看便知，主要是节假日，比如国庆、春节，都出去浪了 接着再看看权威机构的榜单 IEEE Spectrum发布的2018年热门语言排行榜中，Pyth...
2018-12-05 21:56:41
285
原创 面试Python工程师会问哪些问题？需要准备什么？
随着互联网的发展，python语言现在变得越来越火爆，Python程序员越来越受到大家的青睐!那么想进入Python行业，面试时需要注意些什么问题呢?我们在参加Python开发岗位面试的时候都要做哪些准备?一般Python技术方面的面试会问哪些问题?今天，我们从2位面试官的角度来看看，参加 Python 开发岗面试需要做哪些准备。（一）我之前在豆瓣负责过一段时间我们组的技术面试。由...
2018-12-04 19:37:36
765
原创 做 AI 老司机跟你聊聊怎么才能入行 DL/ML
目前，“深度学习”这一词已经变得越来越普及，生活中也是到处都充斥着这一词汇，同时也有越来越多的人开始想要从事这一行的相关工作，尝试着接触、了解这一行业。当然，关于这一行业的相关介绍很多，也很杂乱，初学者往往很容易被各种各样的概念搞得很迷惑，即便是计算机从业者有时候也分不清深度学习的很多问题和概念。包括，很多朋友在选择了这个方向以后，依然会感到迷茫，因为有太多的研究方向去做，自然语言处理...
2018-12-03 18:46:01
346
原创 python开发源码：调用摄像头并进行人脸识别截图
开发人工智能虽然需要很多数学知识，但如果我们只是简单的应用，就简单多了哈。在此分享人脸识别的源码，本人已亲测可用哈！PS：请自行创建 image 文件夹，并提前安装好opencv扩展：pip install opencv-python代码:import cv2###调用电脑摄像头检测人脸并截图def CatchPICFromVideo(window_name, ca...
2018-12-02 20:56:22
6512
1
原创 Python常见面试题你能答对多少？敢来挑战吗（一）
1.什么是Python？使用Python有什么好处？2.什么是PEP8？3.什么是pickling和unpickling？4.Python是如何被解释的？5.Python是怎样管理内存的？6.有哪些工具可以帮助debug或做静态分析？7.什么是Python装饰器？8.数组和元组之间的区别是什么？9.参数按值传递和引用传递是怎样实现的？10.字典推导式和列表推...
2018-12-01 15:42:00
205
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人