大数据开发

大数据开发工程师

Hadoop大数据组件安装 史上最详细教程 手把手教会你安装

Hadoop安装--大数据组件安装--史上最完整教程--手把手教会你安装  ——彻底揭开大数据技术的面纱,让小白彻底进入大数据技术领域 安装的Hadoop的生态圈组件有如下几个(以后会不断补充完善起来了)。 (1)Hadoop(单机模式独立,伪分布式伪分布式,全分布式全分布式) (2)Zo...

2018-11-22 18:04:35

阅读数 376

评论数 0

CentOS7图形界面与命令行界面(Terminal)切换

CentOS7图形界面与命令行界面(终端)切换 (1)CentOS7 在图形界面进入dos界面 :ctrl+alt+F6  dos界面进入图形界面:ctrl+alt+F2 (2)CentOS7以前的版本 图形界面进入dos界面 :ctrl + alt + F2 dos界面进入图形界面:...

2018-07-12 09:24:45

阅读数 5548

评论数 0

大数据开发常用算法

无论是机器学习,模式识别,数据挖掘,统计学习,计算机视觉,语音识别,自然语言处理都涉及到算法。1.树:决策树(决策树)是在已知各种情况发生概率的基础上,通过构成决策树来求取净现值的期望值大于等于零的概率,评价项目风险,判断其可行性的决策分析方法,是直观运用概率分析的一种图解法。由于这种决策分支画成...

2018-06-12 10:17:13

阅读数 3812

评论数 0

大数据开发需要哪些工具?大数据开发必备工具汇总

大数据研究的出现,为企业、研究机构、政府决策提供了新的行之有效思路和手段,想要做好大数据的管理和分析,一些大数据开发工具的使用是必不可少的,以下是大数据开发过程中常用的工具: 1. Apache Hive Hive是一个建立在Hadoop上的开源数据仓库基础设施,通过Hive可以很容易的进行数...

2018-02-14 00:12:06

阅读数 2203

评论数 0

大数据平台解决方案

第1章 华数大数据分析平台方案介绍 1.1 华数大数据平台总体架构 1.1.1 华数大数据平台应用架构   应用架构图 基于华数多年来的开发经验,并借鉴行业大数据分析平台的实施、管理和应用方面的成功经验,结合禾丰牧业实际信息化情况,我们将禾丰大数据平台实际为三层...

2018-02-14 00:07:54

阅读数 28401

评论数 0

大数据平台的软件有哪些?

查询引擎 一、Phoenix 简介:这是一个Java中间层,可以让开发者在Apache HBase上执行SQL查询。Phoenix完全使用Java编写,代码位于GitHub上,并且提供了一个客户端可嵌入的JDBC驱动。 Phoenix查询引擎会将SQL查询转换为一个或多个HBase scan...

2018-02-13 23:55:51

阅读数 19083

评论数 0

深入浅出解析大数据平台架构

目录:什么是大数据Hadoop介绍-HDFS、MR、Hbase大数据平台应用举例-腾讯公司的大数据平台架构“就像望远镜让我们能够感受宇宙,显微镜让我们能够观测微生物一样,大数据正在改变我们的生活以及理解世界的方式……”。大数据的4V特征-来源公司的“大数据”随着公司业务的增长,大量和流程、规则相关...

2018-02-13 17:00:45

阅读数 965

评论数 2

大数据开发 岗位需要的知识——写给大数据开发初学者的话

经常有初学者在博客和QQ问我,自己想往大数据方向发展,该学哪些技术,学习路线是什么样的,觉得大数据很火,就业很好,薪资很高。如果自己很迷茫,为了这些原因想往大数据方向发展,也可以,那么我就想问一下,你的专业是什么,对于计算机/软件,你的兴趣是什么?是计算机专业,对操作系统、硬件、网络、服务器感兴趣...

2018-02-08 00:25:57

阅读数 5230

评论数 0

最全最好用的vim配置(即.vimrc文件的配置),附加vim操作技巧

请注意:此教程是在他人基础上修改的,部分内容需要自己调整。——这也是学习使用vim的必经之路。 目录 1.1 vim配置(.vimrc配置) 1.2 vim操作技巧 1.VIM文本替换命令 2. 在VIM中进行文本替换 3.vim官方教程 1.1 vim配置(.vimrc配置) 1...

2017-07-06 15:14:20

阅读数 19042

评论数 2

windows安装Python3.6和pip终极教程(win10,win7)

  初学者在windows环境下安装Python。本文希望提供傻瓜式的教程,能够令读者成功安装Python和pip。 (1)我们先来安装Python,博主选择的版本是最新的3.4.2版本。windows下面的Python安装一般是通过软件安装包安装而不是命令行,所以我们首先要在Python的官...

2017-05-19 21:32:20

阅读数 37870

评论数 2

解决:eclipse 中tomcat已启动,localhost:8080正常显示,但是jsp文件Run as server显示404错误

  1. 将 Tomcat 和 Eclipse 相关联(重新操作一遍) Eclipse-选择菜单栏Windows-->preferences-->sever-->Runtime Environments ,弹出如下界面: ...

2019-01-17 14:55:02

阅读数 226

评论数 0

问题解决:eclipse 的apache-tomcat-8.5.15\nexus\logs\nexus.log (拒绝访问。)

(1)本人是win10,找到tomcat的安装目录apache-tomcat-8.5.15,右击-属性-安全-选中当前用户(前面有一个人的图标,见图)-编辑 (2)将当前用户的权限,全部选中,如图所示。出现提示框,选择是。等待设置完成后,依次单击确定。 ...

2019-01-14 11:02:26

阅读数 255

评论数 0

技术书阅读方法论

技术书阅读方法论 一.速读一遍(最好在1~2天内完成) 人的大脑记忆力有限,在一天内快速看完一本书会在大脑里留下深刻印象,对于之后复习以及总结都会有特别好的作用。 对于每一章的知识,先阅读标题,弄懂大概讲的是什么主题,再去快速看一遍,不懂也没有关系,但是一定要在不懂的地方做个记号,什么记号无...

2018-12-25 16:59:19

阅读数 119

评论数 0

MySQL等 SQL语句在线练习

SQL语句在线练习 http://sample.jimstone.com.cn/xsql/ SQL语句测验 http://www.w3school.com.cn/quiz/quiz.asp?quiz=sql sql语句练习50题(Mysql版)  https://blog.csdn...

2018-11-25 23:25:01

阅读数 7022

评论数 0

centos7 无法联网可能的解决方案-vmware14 centos7 无法联网,ping 百度www.baidu.com 不通,无线图标消失,network中的wired不见了

最佳解决方案如下。目前共遇到5种方法。 1.检查了VMWare的的的的服务已经全开了。 使用窗口窗口图标搜索“服务”二字,即可打开服务设置。 2.确保vmware14的NAT模式连接网络,各种配置没问题。当然你可以使用桥接模式。 3.centos7中进入根用户,打开的的ifcfg-ens33网...

2018-11-25 22:41:37

阅读数 569

评论数 0

crontab定时任务入门总结

一.crontab命令介绍 crontab命令的功能是给定的计划周期内执行给定的命令。 crontab命令的参数: Options: -u <user> define user #用来设定某个用户的crontab服务,例如,“-u abc”表...

2018-11-25 21:21:00

阅读数 143

评论数 0

大数据采集工具,除了Flume,还有什么工具?

随着大数据越来越被重视,数据采集的挑战变的尤为突出。今天为大家介绍几款数据采集平台: Apache Flume Fluentd Logstash Chukwa Scribe Splunk Forwarder 大数据平台与数据采集 任何完整的大数据平台,一般包括以下的几个过程: 数据...

2018-11-24 23:51:05

阅读数 3028

评论数 0

ETL构建数据仓库

在数据仓库构建中,ETL贯穿于项目始终,它是整个数据仓库的生命线,包括了从数据清洗,整合,到转换,加载等的各个过程,如果说数据仓库是一座大 厦,那 么ETL就是大厦的根基,ETL抽取整合数据的好坏直接影响到最终的结果展现。所以ETL在整个数据仓库项目中起着十分关键的作用,必须摆到十分重要的位 置。...

2018-11-24 23:22:39

阅读数 93

评论数 0

Java面试题汇总

HashTable和HashMap的区别,HashTable的底层原理。https://blog.csdn.net/zytbft/article/details/84447167      

2018-11-24 20:58:51

阅读数 63

评论数 0

HashMap底层实现原理/HashMap与HashTable区别/HashMap与HashSet区别

Java面试必备 1.1 HashMap底层实现原理/HashMap与HashTable区别/HashMap与HashSet区别 ①HashMap的工作原理 HashMap基于hashing原理,我们通过put()和get()方法储存和获取对象。当我们将键值对传递给put()方法时,它调用键...

2018-11-24 16:24:12

阅读数 73

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭