2017年10月_Beyond_2016

原创深度学习—初见

深度学习（人工神经网络的研究的概念）编辑本词条由“科普中国”百科科学词条编写与应用工作项目审核。深度学习的概念源于人工神经网络的研究。含多隐层的多层感知器就是一种深度学习结构。深度学习通过组合低层特征形成更加抽象的高层表示属性类别或特征，以发现数据的分布式特征表示。[1] 深度学习的概念由Hinton等人于2006年提出。基于深度置信网络(DBN)提出非监督贪心逐层

2017-10-29 20:10:05 727

原创机器学习—初见

机器学习机器学习(Machine Learning, ML)是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。它是人工智能的核心，是使计算机具有智能的根本途径，其应用遍及人工智能的各个领域，它主要使用归纳、综合而不是演绎。

2017-10-29 20:06:42 406

原创 Hbase常用操作手法

1、建立表tablea, 并使得tablea有一个columnfamily——cf1create 'tablea', 'cf1'2、在tablea表中插入rowkey1,cf1,key1=value1的信息put 'tablea', 'rowkey1', 'cf1:key1', 'value1'3、查询tableascan 'tablea'4、插入多条数据

2017-10-29 19:46:12 269

原创 Hbase安装

1、下载HBasecd /tmpwget http://mirror.bit.edu.cn/apache/hbase/1.3.1/hbase-1.3.1-bin.tar.gz2、解压缩tar zxvf hbase-1.3.1-bin.tar.gzmv hbase-1.3.1 /home/ubuntu/hadoop/hbase3、配置hbase

2017-10-29 19:45:04 254

原创 Hive安装

1、下载cd /tmpwget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-2.1.1/apache-hive-2.1.1-bin.tar.gz2、解压缩tar zxvf apache-hive-2.1.1-bin.tar.gzmv apache-hive-2.1.1-bin /home/ubuntu/

2017-10-29 19:43:06 169

原创 Eclipse for MapReduce

1、下载安装eclipsewget http://mirrors.ustc.edu.cn/eclipse/oomph/epp/oxygen/R/eclipse-inst-linux64.tar.gz tar zxvf eclipse-inst-linux64.tar.gz cd eclipse-installer ./eclipse-inst 2、启动Eclip

2017-10-29 19:41:26 229

原创 Hadoop在Ubuntu上的安装

#1、安装两个ubuntu服务器（虚拟机）主机名分别叫做：hd1（在虚拟机上正常安装）安装虚拟机工具VMWare Tools：cd /media/ubuntu/VMware\ Tools/cp VMwareTools-10.0.6-3595377.tar /tmpcd vmware-tools-distrib/sudo ./vmware-install.pl

2017-10-29 19:36:30 324

原创 Nginx安装

nginx安装文档1. 安装依赖包yum -y install pcre-develyum -y install openssl-develyum -y install gccyum -y install lrzszyum -y install openssh-clients2. 安装nginx2.1. 上传su - root1、cd /usr/local

2017-10-25 22:01:21 287

原创 Zookeeper

Zookeeper1. Zookeeper概念简介：Zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务A、zookeeper是为别的分布式程序服务的B、Zookeeper本身就是一个分布式程序（只要有半数以上节点存活，zk就能正常服务）C、Zookeeper所提供的服务涵盖：主从协调、服务器节点动态上下线、统一配置管理、分布式共享锁、统一名称服务……

2017-10-25 21:48:52 228

原创 urlopen error [errno 10060]的解决思路

urlopen error [errno 10060]的解决思路当用多线程爬取某个网站的数据的时候，爬取一段时间后，总出现urlopen error [errno 10060]的错误，结果线程无端的被挂掉，一开始的解决思路是每次连接的时候换用不同的useragent,结果还是出现这种问题。在网上查了下，看到网上别人的经验，原来是如果用多个线程爬

2017-10-24 09:55:02 1892

原创二十年不敌三天

二十年不敌三天，我们的伤感，人类的进步前日，《自然》杂志刊登了谷歌DeepMind团队的新成果，名为AlphaZero（暂译：阿尔法元）的机器系统仅训练3天就战胜了AlphaGo Lee，比分100：0，后者就是战败李世石的那套。经过40天训练后，Alpha Zero又以89：11战胜了Alpha Master，即横扫柯洁的那套。更令人震惊的是，Alpha Zero

2017-10-21 09:36:21 286 1

原创本地制作yum源

本地YUM源制作1. YUM相关概念1.1. 什么是YUMYUM（全称为 Yellow dog Updater, Modified）是一个在Fedora和RedHat以及CentOS中的Shell前端软件包管理器。基于RPM包管理，能够从指定的服务器自动下载RPM包并且安装，可以自动处理依赖性关系，并且一次安装所有依赖的软件包，无须繁琐地一次次下载、安装。1.2. YUM的作用

2017-10-21 09:20:56 296 1

原创 Linux常用命令（二）

一、文件夹属性1.查看文件夹属性ls -ld test2.文件夹的rwx--x:可以cd进去r-x:可以cd进去并ls-wx:可以cd进去并touch，rm自己的文件，并且可以vi其他用户的文件-wt:可以cd进去并touch，rm自己的文件ls -ld /tmpdrwxrwxrwt的权限值是1777(sticky)二、vim编辑ia/A

2017-10-21 09:13:05 228 1

原创 Linux常用命令（一）

一、内部命令：echo查看内部命令帮助：help echo 或者 man echo2.外部命令：ls查看外部命令帮助：ls --help 或者 man ls 或者 info ls3.man文档的类型(1~9)man 7 manman 5 passwd4.快捷键：ctrl + c：停止进程ctrl + l：清屏ctrl + r：搜索历史命令

2017-10-21 09:02:04 255 1

原创大数据“攻城狮”学习路线

一、Linux基础和分布式集群技术学完此阶段可掌握的核心能力：熟练使用Linux，熟练安装Linux上的软件，了解熟悉负载均衡、高可靠等集群相关概念，搭建互联网高并发、高可靠的服务架构；学完此阶段可解决的现实问题：搭建负载均衡、高可靠的服务器集群，可以增大网站的并发访问量，保证服务不间断地对外服务；学完此阶段可拥有的市场价值：具备

2017-10-20 19:21:25 539 1

Beyond_2016的博客