自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 资源 (17)
  • 收藏
  • 关注

原创 Hadoop的text通过set(Text t)或set(String s),getLength与getBytes().length的值可能不同的原因

示例1:Text t = new Text("hadoopp");t.set(new Text("pig"));byte[] b = t.getBytes();for (byte bb : b)System.out.print(bb + " ");System.out.println();System.out.println(t.getLength());Syste

2015-07-30 18:55:44 2848

原创 通过http不能访问filesystem的原因

实际案例:我是在windows运行的虚拟机上安装的Hadoop,想通过http://hostname:50070访问分布式文件系统,点击“Browse the filesystem”,无响应。可能原因:在此主机上没有配置Hadoop各个节点的hosts映射信息。可以按照如下方式进行配置:打开此路径:C:\Windows\System32\drivers\etc\

2015-07-24 11:12:30 638

原创 secondarynamenode无法启动

可能原因:localhost地址的IP映射没有配置。方法:编辑namenode节点及各个datanode节点的hosts文件:命令:vi /etc/hosts在第一行添加:127.0.0.1 localhost 即可。

2015-07-19 18:47:50 5140 1

原创 多次格式化namenode,datanode无法启动的解决办法

1.进入datanode节点的主机2.删除各个datanode节点主机的hadoop目录中的:/usr/hadoop/hadoop-root/dfs/data/current/VERSION3.执行 hadoop namenode -format 即可!4.重新启动namenode!

2015-07-19 18:13:51 946

原创 SSH Secure Shell Client用pub key认证登录linux

启动:Edit->settings->Keys点击“Generate New”->重复点下一步接着先要用“密码认证方式登录一下”登录后,再到Edit->Settings->key下,选择”upload”按钮,这步简单吧!接着需要把windows生成的pub文件转为Linux的文件:ssh-keygen -i -f hadoop.pub >>/

2015-07-18 16:43:04 5577

原创 datanode无法启动 或 DFS Used% :100 % 或 Live Nodes

配置文件hdfs-site.xml中的dfs.data.dir属性设置的目录有误,我修改为/home/grid/hadoop1.1.2/hdfs/data,在/home/grid/hadoop1.1.2/目录下执行以下命令,mkdir hdfsmkdir hdfs/datachmod 755 hdfs/data -该属性设置不对的话,日志中会有错误同时把replic

2015-07-17 18:04:15 2299

原创 Hadoop与传统数据仓库的区别

1. 数据仓库业界是否该为Hadoop的迅速崛起而感到担忧甚至恐慌?抑或是该向其敞开热情的怀抱?Cloudera公司的Doug Cutting与Hortonworks公司的Arun Murthy作为Hadoop领域的两位先驱者,在本届Hadoop 2014峰会的问答环节中提出了这样的问题。尽管很多企业开始将数据仓库中的工作负载迁移到Hadoop环境当中,但这种作法仍然没有成为主流。但未来情

2015-07-17 17:53:07 9030

The Practice of Computing Using Python (2nd Ed)(Python入门经典以解决计算问题为导向的Python编程实践)

《Python入门经典以解决计算问题为导向的Python编程实践》写的非常好,适合入门学者和老司机,但是网上资料不好找,特此上传该书。

2017-10-21

Building Machine Learning Projects with TensorFlow(用tensorflow做机器学习项目)

Chapter 1, Exploring and Transforming Data, guides the reader in undersanding the main components of a TensorFlow application, and the main data-exploring methods included. Chapter 2, Clustering, tells you about the possibility of grouping different kinds of data elements, defining a previous similarity criteria. Chapter 3, Linear Regression, allows the reader to define the first mathematical model to explain diverse phenomena. Chapter 4, Logistic Regression, is the first step in modeling non-linear phenomena with a very powerful and simple mathematical function. Chapter 5, Simple Feedforward Neural Networks, allows you to comprehend the main component, and mechanisms of neural networks. Chapter 6, Convolutional Neural Networks, explains the functioning and practical application, of this recently rediscovered set of special networks. Chapter 7, Recurrent Neural Networks, shows a detailed explanation of this very useful architecture for temporal series of data. Chapter 8, Deep Neural Networks, offers an overview of the latest developments on mixed layer type neural networks. Chapter 9, Running Models at Scale – GPU and Serving, explains the ways of tackling problems of greater complexity, by dividing the work into coordinating units. Chapter 10, Library Installation and Additional Tips, covers the installation of TensorFlow on Linux, Windows, and Mac architectures, and presents you with some useful code tricks that will ease day-to-day tasks

2017-10-21

tensorflow for deep learning.pdf

1. Introduction to Deep Learning. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9 Machine Learning eats Computer Science 10 Deep Learning Primitives 11 Fully Connected Layer 11 Convolutional Layer 12 Recurrent Neural Network (RNN) Layers 13 Long Short-Term Memory (LSTM) Cells 14 Deep Learning Zoo 14 LeNet 14 AlexNet 15 ResNet 16 Neural Captioning Model 16 Google Neural Machine Translation 17 One shot models 18 AlphaGo 19 Generative Adversarial Networks 20 Neural Turing Machines 21 Deep Learning Frameworks 22 Empirical Learning 25 2. Introduction toTensorfow Primitives. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27 Introducing Tensors 27 Scalars, Vectors, and Matrices 28 Matrix Mathematics 31 Tensors 33 Tensors in physics. 35 Mathematical Asides 37 Basic Computations in Tensorflow 38 Initializing Constant Tensors. 38 Sampling Random Tensors 40 Tensor Addition and Scaling 40 Matrix Operations 41 Tensor types 42 Tensor Shape Manipulations 43 Introduction to Broadcasting 44 Imperative and Declarative Programming 45 Tensorflow Graphs 46 Tensorflow Sessions 46 Tensorflow Variables 47 Review 4

2017-10-21

Introduction to TensorFlow(tensorflow 入门)

改书分为install tensorflow、tensorflow 概念(graph、tensor、session等)、hello Word(简单示例)、回归代码实现、分类代码实现;在整体上了解tensorflow的运行原理与应用,是入门的好材料。

2017-10-21

word2vec.zip

该代码包为Google code,现在Google上找不到该代码包,所以上传到此供大家下载。(安装指南:在Linux上进入该目录中运行make编译word2vec工具:(如果其中makefile文件后有.txt后缀,将其去掉)在当前目录下执行make进行编译,生成可执行文件(编译过程中报出很出Warning,暂且不管))

2016-06-27

人工智能及其应用 第4版(蔡自兴).pdf

人工智能及其应用 第4版(蔡自兴)主要介绍了知识表示法、非经典推理、计算智能、专家系统、机器学习等内容是目前最新的人工智能经典书籍,有兴趣的可以学习一下。

2016-06-27

concurrency programming in java (java并发编程)

该文档为英文版的java并发编程书,其中介绍了锁、状态依赖、原子循环等重要内容,有兴趣的可以下下来学习一下。

2016-06-27

java8使用规格说明书.pdf

该文档属于英文高清版的JAVA8使用规格说明书,里面有完整的书签,可以对其中的文本进行编辑。

2016-06-27

Hadoop技术内幕 深入解析HADOOP COMMON和HDFS架构设计与实现原理.pdf

Hadoop技术内幕 深入解析HADOOP COMMON和HDFS架构设计与实现原理

2016-01-02

Programming Pig(pig编程).pdf

pig编程实战详细介绍了实现mr的功能原理,是pig初学者的理想资料。pdf

2016-01-02

Programming Hive (hive编程).pdf

hive编程这本书全面介绍了hive的各个特性以及如何使用hive来存取数据,是hive初学者理想的自学资料。

2016-01-02

Learning spark (学习spark)

该文档为2015年出版的英文高清版,其中的内容可进行复制,并附有书签,方便读者阅读,不失为spark入门学习的指引者。

2016-01-02

数据库系统概论(第四版)].王珊等.扫描版.pdf

该书是由王珊和萨师煊编著的第四版《数据库系统概论》,其以sqlserver为基础,内容写的很是深刻易懂。

2015-07-17

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除