- 博客(17)
- 收藏
- 关注
RSS订阅
1原创 $.when().done().then()传递Deferreds数组
将值数组传递给任何函数，通常希望它们是单独的参数，请使用Function.prototype.apply因此，在这种情况下，您需要：$.when.apply($,my_array).then(___);看见http://jsfiddle.net/YNGcm/21/在ES6中，可以使用...扩展算子相反：$.when(...my_array).then(___);...
2019-09-23 09:56:21
436
原创 编写一个倒排索引程序
使HDFS上test文件夹下的文件执行此程序后结果显示如下： affairs -->file:work.txt,cp:1all -->file:work.txt,cp:1and -->file:work.txt,cp:4are -->file:work.txt,cp:3areas -->file:work.txt,cp:1be -->file:work.t...
2018-03-15 18:16:18
1199
转载 利用hadoop的API编写java代码
问题：利用hadoop的API编写java代码，在hdfs文件系统的根目录下创建一个文件夹custom，将本地文件file1.txt上传至HDFS的custom中，并在HDFS文件系统中对文件进行删除、复制、移动等操作，并测试是否成功package kgc;import java.io.BufferedInputStream;import java.io.FileInputStream;impor...
2018-03-15 16:08:40
1192
原创 Hadoop文件系统HDFS
Hadoop三大核心设计MapReduce Map:任务分解 Reduce：结果汇总HDFS NameNode：管理里文件元数据 DataNode：存储物理文件 Client：获取文件的各种APIHbase 列式内存数据库 HDFS的体系结构NameNode：即元数据节点，用来管理文件系统的命名空间，记录每个文件数据在各个DataNode上的位置和副本信息，协调客户端对文件的访问。元数据文件：V...
2018-03-15 16:07:25
363
原创 通过RPM或YUM方式在Linux环境下安装常用软件
rpm方式安装mysql安装MySQL的步骤rpm -ivhMySQL-client-5.5.53-1.linux2.6.x86_64.rpmrpm -ivhMySQL-server-5.5.53-1.linux2.6.x86_64.rpm 启动MySQL的server： service mysql start修改root用户的密码： mysqladmin-u root password 'roo...
2018-03-09 18:27:11
250
转载 Linux安装软件RPM与YUM
Mysql的安装过程：解压MySQL安装包：tar -xvfMySQL-5.5.53-1.linux2.6.x86_64.rpm-bundle.tar -C mysql RPM命令使用语法：rpm -ivh xxxx.rpm常用参数： i：安装应用程序（install） e：卸载应用程序（erase） vh：显示安装进度（verbose hash） U：升级软件包（upd...
2018-03-09 18:25:30
292
原创 Linux用户（组）及权限
Linux操作系统是一个多用户操作系统，它允许多用户同时登陆到系统上并使用资源。系统会根据账户来区分每个用户的文件，进程，任务和工作环境，使得每个用户工作都不受干扰 Linux如何保证多个不同的用户对同个文件进行操作时有不同的权限控制呢？1）Linux使用User和Group来控制使用者对文件的访问权限；2）不同用户是使用不同的账号/密码进行登录到Linux；3）每个文件都有owner，并且每个o...
2018-03-08 21:15:43
535
原创 问题及答案
第一题家里有四口人：父亲、母亲、儿子、女儿 使用命令： mkdir family 创建一个家 cd family 到家里面去 touch father.txt 父亲 touch mother.txt 母亲 touch son.txt 儿子 touch daughter.txt 女儿 新买了个房子：有厨房、有卫生间...
2018-03-08 21:12:42
386
转载 Linux环境下搭建hadoop分布式集群
1.改名修改主机名及IP地址192.168.10.184配置vi /etc/sysconfig/network添加内容：NETWORKING=yesHOSTNAME=master192.168.10.185配置vi /etc/sysconfig/network添加内容：NETWORKING=yesHOSTNAME=slaves1192.168.10.186配置vi /etc/sysconfig/n...
2018-03-08 12:06:45
712
原创 初识Linux
>>Linux系统重要目录说明bin: binaries 存放二进制可执行文件sbin: super user binaries: 存放二进制的可执行文件，只有root才能访问etc: etcetera 存放系统配置文件usr: unix shared resources： 存放共享的系统资源，不是user的简写，相当于是windows的program home: 存放用户文件的根...
2018-03-08 12:02:40
201
原创 VMware 虚拟机下如何安装VMware tools
1、选择菜单栏VM->setting 下，选中CD/DVD，右边点选Use ISO image file，选择镜像路径为VMware安装文件夹下的Linux.iso2、选择菜单栏VM->install VMware tools下，会弹出VMware tools文件夹，里面有一个压缩包VMwareTools-8.4.5-324285.tar.gz3、在桌面home文件夹里新建一个temp...
2018-03-07 16:46:40
279
转载 VMwareWorkstation10 中安装Centos6.5(64位)图文并茂详细步骤
http://blog.csdn.net/yg_it/article/details/25472523
2018-03-07 16:42:18
166
原创 请在linux环境下搭建hadoop单机模式的集群
此次搭建是在jdk环境已经配置好的情况下进行的1、安装hadoop执行命令tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz -C /usr/local/hadoop,将压缩包解压到/usr/local/hadoop文件夹下 2、修改环境变量：vi /etc/profile修改完之后保存，执行命令source /etc/profile使修改生效 3、进入解压的文件夹下的b...
2018-03-07 16:40:01
264
原创 大数据
大数据：是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。大数据是一种方法论:“一切都被记录，一切都被数字化，从数据中寻找需求，寻找知识，发掘价值”。大数据技术：指从各种各样类型的数据中快速获得有价值信息的能力。 大数据的特点：数据体量巨大、数据类型繁多、价值密度低、产生和处理速度快 新的大数据处理平台：开源：Hadoop、Spark（Apache）、Atorm（Twitt...
2018-03-07 16:37:49
360
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人