- 博客(23)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 使用Ambari快速部署Hadoop大数据环境
作者:杨鑫奇前言做大数据相关的后端开发工作一年多来,随着Hadoop社区的不断发展,也在不断尝试新的东西,本文着重来讲解下Ambari,这个新的Apache的项目,旨在让大家能够方便快速的配置和部署Hadoop生态圈相关的组件的环境,并提供维护和监控的功能.作为新手,我讲讲我自己的学习经历,刚刚开始学习的时候,当然最简单的 Google 下Hadoop ,然后下载相关的包,
2017-07-30 11:38:35
466
转载 zookeeper 安装的三种模式
Zookeeper安装 zookeeper的安装分为三种模式：单机模式、集群模式和伪集群模式。单机模式 首先，从Apache官网下载一个Zookeeper稳定版本，本次教程采用的是zookeeper-3.4.9版本。http://apache.fayea.com/zookeeper/zookeeper-3.4.9/
2017-07-29 20:59:59
325
转载 美国国家安全局如何分析通话数据
近日华盛顿邮报爆料称美国国家安全局(NSA)正运行一个代号PRISM的超大规模数据挖掘项目，能直接监测Google、Facebook、微软和苹果等九大互联网IT企业中央服务器中的用户数据，被提取分析的数据包括音频、视频、图片、电子邮件、文档和联系日志(下图)。虽然以上九大IT企业纷纷发表声明否认此事，但是NSA正在建设全球最大规模数据监测和分析网络已经是公开的事实，据NSA官员透露的文档，仅Ver
2017-07-29 20:40:21
827
转载 Apache Accumulo用户手册
1。介绍Apache Accumulo的是一个高度可扩展的结构化存储，基于谷歌的BigTable。Accumulo是用Java编写的，并在Hadoop分布式文件系统（HDFS），这是流行的Apache Hadoop项目的一部分工作。Accumulo支持高效存储和检索的结构化数据，包括查询范围，并提供支持使用Accumulo表作为输入和输出的MapReduce作业。Accumulo设
2017-07-29 20:39:15
3941
转载 GeoWave安装部署实践
GeoWave是由国家地理空间情报局(NGA)与RadiantBlue和Booz Allen Hamilton合作技术开发的。GeoWave是一套类库，利用分布式键值存储的可伸缩性，从而有效的存储、检索和分析大量的地理数据集。目前是通过提供插件连接GeoTools和PDAL Accumulo基础数据存储。GeoWave的主要目标是成为流行的地理空间项目之间的桥梁,领域的分布式键值存储和分布式处
2017-07-29 20:27:20
4122
2
转载 异常解决：util.NativeCodeLoader: Unable to load native-hadoop library for your platform
刚装好Hadoop的时候，每次输入命令运行都会出现：WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-Javaclasses where applicable提示hadoop不能加载本地库。以前官网会提供32位的安装包，但目前提供
2017-07-29 16:49:15
1255
转载 install apache hadoop on ubuntu
(1) install java #remove openjdksudo apt-get remove openjdk* #Download jdk from Oracle websitetar -zxvf jdk*.tar.gzmv jdk /usr/local/java/# write environment variables to
2017-07-29 16:48:21
275
转载 PHP连接MongoDB操作
要使用PHP与MongoDB交互存储数据，需要使用MongoDB PHP驱动程序(http://pecl.php.net/package/mongo)。 从url下载驱动程序下载PHP驱动程序并确保下载的是正确的版本(如在本示例中：Win10 64位下载的版本是：php_mongo-1.6.8-5.6-ts-vc11-x64.zip)。 现在解压缩存档并将php_mongo.dll放入PH
2017-07-27 21:36:39
745
转载 PHP中MongoDB数据库的连接、添加、修改、查询、删除等操作实例
PHP 扩展mongon.mod.dll下载http://cn.php.net/manual/en/mongo.installation.php#mongo.installation.windows然后php.ini添加 extension=php_mongo.dll最后phpinfo() 查找到表标PHP已经自带了mongo功能，你就可以操作下面的代码（但是你必须有安装mongo
2017-07-27 21:29:59
2910
转载 PHP操作MongoDB数据库
一、MongoDB简介mongodb (名称来自”humongous”) 是一个可扩展的、高性能、开源、模式自由、面向文档的数据库，集文档数据库、键值对存储和关系型数据库的优点于一身。官方站点： https://www.mongodb.orgMongoDB特点：• 面向文档存储(类JSON数据模式简单而强大)• 动态查询• 全索引支持，扩展到内部对象和内嵌数
2017-07-27 21:29:22
550
转载 PHP操作mongodb数据库操作类
众所周知，mongodb是典型的nosql数据库的代表，受到很多开发者的追捧，近几年尤为火热，mongodb的流行不是没有原因的，下边给大家简单介绍下MongoDB。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的数据结构非常松散，是类似json的bjson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查
2017-07-27 21:28:33
779
转载 Ubuntu 修改用户密码方法详解
修改个人密码：方法1:在终端运行usrname@usrname-laptoppasswd:~$passwd usrname改变口令为 usrname。（当前）UNIX 口令： 输入新的 UNIX 口令： 重新输入新的 UNIX 口令：passwd：已成功更新密码（说明：需要修改的用户名是usrname）方法2:使用菜单
2017-07-27 17:19:29
6198
转载 开源数据处理引擎 GeoTrellis 发布
Azavea 是一家位于费城的公司，提供地理数据处理产品，它最近发布了名为 GeoTrellis 的开源产品，基于 GNU GPL v3 协议。GeoTrellis 是：开源数据处理引擎，供高性能应用使用。收集不断增长的地理数据，其目的是为了更好地理解我们身边的环境，并更快做出结论。为了处理如此海量的地理信息数据，人人常常使用成熟的 GIS（地理信息系统）。GeoTre
2017-07-25 16:13:23
1928
转载 GIS大数据可视化分析工具
俗话说的好：工欲善其事，必先利其器！一款好的工具可以让你事半功倍，尤其是在大数据时代，更需要强有力的工具通过使数据有意义的方式实现数据可视化，还有数据的可交互性；我们还需要跨学科的团队，而不是单个数据科学家、设计师或数据分析员；我们更需要重新思考我们所知道的数据可视化，图表和图形还只能在一个或两个维度上传递信息， 那么他们怎样才能与其他维度融合到一起深入挖掘大数据呢？此时就需要倚仗大数据可视化
2017-07-25 16:00:08
33840
2
转载 GeoWave安装部署实践
GeoWave安装部署实践 GeoWave是由国家地理空间情报局(NGA)与RadiantBlue和Booz Allen Hamilton合作技术开发的。GeoWave是一套类库，利用分布式键值存储的可伸缩性，从而有效的存储、检索和分析大量的地理数据集。目前是通过提供插件连接GeoTools和PDAL Accumulo基础数据存储。GeoWave的主要目标是成为流行的地理空间项目
2017-07-25 15:57:22
781
转载 GeoMesa-Accumulo安装并运行示例
参考官网 http://www.geomesa.org/documentation/tutorials/geomesa-quickstart-accumulo.html安装geomesagit clone https://github.com/locationtech/geomesa.gitcd geomesamvn clean install -DskipTests=true
2017-07-23 10:41:32
1265
转载 GeoMesa架构
GeoMesa架构GeoMesa支持多种可扩展的、基于云端的数据存储架构，包括Apache Accumulo, Apache HBased，Google Cloud Bigtable以及用于流计算的Apache Kafka 。同时GeoMesa还可以和Apache Storm一起处理流数据，并使用Spark进行空间分析。 GeoMesa架构如图1： GeoMesa和GeoS
2017-07-23 10:38:08
9292
1
转载 Tachyon：Spark生态系统中的分布式内存文件系统
Tachyon把内存存储的功能从Spark中分离出来， 使Spark可以更专注计算的本身， 以求通过更细的分工达到更高的执行效率。Tachyon是Spark生态系统内快速崛起的一个新项目。 本质上， Tachyon是个分布式的内存文件系统， 它在减轻Spark内存压力的同时，也赋予了Spark内存快速大量数据读写的能力。Tachyon把内存存储的功能从Spark中分离出来， 使Spar
2017-07-23 08:19:14
348
转载 win10完美去除快捷方式小箭头的方法
1.去掉小箭头reg add "HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Explorer\Shell Icons" /v 29 /d "%systemroot%\system32\imageres.dll,197" /t reg_sz /ftaskkill /f /im explorer.exe
2017-07-21 15:27:28
73126
26
原创 Ubuntu中创建Intellij IDEA快捷方式
sudo vim /usr/share/applications/IdeaIU.desktop[Desktop Entry]Encoding=UTF-8Name=IdeaIUComment=IdeaIUExec=/usr/local/IdeaIU/bin/idea.shIcon=/usr/local/IdeaIU/bin/idea.pngTerminal=fal
2017-07-20 21:55:40
723
原创 ubuntu install jdk
1. add the following to the end of /etc/profileexport JAVA_HOME=/usr/local/java/jdkexport JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JRE_HOME}/lib:${JAVA_HOME}/libexport PATH=$PATH:${JRE_
2017-07-20 21:09:35
302
转载 ubuntu设置root密码
用过ubuntu的人都知道，刚安装好root用户是没有密码的，没有密码我们就没法用root用户登录 给root用户设置密码输入命令sudo passwd,然后系统会让你输入密码，这时输入的密码就是root用户的密码了，设置完成之后就可以切换root用户登录了，如图：
2017-07-20 16:45:29
289
转载 ubuntu 任务栏 放到下面
用户目前还需要手动输入命令“gsettings set com.canonical.Unity.Launcher launcher-position Bottom”
2017-07-20 16:39:07
8220
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人