博客专栏  >  云计算/大数据   >  大数据+机器学习+oracle

大数据+机器学习+oracle

大数据技术总结和分享,更好的学习新的知识,与同行共同进步

关注
1 已关注
55篇博文
  • Hadoop集群之flume安装配置

    Hadoop集群之flume安装配置 1. 官方文档 http://flume.apache.org/  2. 配置环境变量 vi /etc/profile #set flum expor...

    2016-10-13 11:16
    1252
  • ambari 安装

    1.ambari 官网地址:http://ambari.apache.org 2.下载ambari [hadoop@slavenode7 hadoop]$  wget http://public...

    2016-10-14 10:52
    343
  • Spark集群基于Zookeeper的HA搭建部署

    官方文档 http://spark.apache.org/docs/latest/monitoring.html 下载地址http://flume.apache.org/download.html 安...

    2016-10-21 13:49
    685
  • ganglia安装和配置监控hadoop,hbase,spark

    hadoop平台是原生态安装的,安装完各模块发现没有统一监控界面,经网上查询说ganglia是个不错的选择,开始在网上大量搜索关于如何用ganglia监控的资料,碰到各种报错,就是出不来想要的结果,拿...

    2016-10-21 15:04
    1387
  • Sqoop-1.99.7安装部署

    Sqoop安装部署 官方文档:http://sqoop.apache.org/ 下载地址 [hadoop@slavenode8 hadoop]$ wget http://apache.fayea...

    2016-10-26 14:12
    2960
  • 安装CDH5.7.1集群

    Hadoop版本选择 目前Hadoop比较流行的主要有2个版本,Apache和Cloudera版本。 Apache Hadoop:维护人员比较多,更新频率比较快,但是稳定性比较差。 Cloudera ...

    2016-11-03 17:35
    1008
  • hadoop测试namenode 主机点失效及恢复测试

    1.从本地拷贝 100 个 100MB 的文件到 HDFS; 2.在文件拷贝过程中,停止主 NameNode 所在节点的 NameNode 进程,模 拟故障; 3.观察客户端日志文件发现故障; ...

    2016-11-09 15:50
    548
  • hadoop组件书籍列表

    hbase书籍 http://abloz.com/hbase/book.html

    2016-11-09 16:22
    150
  • HMaster 节点失效及恢复测试

    1.每隔 1 秒并行地对 t1 执行 scan 和 put 数据操作; 2.停止主 HMaster 所在节点的进程,停止该节点上的 HMaster 进程; 3. 主备切换过程中,观察 HBase ...

    2016-11-09 17:23
    1669
  • hadoop常用命令

    查看CPU:cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c 查看内存:free –m 查看磁盘:df  -m 处理器信息:dmidecode...

    2016-11-10 11:46
    546
  • hdfs快照备份恢复

    生产10G文件 [hadoop@masternode1 ~]$ dd if=/dev/zero of=/home/hadoop/a.txt bs=100M count=100 记录了100+0 的读入...

    2016-11-10 16:07
    977
  • hadoop自动安装的脚本与步骤

    最近要在10几台机器上安装hadoop。对于这种繁复而重复的工作,一步步的打命令行,对于程序员来说是一件不能忍的事情。所以我就琢磨着怎么写一个脚本来自动安装hadoop。 任务: 在10几台机器上中...

    2016-11-16 10:55
    742
  • 对Imapla&Spark2.0.0SQL进行TPC-DS性能测试

    1. tpcds_test_gentable   There are two parts of this Unix-Shell project. Part-1: Building the tpc...

    2016-11-17 12:58
    2045
  • wordcount 运行

    开启kerberos身份验证后,root账号没有了执行hdfs写的权限 [root@masternode1 centos]# hadoop jar /opt/cloudera/parcels/CDH...

    2016-11-23 18:05
    533
  • zookeeper安装

    1.下载地址: http://mirror.bjtu.edu.cn/apache/zookeeper/zookeeper-3.4.8/zookeeper-3.4.8.tar.gz 官方文档 http:...

    2016-12-14 15:38
    464
  • cdh5.7.1如何开启kerberos

    最近因为项目需要,需要对用户权限做限制,最终选择了kerberos+sentry+hue模式来管理用户,但是这个kerberos实在搞得我头大的不行,在网上找各种资料,怎么配置都不行,后来索性静下心来...

    2016-12-18 12:56
    4104
  • BigDataBenchs测试

    最近做一个数据联盟认证用到BigDataBechens测试。 准备条件 下载地址:http://prof.ict.ac.cn/BigDataBench/old/2.0/index-zn.html ...

    2016-12-27 14:22
    1805
  • NTP服务器时间同步

    1. NTP服务器时间同步 ⑴ vi /etc/ntp.conf restrict 127.0.0.1 restrict -6 ::1 restrict 10.1.4.130 mask 2...

    2017-01-04 16:13
    592
  • hadoop集群安装ES(ElasticSearch 5.0.2)

    配置/etc/hosts,ntp服务,免密码登录,关闭防火墙这里不做详细说明。 安装java环境 [root@manager ~]# mkdir /usr/java [root@mana...

    2017-01-05 14:54
    2004
  • 传统数据库同步数据到HDFS

    通过命令或者脚本方式加载例如oracle, db2, vertica,mysql,gbase等数据库数据到系统中。(供大家选择至少一款传统数据库) 大数据平台测试环境(图1) 1、Hadoop集群正常...

    2017-01-19 15:21
    1080

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部