- 博客(4)
- 收藏
- 关注
RSS订阅原创 python已经写了一部分，发出来看看~
#!/usr/bin/env python# -*- coding: utf-8 -*-import osimport subprocessimport paramikoimport MySQLdbfrom datetime import datetimedef cathost():hostmapip = os.popen("cat
2016-09-25 12:01:44
142
原创 计划写一个python程序
大体流程是这个样子的1.获取集群机器ip2.ssh登陆进行获取所需指标（一种是通过for循环进行，一种是多线程，多线程有点难，暂时，先用for）3.存储指标到数据库4.web端进行查看平时没事的时候可以进行编写
2016-09-21 18:30:56
176
原创 大数据平台的一些认识
大数据平台的主流架构大体就是通过flume来获取数据，然后可以存贮到hdfs中，也可以发送到kafka进行storm的实时计算，存储到hdfs中的数据可以进行mapreduce进行清洗，然后可以选择存储到hive和hbase，在hive和hbase进行mapreduce或者spark计算，然后实现数据的分析进而通过sqoop导入到mysql或oracle数据库中通过web进行可视化。大数据呢，
2016-05-18 14:30:10
386
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人