- 博客(4)
- 收藏
- 关注
原创 python已经写了一部分,发出来看看~
#!/usr/bin/env python # -*- coding: utf-8 -*- import os import subprocess import paramiko import MySQLdb from datetime import datetime def cathost(): hostmapip = os.popen("cat
2016-09-25 12:01:44 143
原创 计划写一个python程序
大体流程是这个样子的 1.获取集群机器ip 2.ssh登陆进行获取所需指标(一种是通过for循环进行,一种是多线程,多线程有点难,暂时,先用for) 3.存储指标到数据库 4.web端进行查看 平时没事的时候可以进行编写
2016-09-21 18:30:56 178
原创 大数据平台的一些认识
大数据平台的主流架构大体就是通过flume来获取数据,然后可以存贮到hdfs中,也可以发送到kafka进行storm的实时计算,存储到hdfs中的数据可以进行mapreduce进行清洗,然后可以选择存储到hive和hbase,在hive和hbase进行mapreduce或者spark计算,然后实现数据的分析进而通过sqoop导入到mysql或oracle数据库中通过web进行可视化。 大数据呢,
2016-05-18 14:30:10 387
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人