- 博客(8)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 hbase维护操作命令
1、基本命令： 建表： create 'hbase_t_m_user_personalmodel_recommend','modelinfo','recommendlist','baseinfo'; 也可以建表时加coulmn Family的属性如： (其中的属性有versions：设置历史版本数，TTL：过期时间，COMPRESSION：压缩方式，当配
2017-10-30 13:18:40
283
原创 子网划分
子网划分：子网划分定义：Intenet组织机构定义了五种IP地址，有A，B，C三类地址。A类网络有126个子网掩码，每个A类网络可能有16777214台主机，它们处于同一广播域。而在同一广播域中有这么多节点是不可能的，网络会因为广播通信而饱和，结果造成16777214个地址大部分没有分配出去。可以把基于每类的IP网络进一步分成更小的网络，每个子网由路由器界定并分配一个新的子网网络地
2017-10-27 17:53:42
447
原创 如何设置同一网段IP
想在同一网段，必需做到网络标识相同，那网络标识怎么算呢？各类IP的网络标识算法都是不一样的。需要根据子网掩码的位数来判断。算法编辑算法只要把IP和子网掩码的每位数AND就可以了。AND方法：0和1=0 0和0=0 1和1=1如：And 192.168.0.1，255.255.255.0，先转换为二进制，然后AND每一位IP 11000000.10101000.00000000.
2017-10-27 16:27:07
11900
转载 datanode非dfs预留空间设置
在使用hdfs存储的时候可能会遇到一个问题：明明设置hadoop dfs.datanode.du.reserved预留空间的，但是磁盘还是被写满了。当你挂载磁盘作为datanode的存储空间，如果磁盘大小为500G当你使用df -h 可能会发现上面显示（举个例子）：总磁盘大小500G，使用了430G，剩余50G，这里就会有个问题：500G-（430G+50G）=20G， 还差了20G空
2017-10-27 14:09:31
879
转载 IP地址、子网掩码、网货地址、主机地址
IP地址：4段十进制，共32位二进制，如：192.168.1.1 二进制就是：11000000｜10101000｜00000001｜00000001子网掩码可以看出有多少位是网络号，有多少位是主机号： 255.255.255.0 二进制是：11111111 11111111 11111111 00000000网络号24位，即全是1 主机号8位，即全是0129.168.1.1
2017-10-27 11:02:04
910
转载 hbase-shell过滤
创建表create 'test1', 'lf', 'sf'lf: column family of LONG values (binary value)-- sf: column family of STRING values导入数据put 'test1', 'user1|ts1', 'sf:c1', 'sku1'put 'test1', 'user1|ts2
2017-10-26 10:37:32
274
转载 Linux下查看和强制释放端口
查看端口是否被占用： netstat -apn|grep port 查看被哪个进程占用： lsof -i:port 查看具体进程ps -ef|grep PID1.查看端口windows下netstatlinux下netstat -apn用netstat发现没有列出8000端口，加参数-apn后有列出。另外，若想知道8000端口情况，可netstat -a
2017-10-17 18:47:45
715
转载 impala内存优化
一. 引言 Hadoop生态中的NoSQL数据分析三剑客Hive、HBase、Impala分别在海量批处理分析、大数据列式存储、实时交互式分析各有所长。尤其是Impala，自从加入Hadoop大家庭以来，凭借其各个特点鲜明的优点博取了广大大数据分析人员的欢心。 Impala通过主节点生成执行计划树并分发执行计划至各节点并行执行的拉式获取数据的工作方式，替代了Hadoop
2017-10-12 17:52:56
5561
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人