- 博客(9)
- 资源 (1)
- 收藏
- 关注
原创 linux 实现免密码登录
1、cd ~/.ssh2、执行 ssh-keygen -t rsa然后一直按回车键,就会按照默认的选项将生成的密钥保存在.ssh/id_rsa文件中。3、拷贝 id_rsa.pub为authorized_keys文件cp id_rsa.pub authorized_keys这步完成后,正常情况下就可以无密码登录本机了,即ssh localhost,无需输入密码。4、将生成的authorized_ke
2017-08-11 15:45:26 1037
原创 Hadoop HDFS操作命令
1、查看Hadoop HDFS支持的所有命令hadoop fs2、列出目录及文件信息hadoop fs -ls3、循环列出目录、子目录及文件信息hadoop fs -lsr 4、将本地文件系统的test.txt复制到HDFS文件系统的/user/sunlightcs目录下hadoop fs -put test.txt /user/sunlightcs5、将HDFS中的test.txt复制到本地文件系
2017-08-11 15:15:10 989
原创 Linux下安装Dubbo自带的简易监控中心
1、下载dubbo监控中心tar包dubbo-monitor-simple-2.5.3.tar.gz2、解压tar包tar zxvf dubbo-monitor-simple-2.5.3.tar.gzcd dubbo-monitor-simple-2.5.33、进入dubbo.properties文件修改相关配置vi conf/dubbo.properties该文件主要修改 dubbo.regis
2017-08-11 14:59:25 634
转载 Dubbo实际应用基本配置讲解
一、发展趋势随着互联网的发展,网站应用的规模不断扩大,常规的垂直应用架构已无法应对,分布式服务架构以及流动计算架构势在必行,亟需一个治理系统确保架构有条不紊的演进。 单一应用架构当网站流量很小时,只需一个应用,将所有功能都部署在一起,以减少部署节点和成本。 此时,用于简化增删改查工作量的数据访问框架(ORM)是关键。垂直应用架构当访问量逐渐增大,单一应用增加机器带来的加速度越来越小,将应用拆成互不相
2017-08-11 14:42:19 1085
原创 Hive时间处理函数
日期函数UNIX时间戳转日期函数:from_unixtimefrom_unixtime(bigint unixtime[, string format])返回值:string说明:转化UNIX时间戳(从1970-01-01 00:00:00 UTC到指定时间的秒数)到当前时区的时间格式举例:Hive> select from_unixtime(1501819932, 'yyyyMMdd') from
2017-08-04 12:02:49 1987
转载 Python list排序的两种方法及实例讲解
对List进行排序,Python提供了两个方法方法1.用List的内建函数list.sort进行排序list.sort(func=None, key=None, reverse=False) Python实例:>>> list = [2,5,8,9,3] >>> list [2,5,8,9,3] >>> list.sort() >>> list [2, 3, 5, 8, 9]方法
2017-08-04 10:20:02 1712
转载 使用Python pandas作图
推荐使用ipython的pylab模式,如果要在ipython notebook中嵌入图片,则还需要指定pylab=inline。ipython --pylab ##ipython的pylab模式ipython notebook --pylab=inline ##notebook的inline模式import pandas as pd基本画图命令Pandas通过整合matplotlib的相关功能
2017-08-02 16:38:34 2781
原创 Hive分区表操作
1、必须在表定义时创建 partition单分区建表语句:create table table1 (id int, content string) partitioned by (day string);单分区表,按天分区,在表结构中存在id、content、day三列。双分区建表语句:create table table2 (id int, content string) partitione
2017-08-02 15:57:52 1413
原创 Hive常用语句记录
1、修改表名、表移库ALTER TABLE {database.old_table} RENAME TO {database.new_table}database.old_table:老表名database.new_table:新表名2、Hive表及分区添加字段#表添加字段alter table tablename add columns (field type);#分区添加字段alte
2017-08-02 15:53:17 617
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人