2016年11月_youzhouliu

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 01月

转载 MySQL优化索引及优化汉字模糊查询语句

利用MySQL这种关系型数据库来做索引，的确有些勉强了，也只能看情况来说了，有些简单的功能还是可以考虑的。对于模糊查询语句，最不利的情况是要like '%key%'这样的查询，但是如果是like 'key%'这种情况，那么mysql的索引在些查询方式上还是可以优化的。网上常见的是ASCII的英文字符优化，如下：[sql] view plain copy

2016-11-24 16:56:20 4316

原创 Python3使用csv模块csv.writer().writerow()保存csv文件，产生空行的问题

问题：csv.writer().writerow()保存的csv文件，打开时每行后都多一行空行一开始的代码如下：def write_csv_file(path, head, data): try: with open(path, 'w') as csv_file: writer = csv.writer(csv_file, dialect='

2016-11-12 11:01:16 115046 10

原创 hive——通过外部向表中插入数据问题

最近在使用hive的过程上遇到一个比较坑的问题，当手动向hive中的表插入数据时，若含有中文字符，插入hive表后中文乱码。比如在hive的client中执行如下脚本：INSERT INTO TABLE table_info PARTITION (date_key='2016-11-07') values('成品2库')从hive中查看插入的结果如下图：同时也尝试了通过使用

2016-11-10 10:40:43 3099

原创 hive——创建表不支持新增字段问题

创建hive表后，可能会遇到需要增加字段的情况，我们可能会想当然的像mysql或其他数据库那样，直接添加一个字段。但对于hive，直接添加的字段可能并不能使用，比如可能会在添加字段后，在插入数据时，会出现类似如下的错误：Error: java.io.IOException: java.lang.ArrayIndexOutOfBoundsException: 9 at org

2016-11-01 18:24:59 7954 1