2016年10月_幸运六叶草

转载 Hive分析窗口函数(五) GROUPING SETS,GROUPING__ID,CUBE,ROLLUP

GROUPING SETS,GROUPING__ID,CUBE,ROLLUP这几个分析函数通常用于OLAP中，不能累加，而且需要根据不同维度上钻和下钻的指标统计，比如，分小时、天、月的UV数。Hive版本为 apache-hive-0.13.1数据准备：2015-03,2015-03-10,cookie12015-03,2015-03-10,cookie52015-03

2016-10-28 15:06:43 2230

转载 20招让你的Python飞起来!

今天分享的这篇文章，文字不多，代码为主。绝对干货，童叟无欺，主要分享了提升 Python 性能的 20 个技巧，教你如何告别慢Python。原文作者开元，全栈程序员，使用 Python, Java, PHP和C++。1. 优化算法时间复杂度算法的时间复杂度对程序的执行效率影响最大，在Python中可以通过选择合适的数据结构来优化时间复杂度，如list和set查找某一个元素的时间复

2016-10-27 18:46:44 927

对于规模更大、运行时间更长的数据分析应用程序，你可能会希望测试一下各个部分或函数调用或语句的执行时间。你可能会希望了解某个复杂计算过程中到底是哪些函数占用的时间最多。幸运的是，在开发和测试代码的过程中，IPython能够让你轻松得到这些信息。使用内置的time模块及其time.clock和time.time函数手工测试代码执行时间是一件令人烦闷的事情，因为你必须编写许多一模一样的了无生趣的公式化代

2016-10-27 18:45:04 12427 3

转载 IOError: [Errno 22] invalid mode ('r') or filename；错误的处理方法

用python的时候，出现过的一些小错误，或者想出的一些小方法。1.file.close()方法的使用与否。如果文件打开方式是'w'，且最后没有写file.close()的话，文件会是空的。这样会由于程序员的疏忽造成不好的后果。从python2.5开始，你可以避免显式地使用file.close()函数，如果采用with语句的话。如下所示：>>> from __future__ import

2016-10-27 16:31:03 5409

转载用Python制作简单的钢琴程序的教程

这篇文章主要介绍了用Python制作简单的钢琴程序的教程,用键盘演奏、包括变速和变调等功能的实现,需要的朋友可以参考下录一段音频，把它的音高改变50次并把每一个新的音频匹配到键盘的一个键位，你就能把电脑变成一架钢琴！一段音频可以被编码为一组数值的数组（或者列表），像这样：我们可以在数组中每隔一秒拿掉一秒的值来将这段音频的速度变成两倍。如此我们不仅将音

2016-10-27 13:50:04 11486 2

转载 Python科学计算环境推荐——Anaconda

1、Numpy是什么很简单，Numpy是Python的一个科学计算的库，提供了矩阵运算的功能，其一般与Scipy、matplotlib一起使用。其实，list已经提供了类似于矩阵的表示形式，不过numpy为我们提供了更多的函数。如果接触过matlab、scilab，那么numpy很好入手。在以下的代码示例中，总是先导入了numpy：复制代码代码如下:>>> imp

2016-10-26 20:50:43 1438

转载 Python进行数据科学工作的简单入门教程

Python拥有着极其丰富且稳定的数据科学工具环境。遗憾的是，对不了解的人来说这个环境犹如丛林一般（cue snake joke）。在这篇文章中，我会一步一步指导你怎么进入这个PyData丛林。你可能会问，很多现有的PyData包推荐列表怎么样？我觉得对新手来说提供太多的选择可能会受不了。因此这里不会提供推荐列表，我要讨论的范围很窄，只集中于10%的工具，但它们可以完成你90%的工作。当你

2016-10-26 20:36:46 1708

转载 Python科学计算的瑞士军刀——Anaconda 安装与配置

IntroducePython是一种强大的编程语言，其提供了很多用于科学计算的模块，常见的包括numpy、scipy和matplotlib。要利用Python进行科学计算，就需要一一安装所需的模块，而这些模块可能又依赖于其它的软件包或库，因而安装和使用起来相对麻烦。幸好有人专门在做这一类事情，将科学计算所需要的模块都编译好，然后打包以发行版的形式供用户使用，Anaconda就是其中一个常用

2016-10-26 20:03:07 1680 1

转载 hive字符串函数

hive字符串函数1. 字符串长度函数：length语法: length(string A)返回值: int说明：返回字符串A的长度举例：hive> select length('abcedfg') from lxw_dual;72. 字符串反转函数：reverse语法:

2016-10-25 12:12:40 2198

转载 Perl常用模块总结

1) Net::FTP (2) Net::Telnet (3) LWP::Simple, get() (4) Expect (5) XML::Simple, XMLin() (6) Data::Dumper, Dumper() (7) IO::Socket (8) Date::Manip, DateCalc(), UnixDate() (9) Dat

2016-10-21 16:41:41 6306

转载畅谈Perl时间处理函数用法

本文重点讨论Perl时间处理函数的概念,Perl能在绝大多数操作系统运行,可以方便地向不同操作系统迁移,并且Perl借取了C、sed、awk、shellscripting以及很多其他程序语言的特性。一. Perl时间的表示函数1. 表示日期的方式多种多样:"18Jan1973";"18/01/1973";"01/18/1973";"Jan181973";"1

2016-10-21 16:40:36 2031

转载 perl中sprintf函数的使用方法

对于某些字符串，需要输入为特定的格式，通过sprintf可以很方便的完成，不需要专门进行其他处理。perl中的sprintf的用法如下：字符串变成相应的数字evalsprintf FORMAT, LIST $num1=0x498;$num2 = sprintf("%d",$num1);print "the num2 zero value is $n

2016-10-20 20:20:04 4846

转载 perl学习之：字符串函数

一、打开、关闭文件 open的返回值用来确定打开文件的操作是否成功，当其成功时返回非零值，失败时返回零，因此可以如下判断： if (open(MYFILE, "myfile")) { # here is what to do if the file opened successfully } 当文件操作完毕后，用close(

2016-10-20 20:19:06 1134

转载 SQL grouping sets 子句

grouping sets子句允许你指定多个group by 选项。增强了group by 的功能。可以通过一条select 语句实现复杂繁琐的多条select 语句的查询。并且更加的高效，解析存储一条SQL于语句。下面通过使用grouping sets 子句与没有使用grouping sets 子句来对比学习该子句。查询每个部门的每类工作的平均工资，使用grouping sets

2016-10-19 10:53:02 1416

转载 Oracle Partition 分区详细总结

表分区http://www.cnblogs.com/ggjucheng/archive/2013/01/03/2843393.htmlhttp://wenku.baidu.com/link?url=SE-XAChaTsqht6ddSHI57dV4FfD0pL4h_pXt9vXxU5sA71CkAqihtbzdRuDWexNfv8rvYXs9rv17C8O5g_jK6VrbGVqoJetQb

2016-10-18 13:43:30 1016

AnneQiQi的博客