python处理百万级数据_百万数据在Excel、SQL与Python中的处理效率

摘要：

村长今天主要想跟大家分享测试一下100万行的数据在Excel、SQL与Python中的处理效率有多大的差异，如下图所示：我们根据销售日期和客户名称两个维度统计2020年1月和2月的销售金额，看一下如何分别在Excel、SQL与Python中处理，且处理效率如何。1、Excel处理函数公式：=SUMPRODUCT((TEXT(数据!$A$2:$A$1000001,"YYYY-MM")=A2)*(数据!$B$2:$B$1000001=B2),数据!$C$2:$C$1000001)

村长今天主要想跟大家分享测试一下100万行的数据在Excel、SQL与Python中的处理效率有多大的差异，如下图所示：

我们根据销售日期和客户名称两个维度统计2020年1月和2月的销售金额，看一下如何分别在Excel、SQL与Python中处理，且处理效率如何。

1、Excel处理

函数公式：

=SUMPRODUCT((TEXT(数据!$A$2:$A$1000001,"YYYY-MM")=A2)*(数据!$B$2:$B$1000001=B2),数据!$C$2:$C$1000001)

公式计算完成时间：2分20秒

2、SQL处