Python的一些进阶学习-2017.08.16

通过迭代器对文件切片

日常工作中会遇到多达4,5G的日志文件，如果把文件都一次读到内存，再进行切片比较浪费资源：

 In [7]: f = open('access.log')
 In [7]: lines = f.readlines()
 In [7]: lines[1:19]

这样对文本是可以切片的，但是如果文件很大，就很浪费资源

可以用迭代器对文本进行切片，这个时候需要用到itertools包下的islice这个函数，

        In [7]: from itertools import islice
        In [8]: islice?
        Type:        type
        String form: <type 'itertools.islice'>
        Docstring:
        islice(iterable, [start,] stop [, step]) --> islice object

       Return an iterator whose next() method returns selected values from an
       iterable.  If start is specified, will skip all preceding elements;
       otherwise, start defaults to zero.  Step defaults to one.  If
       specified as another value, step determines how many values are
       skipped between successive calls.  Works like a slice() on a list
       but returns an iterator。

这个函数需要一个可迭代对象， 起始值，终止值， 步进值 ，下面试试看：

       In [3]: from itertools import islice
       In [4]: islice(lines,100,300)
       Out[4]: <itertools.islice at 0x7f50152ddfc8>
       #说明是个可迭代对象
       In [5]: for x in islice(lines,100,300):
         ...:     print x

结果是 完美的 成功对文本进行迭代切片