Linux Shell(三)

从结构化文本文件中提取数据

Shell脚本真正好用的地方是:当我们想修改脚本让它做点不一样的事,例如插入由key:jobtilte文件而来的工作职称时,只需要修改最后的管道。

join -t: $PERSON /etc/passwd.job-title |

    join -t: - $OFFICE |

        join -t: - $TELEPHONE |

            cut -d: -f 2- |

                sort -t: -k1,1 -k3,3 -k4,4 |

                    awk -F: '{ printf("%-39s\t%-23s\t%s\t%s\n", $1,$2,$3,$4) }'

针对Web的结构型数据

 

单词列表

曾经有个趣闻,是说,1983到1987年之间,贝尔实验室的研究专员某某写了篇专栏《Programming Pearls》。专栏中有篇文章下的转帖这么写到:写一个文字处理程序,找出n个出现最频繁的单词,并在输出结果的列表上加入它们出现的次数,按照次数由大到小排序。

后来一位资深的研究员提供了一个6个步骤UNIX解决方案,仅需进分钟便能开发完成。这个程序阐明了UNIX工具程序的处理方式是强大的:将复杂的问题切分成数个较简单的部分,简单到你已经知道这个部分该怎么处理。

示例:

单词出现频率过滤器:

#! /bin/sh

tr -cs A-Za-z\' '\n' |                          将非字母字符置换成换行符号

    tr A-Z a-z |                                   所有大写字母转为小写

        sort |                                        由小而大排序单词

            uniq -c |                               去除重复,并显示其计数

                sort -k1,1nr -k2 |             计数有大而小排序后,再按照单词由小而大排序

                    sed ${1:-25}q               显示前n行(默认为25)

 

专注下一讲哦,下节讲什么?让少良告诉你们吧

啊,对,讲讲变量、判断和重复动作

 

 

 

 

 

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
GeoPandas是一个开源的Python库,旨在简化地理空间数据的处理和分析。它结合了Pandas和Shapely的能力,为Python用户提供了一个强大而灵活的工具来处理地理空间数据。以下是关于GeoPandas的详细介绍: 一、GeoPandas的基本概念 1. 定义 GeoPandas是建立在Pandas和Shapely之上的一个Python库,用于处理和分析地理空间数据。 它扩展了Pandas的DataFrame和Series数据结构,允许在其中存储和操作地理空间几何图形。 2. 核心数据结构 GeoDataFrame:GeoPandas的核心数据结构,是Pandas DataFrame的扩展。它包含一个或多个列,其中至少一列是几何列(geometry column),用于存储地理空间几何图形(如点、线、多边形等)。 GeoSeries:GeoPandas中的另一个重要数据结构,类似于Pandas的Series,但用于存储几何图形序列。 二、GeoPandas的功能特性 1. 读取和写入多种地理空间数据格式 GeoPandas支持读取和写入多种常见的地理空间数据格式,包括Shapefile、GeoJSON、PostGIS、KML等。这使得用户可以轻松地从各种数据源中加载地理空间数据,并将处理后的数据保存为所需的格式。 2. 地理空间几何图形的创建、编辑和分析 GeoPandas允许用户创建、编辑和分析地理空间几何图形,包括点、线、多边形等。它提供了丰富的空间操作函数,如缓冲区分析、交集、并集、差集等,使得用户可以方便地进行地理空间数据分析。 3. 数据可视化 GeoPandas内置了数据可视化功能,可以绘制地理空间数据的地图。用户可以使用matplotlib等库来进一步定制地图的样式和布局。 4. 空间连接和空间索引 GeoPandas支持空间连接操作,可以将两个GeoDataFrame按照空间关系(如相交、包含等)进行连接。此外,它还支持空间索引,可以提高地理空间数据查询的效率。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值