背景
笔者供职于北美一家电信公司B。N年以前,笔者用Ruby编写了一个爬虫程序用于监视各大平面媒体,主要是各种本地小报,和本地网站。以公司名字和相关的负面词语为关键字扫描。如果发现符合特定条件的消息,程序将触发一个BB机呼叫(Pager Call)。公司品牌部门的相关人员就会启动调查。
危机
当时发生了这么一件事:公司创建了一个网页,在网页上输入移动电话号码,就可以得知手机主人的大致位置。网页上线后,没有任何异常。但是爬虫程序检测到本地一个小报记者发了一篇文章,指责该网页侵犯个人隐私。公司品牌部门的相关人员接到BB机报警后,马上介入调查,最后觉得事态严重,层层上报至VP
解决方案及流程
公司法律VP,公共关系VP, 品牌VP以及各自的相关人员开了一个联席会议
- 法律
法律部门经过研究后,由VP确认该网页确实可能引起法律纠纷
- 品牌
品牌VP得知法律部门的意见后,马上命令网页下线
- 公共关系
公共关系VP马上约见小报记者,最后达成以下协议
× 公司B买断文章的版权,该文章不许转载
× 公司买断那个小报一个月的版面位置,发表署名为小报记者的文章,
× 文章由公司代写。这样做的目的是让小报记者的那篇文章在google 搜索结果中迭出10页开外
最后一场危机得以化解于无形,公司统共花费5万刀。笔者也因及时的报警得到嘉奖。
DIYPA
这个场景是DIYPA的完美应用场景。而且大大优于传统的爬虫程序
- DIYPA可以调整爬取频率, 可以更快,更方便的爬取到有用信息
- DIYPA由于网页内标记的所见即所得的特性,网页变动后,不用重写爬虫程序。维护工作量大大降低
- DIYPA能够监视更多的网站
笔者微信二维码
注: 原创,转载请注明出处