文章讲述了程序员小明编写爬虫抓取数据，无意中导致服务器压力过大，最终牵扯到法律问题的故事，提醒开发者在利用技术时注意合规，特别是大数据领域的法律风险。
案发现场
案发前一段时间，小明（化名）接到了技术部领导的需求，要求写一段爬虫批量从网上的一个接口抓取数据，爬虫开发完后测试没有问题，小明就将程序上传到了公司服务器。
程序运行了一段时间后，也许是有了新的需求，也许是小明想对爬虫程序进行进一步的优化，将爬虫的线程数，由原来比较小的值调到一个比较大的值。
完善后的程序上传到服务器后，小明跟踪了下爬虫的进展，运行平稳并且速度快了很多。提交之后像往常一样，小明就把这件事情忘了。
小明没想到自己这次提交的爬虫程序，竟然能把对方的服务搞挂了，也没想到自己因为写了一段代码而坐牢。
整个公司被抓
2019年的某一个工作日，公司员工像往常一样忙忙碌碌，某个程序员和产品经理正在为了一个需求争吵，小明带着耳机正坐在办公室敲代码。
突然就来了一大群警察，要求所有人离开工位，双手离开电脑、手机等设备。整个公司的人都懵了，不知道发生了什么事情，但也都照办了。
警察很快查封了公司的所有办公用品，问技术部相关人员要了服务器的信息，公司全体上下 200 多人无差别的全部送到看守所了解情况。
在去看守所的路上，大家都还心里想这是不是搞错了，我们只是一个科技公司公司又没有骗人，怎么就集体被抓了。
小明也一直认为自己没有犯罪，自己只是一名技术人员而已，所有的工作也都是按照领导要求来执行的，应该很快就会把我们释放了吧。
随后，公司非核心人员都被释放了出来，主要集中在 HR、行政人员。最后确认公司 36 人被捕，其中大部分是程序员。
被捕后小明委托的律师事务所，就是和我们交流的两位律师的事务所，据说小明入狱后就一直不认为自己有罪，也因一直拒绝认罪从而错过了取保候审的机会。
目前小明还在等待最后的审判…
涉事公司背景
巧达科技号称是中国最大的用户画像关键数据服务提供商，专注于大数据及人工智能领域前瞻性产品研发，客户覆盖互联网行业及泛金融领域。
高管多为百度出身，公司2017年净赚1.86亿元。
公司2014年7月成立，B轮估值2亿美元，目前已经到了C轮融资阶段，投资者包括李开复创新工场、百度风投齐玉杰、中信产业基金、人工智能产业基金等等。
巧达的创始人成予曾经是百度第一任产品部负责人、联合创始人沈毅曾经是百度电子商务事业部技术总监和百度爱乐活技术副总裁。
公司曾宣称通过整合多达2.2亿份自然人简历、100亿个用户识别ID组合和1000亿+用户综合数据，绘制出了涉及中国8亿人口的多维度数据。其中，包含个人隐私与非隐私信息。
此外，巧达科技还有超过10亿份通讯录，并且掌握着与此相关的社会关系、组织关系、家庭关系数据。_结合_简历、通讯录，以及外部获取的超过千亿条其他用户数据，巧达科技自称拥有超过8亿自然人的认知数据。
也就是说，超过57%的中国人的信息都在巧达科技的数据库里面。
“基本上所有你能数的上名的大型互联网公司，都是巧达科技的客户。”一位之前简历中介生意的从业者。
近期多个大数据公司被查
最近的大数据行业，风声鹤唳。
在中秋节前一天，中国电信控股的子公司天翼征信传出风声，其总经理、副总经理以及市场人员被警察带走，原因是与其合作的大数据公司被警方调查。
在天翼之前，新颜科技CEO黄向前被警方带走、魔蝎科技公司CEO周江翔涉事被查、公信宝公司门口被贴了封条、知名第三方数据服务公司聚信立宣布将暂停对外提供用户授权的运营商爬虫服务……
此外，国内大数据风控平台龙头同盾科技也被曝爬虫部门已解散，CEO蒋韬已出国避风头，对此，同盾科技昨日发表辟谣声明表示，子公司杭州信川科技有限公司确实停止爬虫业务，但其他言论均属不实。
…
据内部消息，最近监管对数据乱象出手，开始清理行动，15家公司被列入调查名单，其中几家估值都超几十亿。
国内很多大数据公司的数据来源多多少少都有一定的问题，随着我国今年6月1日起，《中华人民共和国网络安全法》将实施，所有的网上行为将越来越严格，如果还按照之前的惯性去操作，迟早会出问题。
程序员谨慎使用技术
不知道大家是否发现，随着国家经济的不断发展，以前可能处于灰色阶段的行业，现在几乎都慢慢不能做了。写这篇文章的目的，也是为了警示大家技术是无罪的，但是用到了错的地方代价也是非常巨大的。
我之前看过这样一个报道，一个程序员因为爱好写了一个_小程序_，并且把此程序上传到了互联网上，没想到过了两年之后，有人利用这个_小程序_非法获利500多万。
现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。
分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习
小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。
深知大多数初中级Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！
因此收集整理了一份《2024年Python爬虫全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。
由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）
，同时减轻大家的负担。**
由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）
[外链图片转存中…(img-i4UJ19YS-1711006790479)]
390
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
