国外14亿泄露数据下载及还原

国外14亿泄露数据下载及还原

simeon

     2018年6月10日freebuf发布了篇文章《14亿邮箱泄露密码明文信息查询网站惊现网络》（链接地址：http://www.freebuf.com/news/174410.html），声称其泄露的数据可以通过暗网网站（http://dumpedlqezarfife.onion.lu/）进行查询，后续通过网络获取其泄露文件的下载地址，历经千辛万苦，终于将数据下载到本地，通过研究，将其txt文件进行还原处理，并对其进行无效数据处理，去除空密码等操作。

1.1.1数据下载及分析

1.数据下载地址

（1）二进制未压缩41G磁力下载链接地址

magnet:?xt=urn:btih:7ffbcd8cee06aba2ce6561688cf68ce2addca0a3&dn=BreachCompilation&tr=udp%3A%2F%2Ftracker.openbittorrent.com%3A80&tr=udp%3A%2F%2Ftracker.leechers-paradise.org%3A6969&tr=udp%3A%2F%2Ftracker.coppersurfer.tk%3A6969&tr=udp%3A%2F%2Fglotorrents.pw%3A6969&tr=udp%3A%2F%2Ftracker.opentrackr.org%3A1337

（2）二进制压缩11G磁力下载链接地址

magnet:?xt=urn:btih:09250e1953e5a7fefeaa6206e81d02e53b5b374a&dn=BreachCompilation.tar.bz2&tr=udp://tracker.leechers-paradise.org:6969/announce&tr=udp://tracker.opentrackr.org:1337/announce&tr=udp://tracker.pirateparty.gr:6969&tr=udp://tracker.coppersurfer.tk:6969/announce&tr=udp://tracker.zer0day.to:1337/announce

2.数据库内容

该集合数据库中包含从Bitcoin、Pastebin、LinkedIn、MySpace、Netflix、YouPorn、Last.FM、Zoosk、Badoo、RedBox以及游戏平台（Minecraft和Runescape等）泄漏的数据，以及Anti Public，Exploit.in泄漏的凭证列表

1.1.2数据分析及处理

1.对下载文件进行解压

   对breachcompilation.txt.7z进行解压，解压后数据在data目录，它是按照字母进行排序的，在解压根目录存在一些脚本文件，如图1所示，原始文件解压后45G，后面我又对该文件进行压缩处理，节约空间。

 

图1解压文件

2.使用cat生成文件

  使用