干货丨推荐大数据情报分析师必备的30种实用工具

477 篇文章 24 订阅
207 篇文章 0 订阅

有人说,数据本身是无用的,

除非你从中获取到有价值的洞察。

如何把数据转换成有用的信息?

如何把信息加工成系统的情报?

最强干货内容,今日公开放送

四大角度出发,为大家推荐

数据检索、数据采集

数据转换、数据分析

每个阶段好用的网站/工具

充分满足你的数据分析需求

数据检索

01 热点信息实时追踪

**百度指数:**以百度海量网民行为数据为基础的数据分享平台,让你“吃瓜”吃得更畅快!在这里,你可以研究热搜关键词搜索趋势、洞察网民兴趣和需求、监测舆情动向、定位受众特征。

网址:https://index.baidu.com/v2/index.html#

02 地图数据在线查询

**天地图:**国家测绘地理信息局建设的地理信息综合服务网站。涵盖森林覆盖、自然保护区、人均收入等大数据专题信息统计,提供权威、标准、统一的在线地理信息综合服务。

网址:https://www.tianditu.gov.cn

03 企业征信在线查询

< 左右滑动了解更多 >

**国家企业信用信息公示系统/天眼查/企查查/Crunch Base:**想了解企业内部运作情况吗?以上网站能帮助你获得全方位的企业信息查询,风险监控&预警,企业信用分析等。

网址:

http://www.gsxt.gov.cn/index.html

https://www.tianyancha.com

https://www.qcc.com

https://www.crunchbase.com

04 个人征信在线查询

**中国执行信息公开网/中国裁判文书网/地方人才服务中心:**都说法律面前人人平等,通过以上网站,你可以查询个人是否涉及法院被执行人或法院裁判的信息记录,好坏一查便知。

网址:

http://zxgk.court.gov.cn

https://wenshu.court.gov.cn

数据采集

网页爬虫工具

< 左右滑动了解更多 >

**八爪鱼/集搜客/后裔采集器:**以上网页爬虫工具适合新手使用,无须编码即可实现网页数据采集,提供高级模式、定时云采集等功能,能实时获取动态数据并定时导出数据到数据库或任意第三方平台。

网址:

https://www.bazhuayu.com

https://www.gooseeker.com

https://www.houyicaiji.com

数据转换

01 文本格式转换

**I LOVE PDF:**一个完全免费在线转换PDF的网站。它提供的在线转换类型丰富多样,界面简洁,每个转换工具都有详细的说明,方便使用。

网址:https://www.ilovepdf.com/zh-cniLovePDF

02 OCR表格数据解析

**智器云OCR表格数据解析:**重点针对银行流水表格识别,能够快速精准的扫描识别银行流水信息要素并形成可编辑的结构化数据,毫秒级响应,识别精度高达99%以上。

**日常的图片文字识别:**可直接使用微信、QQ客户端的截图功能,选择识别图片文字即可,方便快捷。

03 音频识别工具

**讯飞听见:**科大讯飞旗下专业的转文字、翻译服务,支持13种语言的录音转文字,中英文转写准确率高至97.5%。通过可信云认证,能保护用户的个人隐私数据安全。

网址:https://www.iflyrec.com

数据分析

01 文本分析工具

< 左右滑动了解更多 >

**火图/微词云/WordArt:**作为文本分析工具,以上工具均能实现微词云、文本分析、可视化呈现等功能,支持关键字提取,文本信息转化,其中火图为桌面软件,后两者为在线网站。

网址:

http://www.zqykj.com/index.html#/fireDiagram?id=33310

https://www.weiciyun.com

https://wordart.com

02 地图数据分析工具

**Map lab:**高德旗下的一款数据可视化展示与分析软件,它能够通过数据的录入,快速产出各种类型的可视化分析图,仅在热力图上,就包括有基础热力图、多边形热力图、行政区热力图等。

网址:https://maplab.amap.com

03 图片数据在线解析

< 左右滑动了解更多 >

**Bigjpg:**在线图片无损放大工具,免费版可将图片放大2-4 倍,可选择不同程度的图片降噪,升级后最大放大16倍。支持Windows、Mac 和安卓客户端使用。

**EXIFdata:**在线图片真假判断,查询图片详细信息摘要,比如文件权限、大小、GPS 坐标(如果可用)等,最终鉴定图片是否为原始图片。

**Forensically:**基于Web的免费图像分析工具,可用于检测克隆、错误级别分析、图像元数据、噪声分析、水平扫描等,是对EXIFdata功能的补充。

网址:

https://bigjpg.com

http://exifdata.com

https://29a.ch/photo-forensics/#forensic-magnifier

04 多维度数据可视化分析工具

< 左右滑动了解更多 >

**火眼金睛:**国内一线民警最爱用的情报分析软件,常用于单兵作战和个案分析。帮助用户对资金、流水、话单等进行可视化分析,内嵌近百种分析模型,可实现“一键分析”,同时具备人工智能版和纪监委、反诈等行业专版。

**月光宝盒:**适合团队协作的智能数据库系统,能批量清洗、存储和管理不同来源的数据,方便案件数据沉淀、实现数据高效访问和查询。与火眼金睛无缝集成,助力团队资源共享,协作分析破案。

**火模:**面向有数据分析需求的分析师,是千万级全业务领域的通用型单机数据建模系统。帮助用户告别重复建模窘境,短时间内实现模型动态搭建和智能分析。

网址:

http://www.zqykj.com/index.html#/fireEye?id=3334

http://www.zqykj.com/index.html#/moonBox?id=3335

http://www.zqykj.com/index.html#/fireModel?id=3336

05 开源情报分析工具

< 左右滑动了解更多 >

**Maltego:**跨平台的信息搜集工具,主要用于是用于开源情报和取证。它的功能强大,自动化水平非常高,不需要复杂的命令,就能轻松完成信息收集。

**UserSearch:**免费使用,是当下最全面、最准确的用户名和电子邮件地址在线搜索引擎之一。目前已经运行了超过15年,是一个庞大的用户搜索平台。

**ScamSearch.io:**个人诈骗者和诈骗网站的全球数据库,涉及加密货币诈骗、电子邮件、社交网络、离线诈骗、电话诈骗等,数据资源丰富。

**Spiderfoot:**免费的侦察工具,可自动查询 100 多个公共数据源,有利于深度发觉可能存在的数据泄漏、漏洞或其他敏感信息。

网址:

https://www.maltego.com

https://usersearch.org/index.php

https://scamsearch.io

https://www.spiderfoot.net

选择好用的网站/工具

能让我们少走许多弯路

与数据打交道的这些年

靠它们解放了不少生产力

希望对你也能有所帮助

`黑客&网络安全如何学习

今天只要你给我的文章点赞,我私藏的网安学习资料一样免费共享给你们,来看看有哪些东西。

1.学习路线图

攻击和防守要学的东西也不少,具体要学的东西我都写在了上面的路线图,如果你能学完它们,你去就业和接私活完全没有问题。

2.视频教程

网上虽然也有很多的学习资源,但基本上都残缺不全的,这是我自己录的网安视频教程,上面路线图的每一个知识点,我都有配套的视频讲解。

内容涵盖了网络安全法学习、网络安全运营等保测评、渗透测试基础、漏洞详解、计算机基础知识等,都是网络安全入门必知必会的学习内容。

(都打包成一块的了,不能一一展开,总共300多集)

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

CSDN大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

3.技术文档和电子书

技术文档也是我自己整理的,包括我参加大型网安行动、CTF和挖SRC漏洞的经验和技术要点,电子书也有200多本,由于内容的敏感性,我就不一一展示了。

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

CSDN大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

4.工具包、面试题和源码

“工欲善其事必先利其器”我为大家总结出了最受欢迎的几十款款黑客工具。涉及范围主要集中在 信息收集、Android黑客工具、自动化工具、网络钓鱼等,感兴趣的同学不容错过。

还有我视频里讲的案例源码和对应的工具包,需要的话也可以拿走。

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

CSDN大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

最后就是我这几年整理的网安方面的面试题,如果你是要找网安方面的工作,它们绝对能帮你大忙。

这些题目都是大家在面试深信服、奇安信、腾讯或者其它大厂面试时经常遇到的,如果大家有好的题目或者好的见解欢迎分享。

参考解析:深信服官网、奇安信官网、Freebuf、csdn等

内容特点:条理清晰,含图像化表示更加易懂。

内容概要:包括 内网、操作系统、协议、渗透测试、安服、漏洞、注入、XSS、CSRF、SSRF、文件上传、文件下载、文件包含、XXE、逻辑漏洞、工具、SQLmap、NMAP、BP、MSF…

因篇幅有限,仅展示部分资料,需要点击下方链接即可前往获取

CSDN大礼包:《黑客&网络安全入门&进阶学习资源包》免费分享

  • 26
    点赞
  • 28
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值