NMPA可以解析了国家药品监督管理局网站

bugtraq2021

已于 2022-02-01 23:06:25 修改

阅读量2k

点赞数

文章标签：爬虫

于 2022-02-01 15:50:28 首次发布

本文链接：https://blog.csdn.net/John_Lenon/article/details/122764425

版权

博主分享了如何克服国家药品监督管理局网站的反爬机制，实现了能正常获取药品信息的程序。虽未实现全面自动化抓取，但已能有效识别药品相关数据。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

国家药品监督管理局网站有很多药品、保健品数据，很多人需要相关数据所以才去采集。但是，NMPA网站的反爬一直走在最前线，爬虫的程序一直无法很好工作。

现在，搞定了。

目前可以使用程序打开药监局网站，然后到药品页面，可以识别药品相关数据。

代码并未多写，也并未实现完全地自动化抓取。

效果图：

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

bugtraq2021

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
4
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Python爬虫：抓取食品安全检测数据并进行分析

2201_76125261的博客

03-19

934

本文通过 Python 爬虫技术抓取了国家食品药品监督管理局（NMPA）网站的食品安全检测数据，并介绍了如何处理抓取的数据、进行清洗、存储以及分析。通过数据分析，我们可以深入了解食品安全问题，帮助消费者做出更明智的选择。在实际应用中，您可以根据需要扩展爬虫功能，抓取更多的食品安全数据，并进行更深入的分析。希望这篇博客能帮助您更好地理解如何使用 Python 进行食品安全数据抓取和分析！

爬虫小例--爬药监局（上）

john_ashley的博客

11-17

4237

”明月如霜，好风如水，清景无限 “ 文远最近也算是爬虫入门吧，相信后面会慢慢熟悉。壹直接上例子，爬取药监局的数据。目的是得到每家公司的详情数据，例：具体网址：http://scxk.nmpa.gov.cn:81/xk/ 这是主页，下面详情信息：贰分析，通过网页检查发现，主网页上没有公司相关数据，观察XHR中的Ajax请求发现，公司信息都是动态数据（方便更新），点击发现每个公司的详情信息通过ID号这个参数区别，那么可以确定思路是先得到每个公司的ID号，然后在通过ID对应每一个详细网站，同样右键

4 条评论您还未登录，请先登录后发表或查看评论

爬虫：requset药监局数据

weixin_55491232的博客

04-18

973

import json import requests url = 'http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.do' page = input('请输入查看药监局第几页的企业:') data = { 'method': 'getXkzsList', 'on': 'true', 'page': page, 'pageSize': '15', 'productName': '', 'conditi.

爬取食品药监局首页企业详情数据（一）

dbb489660447的博客

03-24

642

学习Python爬虫的第二题，今天这个比较有难度，因为首页和企业详情页的数据都是动态加载的，要使用抓包工具去观察，找到一定的规律，写了很多注释和代码。值得开心的是，成功爬取到了数据。对于抓包工具的使用上要更加熟练，合理使用它，就可以快速定位我们对于这个网页数据抓取的理解。并且编码过程不要着急，要顺一下这个思路，写好注释，方便我们回头复习。是我写的代码啦，如果有不太理解的地方，私信我，看到会回复呢~

爬虫---国家食品药品监督管理总局

weixin_34411563的博客

04-02

3086

全程selenium，从链接到下载。。多线程还不敢开多了，电脑差点卡崩了。。代码地址：https://gitee.com/MarkPolaris/python_acquisition/tree/master 转载于:https://www.cnblogs.com/MC-Curry/p/10643025.html...

药监局网瑞数绕过与反爬学习

xiwang800的博客

10-14

5261

药监局瑞数反爬学习贴逆向好的js代码…剩下靠你们自己了需要返回cookie,否则无限跳转,文件夹中带有nginx静态服务配置使用nginx后,并在hosts中添加一行app1.nmpa.gov.cn [你nginx的ip],浏览器访问http://app1.nmpa.gov.cn/data_nmpa/face3/base.jsp 即可调试js 增加2020年10月14号的逆向学习代码 1.对代码格式 2.处理控制流平坦化,减少对键盘伤害 3.对加密方法名解密,减少对鼠标伤害 j

安卓逆向，Frida国家药品监督管理局apk数据抓取，采集逆向，签名

爬虫小能手，安卓逆向，欢迎砸单

07-09

2221

app：zgyjj 参考数据连接：app版本，http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html?type=yp 签名：tzRgz52a 包名：com.hxzk.android.hxzksyjg_xj 狗头保命 def getArg(type): """ 获取类型，需要python传参 :param type: :return: """ if type == 1: e = {

基于selenium框架爬取国家药品监督总局化妆品生产许可证信息（python）

ygdwb的博客

11-22

1210

#首页截图 f12查看网页源码，网页中的数据是动态加载出来的，所以用selenium框架进行进行操作。（可根据需求进行分页操作），在这里我只爬取了首页中的化妆品公司的详情信息。这是要进行爬取的信息截图 from selenium import webdriver from lxml import etree import time #导入类实现让selenium规避被检测到的风险 from selenium.webdriver import ChromeOptions #实现让selenium规避被

某局药品查询之逆向分析

liberty888的博客

08-09

1649

某局药品查询之逆向分析

01-26 国家药监总局--官网上公司的详情页面上的信息爬取

weixin_46400833的博客

01-26

513

1.分析：网站的首页和企业的详情页都是动态加载出来的 2、企业详情数据通过一个ajax请求（post）得到的每家企业的详情页对应的url中只有请求参数ID不一样，其余完全一样； 3、准备计划：获取每一家企业的ID，然后讲求遍历放入URL中，再一次爬取每家企业的详情页面，最后解析提取保存即可。 4、具体代码如下： 4-1 先爬取各家公司的ID headers={'User_Agent':'http://scxk.nmpa.gov.cn:81/xk/itownet/portalAction.

爬虫爬取药监局公司信息.zip

01-22

爬虫爬取药监局公司信息

python爬虫之动态加载获取药品监督管理局

qq_39649212的博客

08-20

4954

本次爬取使用request模块爬取国家药品监督管理局的数据并存入到Excel表格中爬取目标网站 http://scxk.nmpa.gov.cn:81/xk/# 分析页面：打开网页F12上下翻页可知页面数据都是通过ajax动态加载出来的数据，并且首页中的数据只包含了企业名称、许可证编号等信息，但不包含企业的详细信息，下图为首页页面。若要得到企业的详细信息只能通过点击超链接查看，通过F12可以看出此处请求是通过企业id获取企业详细信息爬取思路：首先准备一个list集合用于存储所有企业的id，第一次

药监局国产非特备案数据的一些采集思路

sinat_17622297的博客

06-03

2801

爬虫案例之爬取国家药监局化妆品生产许可明细（爬取动态加载数据）

qq_43671197的博客

09-28

7660

一、实验目的爬取国家药监局（化妆品生产许可信息管理系统服务平台 (nmpa.gov.cn)）化妆品生产明细（具体到每家企业的具体信息），当我们进入该网站首页时，发现其结构为每页15条的json类型数据。如图以下简称首页：点开企业名称对应的超链接跳转到我们需要爬取的页面，以下简称详情页：我们需要爬取详情页上所有信息存为json格式到本地。二、获取动态加载数据的URL 我们首先通过爬取首页信息验证是否可以通过爬取每条企业数据的超链...

瑞数6 某药监局(新版)

07-22

9308

关于瑞数,真的不想讲太多了,往期的两篇文章4代5代详细讲解了瑞数的流程,都比较详细(出文章花了好几个小时,比我写作文都认真,很多粉丝都复现了),如果你4代都没有过请忽略这篇文章,因为一些重复的知识不想再啰嗦了,这次会简单的讲解r6的流程(补环境).另外写完这篇文章停更几个月(沉淀一段时间),如果有疑问可以在评论区交流讨论,我看到会及时回复的,另外,结尾附有联系方式,有需要可联系我.

python使用抓包工具Fiddler4和selenium获取国家药监局网站数据

美味大香蕉的博客

08-06

6360

selenium.webdriver获取药监局网站数据如何获取药监局网站数据1.使用Fiddler4和安卓模拟器获取数据链接2.使用selenium.webdriver获取数据合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入如何获取药监局网

爬虫日记

c598976342的博客

03-03

971

案例1：抓取国家药品监督管理局的药店数据这个官网上的数据防爬机制更新的很快，网上搜索的很多招都不好使了，最后尝试成功网址：http://app1.nmpa.gov.cn/data_nmpa/face3/dir.html 抓包发现请求参数经过了处理，应该是加密了，不知道加密方式，直接请求接口的方式失败；列表和详情用的一个页面，通过获取详情的id去直接访问页面解析HTML的方式也不行通过查看元素，发现每一条数据的连接调用了一个js函数，函数中将id进行了加密处理...

requests实战之药监总局相关数据爬取（路飞学城

NMPA可以解析了 国家药品监督管理局网站

NMPA可以解析了国家药品监督管理局网站