我在MATLAB中使用urlread加载网站的内容,然后搜索该内容以供进一步使用.
但是,我遇到了一个站点,在该站点上,我需要的内容位于特定的内部框架中,该内部框架通过< iframe>嵌入到index.php中.
当我将urlread与看似嵌入在主文件中的文件的url一起使用时,我仍然只获得该index.php的内容,而不是targetframecontent.php的内容.
我猜urlread可能不是正确的工具,否则我可能忽略了其他使我的尝试失败的事情.
有没有办法将这样一个内部框架的内容导入MATLAB?
编辑:更精确一点:
我通常会使用以下内容将网站内容读入我的MATLAB工作区:
data = urlread('http://[...]index.php')
但是这样做只能得到父index.php的内容,而不是嵌入式targetframecontent.php的内容.我在浏览网站源代码时发现了这一点,其中包含我感兴趣的内容的网站部分被加载到具有以下内容的框架中:
因此,我尝试将urlread直接与特定目标框架中加载的url一起使用.
但是,当我这样做时,我仍然获得与仍在加载index.php相同的内容.
因此,每当我尝试使用targetframecontent.php的直接URL时,似乎将urlread重定向回index.php.这也是我尝试在浏览器中加载targetframecontent.php时发生的情况.
谢谢你的帮助.
解决方法:
看起来site in question正在检查HTTP请求的引荐来源网址.使用wget,如果您传递–referer选项,则可以下载< iframe> ;:
$wget --referer="http://www.sf.tv/sfmeteo/lokalprognosen/index.php?q=Gen%C3%A8ve" -O test_ref "http://www.sf.tv/sfmeteo/lokalprognosen/detailprognose.php?id=&q=Gen%C3%A8ve&max=&drs=0&kiosk=&js=&deeplink=&f="
$cat test_ref
[...]
var keineprognose = '0';
// -->
但是,如果wget没有发送引荐来源网址,则会得到:
wget -O test_noref "http://www.sf.tv/sfmeteo/lokalprognosen/detailprognose.php?id=&q=Gen%C3%A8ve&max=&drs=0&kiosk=&js=&deeplink=&f="
SF Schweizer Fernsehen - Navigation
这是原始的父页面.
因此,要将其吸收到MATLAB中,您需要设置Referer HTTP标头.不幸的是,我现在还没有MATLAB,但是此页面似乎很好地介绍了如何使用MATLAB HTTP请求发送标头:http://undocumentedmatlab.com/blog/expanding-urlreads-capabilities/
标签:iframe,html,matlab,php
来源: https://codeday.me/bug/20191030/1967408.html