perl 爬取同花顺数据

最新推荐文章于 2024-07-22 11:02:25 发布

scan724

最新推荐文章于 2024-07-22 11:02:25 发布

阅读量2.4k

点赞数

分类专栏： perl LWP

本文链接：https://blog.csdn.net/zhaoyangjian724/article/details/51037335

版权

perl LWP 专栏收录该内容

111 篇文章 33 订阅 ¥39.90 ¥99.00

订阅专栏

这篇博客使用Perl编程语言，通过LWP::UserAgent模块爬取了同花顺网站的财经数据，并利用HTML::TreeBuilder::XPath解析HTML，提取所需信息。数据包括标题、多个页面的数据，并将结果保存到文件中。

摘要由CSDN通过智能技术生成

use  LWP::UserAgent;
use utf8;
use DBI;  
$user="root";  
$passwd='xxx';  
$dbh="";  
$dbh = DBI->connect("dbi:mysql:database=zjzc_vote;host=14.5.5.57;port=3306",$user,$passwd) or die "can't connect to  database ". DBI-errstr;  
$dbh->do("SET NAMES utf8"); 
use POSIX;
use Data::Dumper;
use HTML::TreeBuilder;
open DATAFH,">data.html" || die "open data file failed:$!"; 
my $ua = LWP::UserAgent->new;
$ua->timeout(10);
$ua->env_proxy;
$ua->agent("Mozilla/8.0");
my $response = $ua->get('http://data.10jqka.com.cn/financial/yjyg/');



if ($response->is_success) {
 print DATAFH  $response->decoded_content;  # or wh

了解本专栏