- 博客(4)
- 收藏
- 关注
原创 IT漫话第四篇:电影网站自动化采集
现在大部分的影视系统都支持自动化采集,只需要在后台配置即可。但是如果需要个性化采集,比如我们对采集资源关联了豆瓣评分信息,而这种关联一般是一条条的电影信息去和豆瓣信息匹配的,此时采用自动化采集就有问题了。今天我们就谈下如何自己封装自动化采集代码。 1)调用原始视频资源,获取视频列表信息,一般api就会返回视频列表信息。如 "page":{ "pageindex":"1","pagecount":"...
2019-11-21 21:00:24
749
1
原创 IT漫话第三篇:电影网站关联豆瓣评分
开篇我们谈过如何采集豆瓣的影片信息,并把影片信息以豆瓣ID为主键存储,存储方式多种多样,可以用数据库,文件,还有最方便的redis。今天就讲讲如何把电影网站的影片与豆瓣信息关联,并把豆瓣评分、评分人数等信息补充到影片里。 虽然现在的很多的电影网站程序都支持根据豆瓣ID关联豆瓣信息,但前提需要知道对应影片的豆瓣ID,然后在后台视频管理里一个个的手工采集,而且官方的采集都是通用的,使用的人很多,经常无...
2019-11-11 22:56:37
1035
1
原创 IT漫话第二篇:金融科技与双十一
一年一度的双十一又要拉开帷幕了,要说起双十一,不得不提现在的阿里巴巴掌门人逍遥子,硬生生的把一个光棍节过成了购物狂欢节,戏称“剁手节”。成交额也是连年攀升,从2009年的5000万到2018年的2135亿,而且将不断创造记录。 “剁手节”大家很嗨,作为一名金融科技工作者,今天就从科技角度聊聊双十一。在双十一正式启动前,业务和技术人员早已夜以继日的开始忙碌起来。业务人员与支付宝、财付通等第三方支付机...
2019-11-09 21:24:16
147
原创 IT漫话第一篇:豆瓣电影信息采集
今天就来谈谈如何使用PHP的Curl采集豆瓣电影信息,为什么要使用PHP而不使用Python呢?其实原因很简单,很多人采集豆瓣电影信息,主要是为了获取豆瓣的评分,在自己的电影网站上使用。而大部分的电影网站都是使用的PHP编写,例如苹果CMS,飞飞影视等。 其实远程采集也非常简单,通过Curl远程采集到页面信息,然后使用PHP的匹配函数匹配我们需要的影片信息,最后将获取的信息转成json报文存储,...
2019-11-07 19:14:45
733
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人