HOO八卦
妖魔鬼怪快离开

今天双12,也没什么好分享的,就分享个影视采集站的爬虫吧

 

下载下来之后后缀名改成".py"

我是在Python3.6环境下编写,Linux上面运行的,CentOS/Fedora/Ubuntu测试通过,暂时没有Windows的机器,所以就没有测试...

先安装MongoDB数据库,然后装上Reuqests和PyMongo类库

代码的urls可以自己添加其他影视采集站,请查找适用于MacCMS V10的地址,
里边有两种采集方式CrawlerAll和Crawler24,
前者用于全部采集,后者用于采集24小时更新的内容.

Have fun~

movieSpider

 

今天双12,也没什么好分享的,就分享个影视采集站的爬虫吧

update on 2018-12-12 17:07:50

找到一个BUG,
请搜索代码里边的  'video.last' 不包含引号,
改成  video['last']

 

赞(0)
未经允许不得转载:HOO八卦 » 今天双12,也没什么好分享的,就分享个影视采集站的爬虫吧
分享到: 更多 (0)

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

Find More Interest

Contactsthrough