search

jaywang98 / old.wjmars98.github.io

0 stars 0 forks source link

imdb-scrapy | Mars' Blog #2

Open jaywang98 opened 2 years ago

jaywang98 commented 2 years ago

https://wjmars98.github.io/2022/04/22/imdb-scrapy/#more

在有了一定的scrapy基础之后，便可以尝试将scrapy的知识应用起来，做一些小项目。本文将介绍一个基于scrapy的imdb数据爬取项目，其主要功能有以下三点： 对imdb网页，指定id电影信息，最受欢迎榜单数据，新片榜单 数据清洗、查重与入库 脚本编写，定时运行，鲁棒性检测

jaywang98 commented 2 years ago

欢迎大家一起讨论进步。