icimence / icimence.github.io

icimence's Tech blog
https://icimence.github.io/
2 stars 0 forks source link

畅所欲言 | Icimence's Tech Blog #2

Open icimence opened 4 years ago

icimence commented 4 years ago

https://icimence.cn/comment/

畅所欲言

pujx233 commented 4 years ago

菜鸡想问一下,查了一下豆瓣读书的api不是关闭了吗,那怎么写豆瓣读书的小程序呢

icimence commented 4 years ago

@pujx233 菜鸡想问一下,查了一下豆瓣读书的api不是关闭了吗,那怎么写豆瓣读书的小程序呢

你可以访问一下https://book.douban.com/robots.txt 看一豆瓣图书网站下spider不允许访问的列表,我的那个爬虫应该没有碰到不允许的东西,而且豆瓣的网站的格式是比较工整的,比较容易爬,解析起来很方便,是直接通过解析html文件实现的。

icimence commented 4 years ago

微信小程序的访问就直接通过后端调用自己写的爬虫就可以了。

pujx233 commented 4 years ago

@icimence

@pujx233 菜鸡想问一下,查了一下豆瓣读书的api不是关闭了吗,那怎么写豆瓣读书的小程序呢

你可以访问一下https://book.douban.com/robots.txt 看一豆瓣图书网站下spider不允许访问的列表,我的那个爬虫应该没有碰到不允许的东西,而且豆瓣的网站的格式是比较工整的,比较容易爬,解析起来很方便,是直接通过解析html文件实现的。

感谢回复