Open mave99a opened 3 years ago
去中心化的优势是scrapper可以非常去中心化。
scrapper 可以把各种web 服务 API化, scrapper规则可以online update.
https://simplescraper.io
可以定义一个etl 专门用于数据的处理
这些数据处理的规则可以自己运行也可以扔出去让大家一起运行,形成一个去中心化数据市场
可以实现一个editor工具或者chrome plugin 让用户可视化编辑和debug data scraper,然后产生etl、etl还可以版本管理,自动部署
https://apify.com/
https://datapicker.byetool.com/
去中心化的优势是scrapper可以非常去中心化。
scrapper 可以把各种web 服务 API化, scrapper规则可以online update.