lovit / reddit_scraper

Reddit scraper. Get latest posts from Reddit
1 stars 1 forks source link

Getting archived data #1

Open lovit opened 5 years ago

lovit commented 5 years ago

Reddit site 에서는 이전의 데이터를 가져올 수 없다.

대신 pushshift 를 이용하면 이를 이용할 수 있다.

lovit commented 5 years ago

https://www.reddit.com/r/datasets/comments/5b56my/where_can_i_get_a_large_archive_of_reddit_posts/

lovit commented 5 years ago

https://lovit.github.io/dataset/2019/01/16/get_reddit/ 에 pushshift 의 내용을 정리함