search

oonid / telegram-newsletter-bot

Web based app to send periodic message to telegram group with data from web scraping
MIT License
11 stars 3 forks source link

Diskusi Tim Scraper #3

Open oonid opened 3 years ago

oonid commented 3 years ago

Isu ini digunakan untuk diskusi seputar aplikasi Scraping (Crawling). Silakan berkomentar atau bertanya langsung di bawah ini..

oonid commented 3 years ago

buat bahan bacaan, diambil dari diskusi di grup, sekaligus nanti bisa digunakan untuk memutuskan akan menggunakan library/framework apa. https://www.scrapingbee.com/blog/web-scraping-101-with-python/

oonid commented 3 years ago

Untuk proses pengembangan (development) langsung gunakan direktori yang sesuai, untuk tim scraper di https://github.com/oonid/telegram-newsletter-bot/tree/main/development/scraper

Jadi kalo mau menambahkan virtual environment atau paket-paket silakan dilakukan di situ.

oonid commented 3 years ago

aku coba bikin satu versi yang pakai lxml: https://colab.research.google.com/drive/1FMYYFzfHl_gGqDzx4bXPAmYQ9kD84oxT?usp=sharing

silakan diberi masukan... harusnya kalo pakai library lain akan lebih singkat lagi...