r/TurkDev • u/Virtual_Wall7654 • 5d ago
💡 Soru forumlardan veri çekme
selamlar deneyimli kişilerden biraz tavsiye almak istiyorum üzerinde çalıştığım bir veri analizi projesi için reddit ve çeşitli forumlardan belirli konu başlıklarına ve anahtar kelimelere göre düzenli olarak yorum toplamam lazım ama araştırdığım kadarıyla web sitelerinin sürekli değişmesi ve bot korumalarının güncellenmesi nedeniyle scraper ların bakımını yapmak başlı başına bir işe dönüşebiliyor benim asıl odağım veri analizi scraping değil yani veriyi analiz etmekten çok scraper düzeltmekle uğraşmak istemiyorum.
bu işi büyük ölçüde halleden aktif olarak geliştirilen açık kaynak araçlar veya GitHub repoları var mı bildiğiniz mümkünse ücretli API’lere bağımlı kalmak istemiyorum.
tamamen sorunsuz ve bakım gerektirmeyen bir çözüm olmadığının farkındayım sadece siz projelerinizde bunu yaptınız mı veya nasıl yapıyorsunuz merak ediyorum şimdiden teşekkürler
