Scrapegraph-ai

Ne işe yarar?

ScrapeGraphAI, web sayfalarından ve yerel dosyalardan istenen verileri ayıklayan bir Python kütüphanesidir. Geleneksel kazıma yöntemlerindeki sabit seçiciler yerine, büyük dil modelleri (metin üreten yapay zekâ) ve yönlendirilmiş grafik mantığını kullanarak veri toplama hatları oluşturur. Kullanıcı yalnızca hangi bilgileri çekmek istediğini doğal dille belirtir ve kütüphane sayfayı ayrıştırarak yapılandırılmış çıktı üretir. Sayfa yapısı değiştiğinde bozulmayan boru hatları kurabilmesiyle klasik web kazıma araçlarından ayrılır.

Neler için kullanılabilir?

• E-ticaret sitelerindeki ürün fiyatlarını ve açıklamalarını tek komutla toplamak
• Haber sitelerinden güncel makale başlıklarını ve özetlerini JSON formatında çıkarmak
• Yerel XML veya HTML belgelerinden belirli tabloları ayıklayıp düzenlemek

Nasıl kullanılır?

1. pip install scrapegraphai komutuyla kütüphaneyi kurun.
2. playwright install komutunu çalıştırarak gerekli tarayıcı sürücülerini indirin.
3. SmartScraperGraph sınıfı ile hedef URL ve çekilecek bilgiyi tanımlayıp çalıştırın.

Adımlar deponun README'sinden özetlendi; güncel kurulum için deponun kendi sayfasına bakın.

Kimler için?

Web sitelerinden ve yerel belgelerden hızlıca yapılandırılmış veri çekmek isteyen Python geliştiricileri.

Aynı kategoriden

• firecrawl (192K) Web sitelerini yapay zekâ ajanları için temiz Markdown ve JSON verisine dönüştürür.
• browser-use Yapay zekâ ajanlarının internet tarayıcısını insan gibi kullanmasını sağlar.
• Agent-Reach Ajanların API ücreti ödemeden X, Reddit ve YouTube gibi siteleri okumasını sağlar.
• Scrapling Hızlı istekler, gizli tarayıcılar ve veri çıkarımı sunan web kazıma çatısıdır.
• crawl4ai Web sitelerini yapay zekâ modellerine uygun temiz Markdown metinlerine dönüştürür.
• scrapy Web sitelerinden yapılandırılmış veri toplamak için kullanılan kazıma çatısıdır.