D4Vinci/Scrapling

D4Vinci /

Scrapling

☆ 96,5k · Python · Projeye eklenir

Açıklama

Site düzeni değişince öğeleri yeniden bulan uyarlanabilir web kazıma kütüphanesi: tek istekten eşzamanlı taramaya kadar, bot korumalarını aşan gizli tarayıcı modu ve komut satırı aracı. Ajana MCP sunucusu (scrapling-mcp) ya da skill olarak da eklenir.

Kurulum

Projeye ekle

Bu projeye eklenir. Prompt’u kodlama ajanına yapıştır.

Şu aracı bu projede kullanmak istiyorum: https://github.com/D4Vinci/Scrapling
README'sini oku; bu projenin diline ve altyapısına uygun mu söyle. Uygunsa projeye ekle ve nasıl kullanılacağını kısaca göster.

Kaynak

hfnhqInstagram

Benzer repolar

Alt kategori: Web, video ve sosyal medya okuma

firecrawl /firecrawl

firecrawlfirecrawl

Web'de arama, sayfayı temiz Markdown ya da yapılandırılmış JSON'a çevirme, tüm siteyi tarama ve sayfada tıklama gibi etkileşimler için API; PDF ve DOCX'i de Markdown'a çevirir. Python, Node.js ve başka diller için SDK'sı var.

TypeScript☆ 198k

Projeye eklenirNot var

Panniantong /Agent-Reach

Agent-ReachPanniantong

AI ajanına interneti okuma yeteneği veren komut satırı aracı: herhangi bir sayfayı temiz Markdown'a çevirir, YouTube altyazısı ve araması, GitHub, RSS, web araması; ayarla X, Reddit, LinkedIn ve Instagram'ı da okur. Ücretli API gerekmez; ajana tek cümle verilerek kurulur, agent-reach doctor neyin çalıştığını gösterir.

Python☆ 108k

Claude'a kurulurCodex'e kurulurNot var

unclecode /crawl4ai

crawl4aiunclecode

Web sitelerini tarayıp LLM'in okuyacağı temiz Markdown'a çevirir.

Python☆ 86,9k

Projeye eklenir