unclecode/crawl4ai
crawl4ai
☆ 86,9k · Python · Projeye eklenir
Açıklama
Web sitelerini tarayıp LLM'in okuyacağı temiz Markdown'a çevirir.
Kurulum
Bu projeye eklenir. Prompt’u kodlama ajanına yapıştır.
Şu aracı bu projede kullanmak istiyorum: https://github.com/unclecode/crawl4ai README'sini oku; bu projenin diline ve altyapısına uygun mu söyle. Uygunsa projeye ekle ve nasıl kullanılacağını kısaca göster.
Benzer repolar
Alt kategori: Web, video ve sosyal medya okumaWeb'de arama, sayfayı temiz Markdown ya da yapılandırılmış JSON'a çevirme, tüm siteyi tarama ve sayfada tıklama gibi etkileşimler için API; PDF ve DOCX'i de Markdown'a çevirir. Python, Node.js ve başka diller için SDK'sı var.
AI ajanına interneti okuma yeteneği veren komut satırı aracı: herhangi bir sayfayı temiz Markdown'a çevirir, YouTube altyazısı ve araması, GitHub, RSS, web araması; ayarla X, Reddit, LinkedIn ve Instagram'ı da okur. Ücretli API gerekmez; ajana tek cümle verilerek kurulur, agent-reach doctor neyin çalıştığını gösterir.
Site düzeni değişince öğeleri yeniden bulan uyarlanabilir web kazıma kütüphanesi: tek istekten eşzamanlı taramaya kadar, bot korumalarını aşan gizli tarayıcı modu ve komut satırı aracı. Ajana MCP sunucusu (scrapling-mcp) ya da skill olarak da eklenir.