ScrapeGraphAI

ScrapeGraphAI هي مكتبة بايثون مفتوحة المصدر تستخدم نماذج اللغة الكبيرة (LLMs) لاستخراج البيانات المهيكلة من المواقع الإلكترونية والملفات المحلية مثل XML، HTML، JSON، و Markdown. بدلاً من كتابة محددات (selectors) يدويًا، يمكن للمستخدم تحديد المعلومات المطلوبة وستقوم المكتبة بالباقي. تدعم المكتبة تكاملًا واسعًا مع أطر LLM مثل LangChain و LlamaIndex و CrewAI، وأطر منخفضة الكود مثل Pipedream و Bubble و Zapier و n8n و Dify. تتضمن أنواعًا مختلفة من “الرسوم البيانية” (graphs) مثل SmartScraperGraph (لصفحة واحدة مع إدخال المستخدم) وSearchGraph (للبحث عن روابط). تتميز ScrapeGraphAI بقدرتها على معالجة الصفحات الديناميكية التي تستخدم الجافا سكريبت، وتوفر وضع تحويل إلى Markdown بتكلفة أقل بنسبة 80% مقارنة بوضع AI. تم تطويرها تحت رخصة MIT وحصلت على أكثر من 21 ألف نجمة على GitHub. الإصدار الثابت هو v1.20.0-beta.1، وهي مناسبة لبناء خطوط أنابيب بيانات (data pipelines) لتطبيقات الذكاء الاصطناعي وتعلم الآلة.