Scrapling
إطار عمل (Framework) متكيف ومفتوح المصدر لاستخراج بيانات الويب (Web Scraping) بلغة بايثون، يتعامل مع كل شيء من طلب واحد إلى زحف كامل، مع قدرة على تخطي أنظمة الحماية مثل Cloudflare.
- حالة المشروع
- نشط
- Last page review
The website link may include a referral commission that supports Al-Hisn, at no cost to you.
عن Scrapling
Scrapling هو إطار عمل قوي ومتكيف لاستخراج بيانات الويب، صمم ليتعامل مع تحديات المواقع الحديثة. يوفر مجموعة متكاملة من الأدوات تبدأ من جلب صفحة واحدة وصولاً إلى بناء عناكب (Spiders) زاحفة متزامنة وقابلة للإيقاف والاستئناف. من أبرز ميزاته: قدرته على التعلم والتكيف مع تغيرات هيكل المواقع، وإعادة تحديد موقع العناصر المطلوبة تلقائياً عند تحديث الصفحات. يتميز بوكلاء جلب (Fetchers) متطورين قادرين على تجاوز أنظمة مكافحة البوتات مثل Cloudflare Turnstile دون عناء، إما عبر طلبات HTTP متخفية أو عبر متصفحات آلية كاملة. يدعم الإطار الدوران التلقائي للبروكسيات، جلسات عمل (Sessions) متعددة الأنواع (HTTP عادي، متصفح متخفي، متصفح ديناميكي)، وعناكب (Spiders) غير متزامنة عالية الأداء مع إمكانية تحديد عدد الطلبات المتزامنة والتحكم بالمجالات. يوفر واجهة سطر أوامر (CLI) غنية للاستخدام المباشر، ومحرراً تفاعلياً (Interactive Shell) لتطوير سكربتات الاستخراج بسرعة. كما يتضمن خادم MCP (Model Context Protocol) للتكامل مع مساعدات الذكاء الاصطناعي مثل Claude وCursor، مما يتيح استخراج بيانات ذكية بتكلفة منخفضة. الإطار مكتوب بلغة بايثون مع تغطية كاملة لأنماط البيانات (Type Hints) وأداء عالٍ يفوق معظم المكتبات المنافسة، وموثق بشكل كامل.
بدائل Scrapling
Crawl4AIمكتبة بايثون مفتوحة المصدر لاستخراج البيانات من الويب وجاهزة لنماذج اللغة الكبيرة (LLM)، تعتمد على Playwright لتقديم محتوى…
Katanaإطار عمل للزحف والاستكشاف من الجيل التالي، مكتوب بلغة Go، يدعم الزحف بأنماط (Standard و Headless)، مع تحليل…
Maxunمنصة مفتوحة المصدر بدون كود لاستخراج بيانات الويب، الزحف، والبحث. تحول مواقع الويب إلى واجهات برمجة تطبيقات (APIs)…
ScrapeGraphAIمكتبة بايثون لاستخراج البيانات من الويب باستخدام نماذج اللغة الكبيرة (LLMs) والرسوم البيانية المنطقية، تسمح باستخراج المعلومات بناءً…
Scrapyإطار عمل سريع وعالي المستوى لاستخراج البيانات من مواقع الويب باستخدام لغة بايثون، يدعم الزحف المتزامن والمعالجة غير…
