🏗️ Under constant development – if you spot an issue, I'm already working on fixing it. Thanks for your understanding! :)
Scrapy
إطار عمل سريع وعالي المستوى لاستخراج البيانات من مواقع الويب باستخدام لغة بايثون، يدعم الزحف المتزامن والمعالجة غير المتزامنة، وهو مثالي للمشاريع واسعة النطاق.
Category: أدوات المطورين المساعدة
Software License: Open Source (BSD 3-Clause)
About Scrapy
Scrapy هو إطار عمل مفتوح المصدر ومتعدد المنصات لاستخراج البيانات من المواقع الإلكترونية (web scraping)، تم تطويره بلغة بايثون، وهو يُستخدم على نطاق واسع لبناء مشاريع زحف كبيرة ومعقدة. صُمم Scrapy ليكون سريعًا وفعالًا بفضل بنيته غير المتزامنة (asynchronous) التي تسمح بمعالجة طلبات متعددة في وقت واحد. يوفر الإطار واجهات برمجية متقدمة لتحليل المحتوى باستخدام محددات XPath و CSS، وآليات مدمجة لتتبع الروابط، ودعمًا واسعًا لتنسيقات البيانات المخرجة مثل JSON و CSV و XML. يتميز Scrapy بقدرته على التعامل مع الطلبات وإعادة المحاولات تلقائيًا، وإدارة الجلسات وملفات تعريف الارتباط، ودعم الوكيل الوسطي. يتكامل Scrapy أيضًا مع السحابة عبر خدمة Scrapy Cloud، ويتم صيانته بواسطة Zyte (سابقًا Scrapinghub) ومجتمع مفتوح المصدر. يُستخدم Scrapy في مجالات تحليل البيانات، والتجارة الإلكترونية، والبحث الأكاديمي، وأتمتة جمع المعلومات، مع أكثر من 61 ألف نجمة على GitHub و 604 مساهمًا. يعتمد الإطار على رخصة BSD-3-Clause ويتطلب Python 3.10+.
Origin: المملكة المتحدة
Pro & Cons of Scrapy
Pro's
- Asynchronous Architecture
- Built-in Selectors (XPath/CSS)
- Cross-Platform
- Data Export
- Extensible by Plugins/Extensions
- Large Community
- Lightweight
- Open Source
- Scalable
Con's
- Limited Browser Automation
- No Built-in JavaScript Rendering
- Setup Complexity
- Steep Learning Curve
FAQ About Scrapy
These are the most frequently asked questions about Scrapy
Scrapy في جوهره لا يعالج الجافا سكريبت لأنه يعتمد على طلبات HTTP مباشرة. ولكن يمكن دمجه مع أدوات مثل Splash أو Selenium أو Playwright لتمكينه من معالجة المحتوى الديناميكي، وهو أمر شائع في المشاريع المتقدمة.
يدعم Scrapy تصدير البيانات بتنسيقات متعددة مثل JSON، CSV، XML، و JSON Lines. يمكن أيضًا تخزينها في قواعد بيانات مثل MongoDB و PostgreSQL عبر خطوط الأنابيب (Item Pipelines).
Supported Languages
English
Learn More About Scrapy
[alhisn_related_posts]
Resources About Scrapy
News & Updates About Scrapy
[alhisn_related_news]
No Data
Alternatives and Similar Tools to Scrapy
قارئ و محرر Markdown يعمل في المتصفح، يركز على الخصوصية ويعمل محليًا بالكامل دون خادم خلفي، مع إمكانية التثبيت كتطبيق ويب تقدمي (PWA) للعمل دون اتصال بالإنترنت.
موقع ويب يساعد في فهم أوامر الشيل (Shell) في أنظمة لينكس ويونكس من خلال تحليل الأوامر وعرض وصف تفصيلي لكل جزء منها، بما في ذلك الخيارات والوسائط.
خدمة لصق النصوص ونقل الملفات الصغيرة بشكل آمن ومشفر، مفتوحة المصدر ويمكن استضافتها ذاتيًا.
خدمة مشاركة نصوص وصور بسيطة وآمنة، مفتوحة المصدر وتركز على الخصوصية والسهولة.
بديل مفتوح المصدر لأداة Burp Suite الاحترافية، عبارة عن وكيل HTTP (MITM) متقدم لتحليل حركة المرور وإنشاء الطلبات اليدوية والتنقيب عن الثغرات، مع واجهة إدارة سهلة الاستخدام عبر المتصفح وواجهة عبر سطر الأوامر.
أداة OSINT مفتوحة المصدر (الاستخبارات مفتوحة المصدر) لتحديد المواقع الجغرافية عبر عنوان IP أو رقم الهاتف، إلى جانب تتبع أسماء المستخدمين عبر منصات التواصل الاجتماعي. تتميز بسهولة الاستخدام وتعمل على أنظمة لينكس و Termux.
أداة سيو (SEO) مفتوحة المصدر وخفيفة الوزن، قابلة للاستضافة الذاتية، وتعمل بنظام الدفع حسب الاستخدام (Pay-as-you-go). تهدف لأن تكون بديلاً عمليًا ومجديًا اقتصاديًا للمنصات الباهظة الثمن مثل Semrush أو Ahrefs، مع التركيز على workflows محددة وليست suite ضخمة ومعقدة.
مكتبة JavaScript مفتوحة المصدر وموجهة للمطورين، بديل قوي ومباشر لـ Typeform، تتيح إنشاء نماذج متعددة الخطوات ودراسات استقصائية بأقل قدر من الكود مع الحفاظ على الخصوصية والتحكم الكامل.
أداة استخبارات أسماء نطاقات متكاملة توفر معلومات فورية عن WHOIS، DNS، SSL، وSEO، مع لوحة تحكم لمراقبة النطاقات وإشعارات الانتهاء.
مكونات خريطة React جاهزة وجميلة، مبنية على MapLibre GL، تتكامل بسلاسة مع shadcn/ui، وتتميز بالسهولة المطلقة في الإعداد دون الحاجة لأي تهيئة.
محرك بحث مفتوح المصدر سريع جدًا (يعمل في الذاكرة) ومتحمل للأخطاء الإملائية، بديل خفيف ومباشر لـ Algolia و Elasticsearch.
آلة حاسبة سطح مكتب متعددة الاستخدامات عبر المنصات، تدعم العمليات الرمزية، والوحدات، والدقة التعسفية، والرسوم البيانية، وواجهة سطر أوامر.
محرك بحث مفتوح المصدر، سريع ومرن، يمكن دمجه بسهولة في أي موقع أو تطبيق، ويوفر بحثًا فوريًا مع ميزات متقدمة مثل التصفية والفهرسة متعددة الوسائط والبحث الهجين.
مختصر روابط مفتوح المصدر وقابل للاستضافة الذاتية، يوفر تحليلات متقدمة، وإدارة نطاقات مخصصة، مع دعم لواجهة برمجة تطبيقات RESTful.
أداة مفتوحة المصدر لإنشاء محادثات تفاعلية (Chatbots) واستبيانات متقدمة بواجهة سحب وإفلات، مع إمكانية الاستضافة الذاتية.
أداة سطر أوامر مفتوحة المصدر لمزامنة ونسخ الملفات بكفاءة عالية، تشتهر بخوارزمية النقل التزايدي (Delta-Transfer) التي تنقل فقط الأجزاء المتغيرة من الملفات، مما يوفر الوقت وعرض النطاق.
YOURLS (Your Own URL Shortener) هو نظام تقصير روابط مفتوح المصدر يمكنك استضافته على خادمك الخاص، مع تحكم كامل في بياناتك واسم النطاق الخاص بك.
نظام تقصير روابط سريع وآمن يعمل بالكامل على Cloudflare، مع إحصائيات متقدمة، دعم الذكاء الاصطناعي، وتحليلات تفاعلية.
أداة OCR (تعرف بصري على الحروف) مفتوحة المصدر تعمل محليًا بالكامل، بديل مجاني لبرنامج ABBYY FineReader، لمعالجة الكتب والمستندات دفعة واحدة مع الحفاظ على التنسيق.
تطبيق أندرويد مفتوح المصدر يحول أي موقع ويب، ملف وسائط، أو مشروع HTML (React/Vue) إلى تطبيق أندرويد مستقل بضغطة واحدة، مع دعم إضافات JavaScript/ CSS وأدوات ذكاء اصطناعي.
نموذج OCR متقدم مفتوح المصدر للتعرف على النصوص في المستندات المعقدة، يتعامل مع الخط اليدوي، الجداول، المعادلات الرياضية، والنماذج مع الحفاظ على التنسيق الكامل.
منصة ذكاء الإنترنت التي تتيح لمستخدميها جمع بيانات حول الأجهزة المتصلة بالإنترنت.
نظام تقدير وضع الإنسان المعتمد على WiFi يتيح الكشف عن الوضعية في الوقت الحقيقي، دون الحاجة إلى كاميرات.
أداة مفتوحة المصدر من مختبر الأمن في منظمة العفو الدولية (Amnesty International) لإجراء تحليل جنائي (Forensics) لأجهزة أندرويد و iOS للكشف عن آثار الاختراق ببرامج تجسس مثل Pegasus.
BrowserStack هي منصة اختبار شاملة (Testing Platform) تتيح للمطورين اختبار تطبيقات الويب والجوال على آلاف المتصفحات والأجهزة الحقيقية في السحابة.
Frog هو تطبيق مفتوح المصدر لنظام لينكس لاستخراج النصوص (OCR) من الصور، مواقع الويب، ومقاطع الفيديو ورموز QR.
Z.ai هي أداة لتقصير الروابط مع إمكانيات ذكاء اصطناعي (التفاصيل الدقيقة غير متوفرة حاليًا).
React هي مكتبة جافا سكريبت مفتوحة المصدر من ميتا (فيسبوك سابقًا) لبناء واجهات المستخدم التفاعلية.
Phone Link (رابط الهاتف) هو تطبيق من مايكروسوفت يربط هاتف الأندرويد أو iOS بجهاز ويندوز لاسلكيًا.
Web Check هي أداة تحليل مواقع إلكترونية تقدم تقريرًا شاملاً عن أمان الموقع، البنية التحتية، وتحسين محركات البحث (SEO).
أداة سبورة بيضاء (Whiteboard) افتراضية مفتوحة المصدر لإنشاء رسومات تخطيطية بخط اليد بسهولة وتعاون فوري، مثالية للفرق والمطورين.
Shizuku هي أداة أندرويد تسمح للتطبيقات العادية باستخدام واجهات برمجة تطبيقات النظام (System APIs) بصلاحيات مرتفعة عبر ADB أو الروت.
Termux هو محاكي طرفية (Terminal) قوي لأندرويد مع بيئة لينكس كاملة.
Google Lens هي أداة بحث مرئي بالذكاء الاصطناعي تتعرف على الأشياء والنصوص.
Dub.co هو أداة تقصير روابط مفتوحة المصدر مع تحليلات متقدمة.
Fing هو أداة مسح الشبكات وتحليل الأجهزة المتصلة.
Sefirah هو تطبيق مفتوح المصدر بديل لـ Phone Link و KDE Connect، يربط هاتفك الأندرويد بجهاز ويندوز لمشاركة الحافظة والملفات والإشعارات.
AirDroid هو برنامج لإدارة الأندرويد عن بعد ونقل الملفات لاسلكيًا.
Pastebin.com هي خدمة استضافة نصوص مؤقتة لمشاركة الكود والمعلومات.
C++ هي لغة برمجة كائنية عالية الأداء تستخدم في الأنظمة والألعاب.
PHP هي لغة سكريبت server-side لتطوير ويب.
Rust هي لغة برمجة نظامية مفتوحة المصدر آمنة وسريعة.
SimilarSites هو أداة اكتشاف مواقع مشابهة لأي موقع.
Java هي لغة برمجة متعددة المنصات مع JVM لتطبيقات كبيرة.
Nmap هو ماسح شبكات مفتوح المصدر للكشف عن hosts وservices.
JavaScript هي لغة برمجة ويب أساسية للتفاعل.
Ninite هو أداة تثبيت برامج جماعية للويندوز بسهولة.
Chocolatey هو مدير حزم للويندوز مشابه apt/yum.
UniGetUI (سابقًا WingetUI) هو واجهة رسومية لمديري حزم ويندوز.
scrcpy هو أداة عرض وتحكم في شاشة Android من الحاسوب مجانية مفتوحة المصدر.
AutoHotkey (AHK) هي لغة برمجة نصية (Scripting) مفتوحة المصدر ومجانية لأتمتة المهام في ويندوز، من خلال إنشاء اختصارات لوحة مفاتيح وماكرو.
Wireshark هو محلل حزم شبكة مفتوح المصدر لتحليل الترافيك.
KDE Connect يربط هاتفك الأندرويد أو iOS بسطح مكتب لينكس بسلاسة.
FFmpeg هو مكتبة معالجة وسائط مفتوحة المصدر لتحويل وتسجيل الفيديو/الصوت.
FileZilla هو عميل FTP مجاني مفتوح المصدر سريع وموثوق لنقل الملفات.
أداة مجانية وقوية لإنشاء الرسوم التخطيطية (Diagrams) والخرائط الذهنية والمخططات الانسيابية، تعمل عبر المتصفح أو كتطبيق سطح مكتب، مع تكامل مع خدمات سحابية متعددة.
Python هي لغة برمجة عالية المستوى سهلة التعلم مع مكتبات غنية لكل المجالات.
0 out of 5 stars (based on 0 reviews)
There are no reviews yet. Be the first one to write one.
أخر تحديث للصفحة May 27, 2026