naibowang/easyspiderعنكبوت ويب/ماسح ويب مرئي بدون كود/خالي من الكود易采集: برنامج مرئي لاختبار أتمتة المتصفح/جمع البيانات/الزحف على الويب، يمكنه تصميم وتنفيذ مهام الزحف بدون كود بشكل رسومي. الاسم المستعار: ServiceWrapper - نظام تغليف الخدمات الذكي لتطبيقات الويب.
برنامج مجاني تمامًا (بما في ذلك الاستخدام التجاري والتطوير الثانوي) لاختبار أتمتة المتصفح البصري/جمع البيانات/الزحف، يمكن استخدامه لتصميم وتنفيذ المهام بطريقة بصرية بدون كود. كل ما عليك فعله هو تحديد المحتوى الذي تريد التعامل معه على صفحة الويب واتباع المطالبات لإكمال تصميم المهمة وتنفيذها. في نفس الوقت، يمكن أيضًا تنفيذ البرنامج بشكل منفصل عبر سطر الأوامر، مما يسمح بدمجه بسهولة في أنظمة أخرى.
انتقل إلى صفحة الإصدارات لتنزيل أحدث إصدار. إذا كانت سرعة التنزيل بطيئة، يمكنك استخدام عنوان التنزيل داخل الصين: عنوان التنزيل داخل الصين.
راجع صفحة الإصدارات لتنزيل أحدث إصدار من EasySpider.
(انقر بزر الماوس الأيمن) حدد كتلة منتج كبيرة -> سيكتشف البرنامج تلقائيًا كتل المنتجات المماثلة -> انقر على خيار "تحديد الكل" -> انقر على خيار "تحديد العناصر الفرعية" -> انقر على خيار "جمع البيانات"، ويمكنك جمع جميع معلومات جميع المنتجات، وسيتم حفظها في حقول منفصلة.
(انقر بزر الماوس الأيمن) حدد عنوان منتج، وسيتم مطابقة العناوين المماثلة تلقائيًا، انقر على خيار "تحديد الكل" -> انقر على خيار "جمع البيانات"، ويمكنك جمع معلومات العناوين لجميع المنتجات.
في الوقت نفسه، إذا قمت بتحديد خيار "النقر الدوري على كل عنصر" بعد تحديد الكل، فسيتم فتح صفحة التفاصيل لكل منتج تلقائيًا، ويمكنك بعد ذلك تعيين جمع معلومات صفحة التفاصيل.
Bright Data هي شبكة وكيل رائدة عالميًا، تغطي أكثر من 150 مليون عنوان IP حول العالم، وتوفر وكلاء IP سكنيين حقيقيين وواجهات برمجة تطبيقات لجمع البيانات، وتدعم جمع البيانات العامة على نطاق واسع وباستقرار، مع معدل نجاح مثبت في الممارسة العملية. إذا كنت بحاجة إلى خدمات وكيل عالية الجودة وفعالة من حيث التكلفة، يمكنك النقر على الصورة أعلاه للتسجيل والتواصل مع فريق الدعم الصيني؛ حاليًا هناك عروض ترويجية مثل "أودع بقدر ما تحصل عليه" وخصم 50% على الوكيل الديناميكي. يمكن استخدام Bright Data أيضًا مع أدوات مثل EasySpider لجمع البيانات.
Bright Data هي شبكة وكيل رائدة بأكثر من 150 مليون عنوان IP حول العالم، وتوفر وكلاء IP سكنيين حقيقيين وأداة فتح الويب لمساعدتك في جمع بيانات الويب العامة على نطاق واسع بمعدلات نجاح عالية مثبتة. للحصول على وصول وكيل فعال من حيث التكلفة، انقر على اللافتة أعلاه للتسجيل والتواصل مع فريق الدعم الصيني—هناك حاليًا عرض ترويجي يطابق إيداعك الأول.
CapSolver هي إحدى أفضل 3 مزودين في مجال حل CAPTCHA، وتقدم خدمات حل CAPTCHA مدعومة بالذكاء الاصطناعي، وتدعم reCAPTCHA و Image CAPTCHA و Cloudflare و AWS WAF والمزيد. مصممة للزحف على الويب بكميات كبيرة وسير العمل الآلي، وتمكين مشاريع الذكاء الاصطناعي والتحليلات التجارية الخاصة بك، مع سرعة فك تشفير أقل من 3 ثوانٍ، ومعدل نجاح يزيد عن 99%، ووقت توقف صفري، ودعم سريع للعملاء، وأعلى قيمة مقابل المال في السوق، وخصم حصري إضافي بنسبة 6% لمستخدمي EasySpider باستخدام الكود: ESN.
CapSolver هي إحدى أفضل 3 مزودين في صناعة حل CAPTCHA، وتقدم حلولاً مدعومة بالذكاء الاصطناعي تدعم reCAPTCHA و Image CAPTCHA و Cloudflare و AWS WAF والمزيد. مصممة للزحف على الويب عالي الحجم وسير العمل الآلي، تتميز بسرعات فك تشفير أقل من 3 ثوانٍ، ومعدل نجاح يزيد عن 99%، ووقت توقف صفري، وتمكين مشاريع AI و BI الخاصة بك. مدعومة بدعم سريع للعملاء، تقدم أفضل قيمة مقابل المال في السوق. احصل على رصيد إضافي بنسبة 6% باستخدام كود مكافأة EasySpider: ESN.
انقر هنا لترى كيفية حل captcha في EasySpider باستخدام تكامل CapSolver.
IPPeak تقدم عددًا كبيرًا من عناوين IP سكنية حقيقية + بنية شبكة عالية الأداء، مما يقلل بشكل فعال من معدل الحظر ويزيد من معدل النجاح، مما يجعل كل طلب أكثر قيمة. متوسط وقت الاستجابة أقل من 0.5 ثانية | مصدر IP موثوق وقانوني | مهام سلسة ومستمرة
ثلاثة حلول أساسية تغطي جميع سيناريوهات الجمع
وكلاء سكنيون بسعر يبدأ من 0.49 دولار/جيجابايت | اتصال متزامن غير محدود | تحديد دقيق حسب المنطقة/ASN
وكيل سكني غير محدود يبدأ من 8 دولارات/ساعة | حركة مرور وعناوين IP غير محدودة نسبة توفر 99.9% | تشغيل مستمر دون ضغط
وكيل ISP | تشغيل مستقر طويل المدى يبدأ من 3.7 دولار/IP | عنوان IP سكني ثابت حصري | حركة مرور غير محدودة
دعم احترافي على مدار الساعة طوال أيام الأسبوع، تضمن IPPeak استمرارية جمع البيانات بشكل ثابت.
LegionProxy هي شبكة وكيل سريعة النمو، تغطي أكثر من 195 دولة ومنطقة حول العالم، مع أكثر من 74 مليون عنوان IP سكني حقيقي، وتوفر وكلاء سكنيين حقيقيين ودعم HTTP/3، مما يساعد في الزحف على الويب والمهام الآلية على نطاق واسع، وتجنب حظر IP بشكل فعال. تبدأ باقات الوكيل السكني من 0.60 دولار/جيجابايت فقط، مع تفعيل فوري واستجابة سريعة من فريق الدعم الصيني.
قم بزيارة الموقع الرسمي لـ EasySpider: www.easyspider.cn
قم بزيارة الموقع الرسمي لـ EasySpider: www.easyspider.net
لمزيد من الميزات، يرجى التمرير إلى أسفل هذه الصفحة.
EasySpider هو برنامج مفتوح المصدر مجاني تمامًا بدون إعلانات أثناء الاستخدام. يعتمد تطوير البرنامج وصيانته بالكامل على حب المؤلف، لذلك يمكنك اختيار دعم المؤلف ليمنحه المزيد من الحماس والطاقة لصيانة هذا البرنامج، أو إذا كنت قد حققت أرباحًا باستخدام هذا البرنامج، فنرحب بك لدعم المؤلف من خلال الطرق التالية:
يمكنك دعم المؤلف من خلال النقر على زر Sponsor على الجانب الأيمن أو الدفع عبر PayPal: naibowang.
يرجى النقر هنا للدخول إلى وثائق الدروس التعليمية، وإذا كانت باللغة الإنجليزية فيمكن ترجمتها مؤقتًا، أو الاطلاع على أطروحة الماجستير للمؤلف (راجع بشكل أساسي الفصلين الثالث والخامس).
مدونة مثال Ebay: https://blog.csdn.net/ihero/article/details/130805504.
يمكن العثور على الوثائق من GitHub Wiki.
دروس فيديو على Bilibili:
مقدمة EasySpider - حالة جمع بيانات شبكة الزلازل الصينية
كيفية الزحف إلى المواقع التي تتطلب تسجيل الدخول بدون كود - حالة موقع Zhihu
جمع محتوى مقالات موقع السيارات العملي وتنزيل الصور داخل المقالة
تنفيذ المهام في وقت محدد + تحديد العناصر الفرعية بعدة أنماط + إدخال القيمة المستخرجة كمتغير
【مهم】الحكم الشرطي المخصص باستخدام قيمة إرجاع أمر JS داخل الحلقة - الدفعة الثانية
تحليل منطق تنفيذ المخطط الانسيابي - حالة جمع وصف العقارات من 58.com
درس تصميم وتنفيذ مهام زحف موقع eBay على نظام MacOS
كيفية تنفيذ كود JS الخاص بك وكود النظام (العمليات المخصصة)
كيفية تخصيص الحلقات وشروط الحكم - الدفعة الأولى
كيفية التقاط لقطات شاشة للعناصر وصفحات الويب ودليل تنفيذ سطر الأوامر
وظيفة التعرف الضوئي على الأحرف (OCR) لمحتوى العنصر (تُستخدم غالبًا لرموز التحقق النصية)
كيفية الزحف إلى مواقع تتطلب إدخال رمز تحقق
كيفية تبديل مجمع IP واستخدام IP النفق - حالة فتح صفحة التفاصيل للجمع
كيفية تنفيذ مهام متعددة في وقت واحد (فتح متعدد متوازي)
إدخال نتائج عمليات كود Python كإدخال في مربع النص
مثال عملي - جمع مقالات من موقع غير مألوف وتصحيح الكود
درس الكتابة إلى قاعدة بيانات MySQL
دليل ترجمة البرنامج من الكود المصدري وتشغيل وتصحيح المهام (بناءً على Ubuntu24.04)
راجع قائمة التشغيل على YouTube لمشاهدة دروس الفيديو لـ EasySpider.
قم بتنزيل المهام النموذجية من مجلد Examples في هذا المشروع، وأعد تسميتها إلى أرقام أكبر من 0، واستوردها إلى مجلد tasks في EasySpider، ثم افتحها في EasySpider.
هذا البرنامج مخصص للتعلم والتواصل فقط، يُحظر تمامًا استخدام البرنامج في أي عمليات غير قانونية، مثل الزحف إلى مواقع حكومية/عسكرية غير مسموح بالزحف إليها. جميع العواقب الناتجة عن استخدام هذا البرنامج تقع على عاتق المستخدم وحده، ولا علاقة لها بالمؤلف، ولن يتحمل المؤلف أي مسؤولية.
بالنسبة لعمليات الزحف على مواقع حكومية وعسكرية، لن يجيب المؤلف على أي أسئلة لتجنب انتهاك القوانين واللوائح والسياسات الوطنية ذات الصلة.
EasySpider يتبع اتفاقية AGPL-3.0. يمكن لأي فرد أو مؤسسة استخدام البرنامج مجانًا أو استخدام الكود المصدري للبرنامج للتطوير الثانوي، دون الحاجة إلى الاتصال بالمؤلف للحصول على ترخيص تجاري (براءة اختراع). ومع ذلك، من الضروري الانتباه إلى القواعد ذات الصلة باتفاقية AGPL-3.0:
رقم المجموعة: 682921940. يُقترح طرح الأسئلة عبر GitHub Issues، وإذا كانت هناك حاجة ماسة، يرجى الانضمام إلى مجموعة QQ، حيث أن عدد أعضاء المجموعة محدود، ومجموعة QQ لا توفر وظيفة تنزيل البرنامج.
تم قبول هذا البرنامج في مؤتمر الويب (WWW) 2023 (مؤتمر من الدرجة الأولى لجمعية الكمبيوتر الصينية، CCF A): EasySpider: نظام بصري بدون كود لزحف الويب، أبريل 2023.
براءة اختراع صينية من إدارة الملكية الفكرية الوطنية، نظام تغليف خدمات لاستخراج العمليات المخصصة، مايو 2022.
أطروحة ماجستير من جامعة تشجيانغ، تصميم وتنفيذ نظام تغليف خدمات ذكي لتطبيقات الويب، يونيو 2020.
راجع تعليمات الترجمة.
