إتقان Web Scraping عبر n8n: مسارات عمل مؤتمتة

قبل بضعة أشهر، أرسل لنا أحد المستخدمين لقطة شاشة لسير عمل في n8n يضم 14 عقدة، وعدة ملاحظات لاصقة، ورسالة عنوانها لا يقول سوى: "Help." كان قد اتبع شرحًا منتشرًا عن web scraping عبر n8n، ونجح في تشغيل عرض تجريبي أنيق من 10 صفوف على موقع اختبار، ثم حاول لاحقًا استخراج أسعار المنافسين الحقيقية عبر 200 صفحة منتج. والنتيجة؟ حلقة ترقيم صفحات معطلة، وجدار من خطأ 403، وجدول زمني صامت توقف عن العمل بعد أول يوم ثلاثاء.

هذه الفجوة — بين العرض التجريبي وخط الإنتاج — هي المكان الذي تموت فيه معظم مشاريع scraping على n8n. لقد أمضيت سنوات في بناء والعمل في مجال الأتمتة، وأستطيع أن أقول لك: الجزء الخاص بالاستخراج نفسه نادرًا ما يكون الأصعب. ما بعد أول عملية استخراج ناجحة هو ما يوقع الناس في المشكلة: ترقيم الصفحات، الجدولة، التعامل مع حظر البوتات، تنظيف البيانات، التصدير، والأهم من ذلك — الصيانة عندما يغيّر الموقع تصميمه للمرة الثالثة هذا الربع. يشرح هذا الدليل خط الأنابيب كاملًا، من أول HTTP Request node حتى سير عمل web scraping دوري وجاهز للإنتاج على n8n. وعندما يصل النهج اليدوي في n8n إلى طريق مسدود، سأوضح لك أين يمكن لأدوات مدعومة بالذكاء الاصطناعي مثل Thunderbit أن توفر عليك ساعات — أو أيام — من الإحباط.

ما هو Web Scraping عبر n8n، ولماذا لا تكشف عنه معظم الشروحات بالكامل؟

n8n منصة مفتوحة المصدر ومنخفضة الكود لأتمتة سير العمل. تخيلها كلوحة مرئية تربط عليها "العُقد" — كل عقدة تنفذ مهمة محددة (جلب صفحة ويب، تحليل HTML، إرسال رسالة إلى Slack، الكتابة في Google Sheets) — ثم تربطها معًا في مسارات عمل مؤتمتة. لا تحتاج إلى برمجة كثيفة، رغم أنك تستطيع استخدام JavaScript عندما تحتاج إلى ذلك.

المقصود بـ "n8n web scraping" هو استخدام عُقد HTTP Request وHTML المدمجة في n8n (إلى جانب عُقد المجتمع) لجلب بيانات المواقع وتحليلها ومعالجتها داخل هذه المسارات المؤتمتة. العملية الأساسية تتكون من خطوتين: الجلب (عقدة HTTP Request تسحب HTML الخام من رابط ما) والتحليل (عقدة HTML تستخدم CSS selectors لاستخراج البيانات التي تهمك — أسماء المنتجات، الأسعار، عناوين البريد الإلكتروني، أيًا كان).

المنصة ضخمة: حتى أبريل 2026، لدى n8n نحو ، وأكثر من 230,000 مستخدم نشط، وأكثر من 9,166 قالبًا مجتمعيًا، وتصدر نسخة فرعية جديدة تقريبًا كل أسبوع. كما جمعت في مارس 2025. هناك زخم كبير هنا.

لكن هناك فجوة لا يتحدث عنها أحد. أشهر شرح لـ scraping على n8n في dev.to (لـ Lakshay Nasa، والمنشور تحت مؤسسة "Extract by Zyte") وعد بترقيم الصفحات في "Part 2." وبالفعل جاءت Part 2 — وكان حكم الكاتب نفسه: "N8N gives us a default Pagination Mode inside the HTTP Request node under Options, and while it sounds convenient, it didn't behave reliably in my experience for typical web scraping use cases." وانتهى به الأمر إلى تمرير ترقيم الصفحات عبر واجهة برمجية مدفوعة لطرف ثالث. وفي الوقت نفسه، يواصل مستخدمو منتدى n8n وصف "pagination, throttling, login" بأنها النقطة التي يصبح فيها scraping على n8n "معقدًا بسرعة". هذا الدليل مصمم لسد هذه الفجوة.

لماذا يهم Web Scraping عبر n8n فرق المبيعات والعمليات والتجارة الإلكترونية؟

web scraping على n8n ليس مجرد هواية للمطورين. إنه أداة أعمال. تبلغ قيمة حوالي 1–1.3 مليار دولار في 2025، ومن المتوقع أن تصل إلى 2–2.3 مليار دولار بحلول 2030. التسعير الديناميكي وحده تستخدمه نحو ، كما أن تعتمد الآن على البيانات البديلة — وجزء كبير منها يتم استخراجه من الويب. وتذكر McKinsey أن التسعير الديناميكي يحقق للشركات التي تتبناه.

وهنا تظهر القوة الحقيقية لـ n8n: المسألة ليست مجرد الحصول على البيانات، بل ما يحدث بعد ذلك. يتيح لك n8n ربط scraping بإجراءات لاحقة — تحديثات CRM، تنبيهات Slack، تصدير إلى الجداول، تحليل بالذكاء الاصطناعي — داخل سير عمل واحد.

وتؤكد البيانات أن العائد على الاستثمار حقيقي: تخطط لزيادة الاستثمار في الذكاء الاصطناعي في 2025، كما ثبت أن تنمية العملاء المحتملين آليًا يمكن أن خلال تسعة أشهر. إذا كان فريقك لا يزال ينسخ البيانات من المواقع إلى الجداول يدويًا، فأنت تترك المال على الطاولة.

صندوق أدوات Web Scraping في n8n: العُقد الأساسية والحلول المتاحة

قبل أن تبني أي شيء، عليك معرفة ما الموجود في صندوق الأدوات. هذه هي عُقد n8n الأساسية الخاصة بـ web scraping:

• HTTP Request node: تجلب HTML الخام من أي رابط. تعمل مثل متصفح يطلب الصفحة، لكنها تعيد الكود بدلًا من عرضه. تدعم GET/POST والرؤوس والتجميع، ونظريًا الترقيم المدمج للصفحات.
• HTML node (كانت تُسمى سابقًا "HTML Extract"): تحلل HTML باستخدام CSS selectors لسحب بيانات محددة — عناوين، أسعار، روابط، صور، أي شيء تحتاجه.
• Code node: تتيح كتابة مقاطع JavaScript لتنظيف البيانات، وتوحيد الروابط، وإزالة التكرار، ومنطق مخصص.
• Edit Fields (Set) node: تعيد تشكيل الحقول أو إعادة تسميتها للعُقد اللاحقة.
• Split Out node: تفكك المصفوفات إلى عناصر منفصلة لمعالجتها.
• Convert to File node: تصدّر البيانات المنظمة إلى CSV أو JSON وغيرها.
• Loop Over Items node: تتنقل عبر القوائم (وهي حاسمة لترقيم الصفحات — المزيد عن هذا لاحقًا).
• Schedule Trigger: يشغّل سير العمل وفق جدول cron.
• Error Trigger: ينبهك عند فشل أحد مسارات العمل (ضروري للإنتاج).

بالنسبة إلى scraping المتقدم — المواقع التي تعتمد على JavaScript أو الحماية الثقيلة من البوتات — ستحتاج إلى عُقد من المجتمع:

لا توجد عقدة headless browser أصلية في n8n حتى الإصدار v2.15.1. أي scraping يعتمد على JavaScript يحتاج إما إلى عقدة مجتمعية أو واجهة برمجية خارجية.

ملاحظة سريعة عن Thunderbit: إنه امتداد مدعوم بالذكاء الاصطناعي بنيناه نحن. تضغط على "AI Suggest Fields" ثم "Scrape" وتحصل على بيانات منظمة — بلا CSS selectors، بلا إعداد للعقد، بلا صيانة. سأوضح لك أين يناسبك Thunderbit، وأين يكون n8n أفضل، طوال هذا الدليل.

خطوة بخطوة: أنشئ أول سير عمل Web Scraping على n8n

بعد أن تعرفت على صندوق الأدوات، إليك كيفية بناء web scraper يعمل على n8n من الصفر. سأستخدم صفحة قائمة منتجات كمثال — وهو النوع الذي قد تريد فعلاً استخراجه لمراقبة الأسعار أو دراسة المنافسين.

قبل أن تبدأ:

• مستوى الصعوبة: مبتدئ–متوسط
• الوقت المطلوب: حوالي 20–30 دقيقة
• ما ستحتاج إليه: n8n (مستضاف ذاتيًا أو Cloud)، رابط مستهدف، متصفح Chrome (للعثور على CSS selectors)

الخطوة 1: أنشئ Workflow جديدًا وأضف Manual Trigger

افتح n8n، واضغط "New Workflow"، وامنحه اسمًا واضحًا — مثل "Competitor Price Scraper." ثم اسحب عقدة Manual Trigger. (سنحوّلها لاحقًا إلى trigger مجدول.)

سترى عقدة واحدة على اللوحة، جاهزة للتشغيل عندما تضغط "Test Workflow."

الخطوة 2: اجلب الصفحة عبر HTTP Request node

أضف عقدة HTTP Request ووصلها بـ Manual Trigger. اضبط الطريقة على GET وأدخل الرابط المستهدف (مثلًا https://example.com/products).

والآن الخطوة الأهم التي تتجاهلها معظم الشروحات: أضف User-Agent header واقعيًا. افتراضيًا، يرسل n8n قيمة axios/xx كـ user agent — وهي علامة واضحة فورًا على أنه بوت. ضمن "Headers" أضف:

إذا كنت ستستخرج عدة روابط، فعّل Batching (ضمن Options) واضبط وقت انتظار بين 1 و3 ثوانٍ بين الطلبات. هذا يساعد على تجنب حدود المعدل.

شغّل العقدة. يجب أن ترى HTML خامًا في لوحة الإخراج.

الخطوة 3: حلّل البيانات عبر HTML node

صِل عقدة HTML بمخرج HTTP Request. اضبط العملية على Extract HTML Content.

للعثور على CSS selectors المناسبة، افتح الصفحة المستهدفة في Chrome، وانقر بزر الماوس الأيمن على البيانات المطلوبة (مثل عنوان منتج)، ثم اختر "Inspect." في لوحة Elements، انقر بزر الماوس الأيمن على عنصر HTML المظلل واختر "Copy → Copy selector."

اضبط قيم الاستخراج كما يلي:

نفّذ العقدة. يجب أن ترى جدولًا ببيانات منظمة — أسماء المنتجات، الأسعار، والروابط — في المخرجات.

الخطوة 4: نظّف البيانات ووحّدها باستخدام Code node

البيانات الخام المستخرجة تكون فوضوية. الأسعار قد تأتي مع مسافات زائدة، والروابط قد تكون نسبية، والحقول النصية قد تحتوي على أسطر جديدة في النهاية. أضف عقدة Code ووصلها بعقدة HTML.

إليك مقطع JavaScript بسيطًا لتنظيف البيانات:

1return items.map(item => {
2  const d = item.json;
3  return {
4    json: {
5      product_name: (d.product_name || '').trim(),
6      price: parseFloat((d.price || '').replace(/[^0-9.]/g, '')),
7      url: d.url && d.url.startsWith('http') ? d.url : `https://example.com${d.url}`
8    }
9  };
10});

هذه الخطوة أساسية إذا أردت بيانات جاهزة للإنتاج. تجاهلها وستجد جدولك مليئًا بسجلات مثل "$ 29.99\n".

الخطوة 5: صدّر إلى Google Sheets أو Airtable أو CSV

صِل عقدة Google Sheets (أو Airtable، أو Convert to File لـ CSV). صادق باستخدام حساب Google الخاص بك، واختر جدول البيانات والورقة، ثم اربط الحقول الخارجة من Code node مع عناوين الأعمدة.

شغّل سير العمل كاملًا. يجب أن ترى البيانات النظيفة والمنظمة تصل إلى جدولك.

ملاحظة جانبية: إلى Google Sheets وAirtable وNotion وExcel بدون أي إعداد للعقد. إذا لم تكن بحاجة إلى سلسلة workflow كاملة وتريد فقط البيانات، فهذه طريقة مختصرة مفيدة.

الجزء الذي تتخطاه كل شروحات n8n Web Scraping: Workflows كاملة لترقيم الصفحات

ترقيم الصفحات هو الفجوة رقم 1 في محتوى scraping على n8n — وهو أيضًا المصدر الأكبر للإحباط في منتديات مجتمع n8n.

هناك نمطان رئيسيان لترقيم الصفحات:

1. ترقيم بالضغط/الزيادة في الرابط — صفحات مثل ?page=1 و?page=2، إلخ.
2. التمرير اللانهائي — حيث يتم تحميل المحتوى أثناء التمرير للأسفل (مثل Twitter وInstagram أو كثير من كتالوجات المنتجات الحديثة).

ترقيم الصفحات بالضغط في n8n (زيادة الروابط باستخدام Loop nodes)

خيار Pagination المدمج ضمن قائمة Options في HTTP Request يبدو مريحًا. لكن عمليًا، هو غير موثوق. مؤلف أشهر شرح scraping على n8n (Lakshay Nasa) جرّبه وكتب: "it didn't behave reliably in my experience." ويذكر مستخدمو المنتدى أنه ، ، ويفشل في اكتشاف الصفحة الأخيرة.

النهج الموثوق: ابنِ قائمة الروابط صراحةً داخل Code node، ثم كرر عليها باستخدام Loop Over Items.

إليك الطريقة:

1. أضف Code node تنشئ روابط الصفحات:

1const base = 'https://example.com/products';
2const totalPages = 10; // أو اكتشفه ديناميكيًا
3return Array.from({length: totalPages}, (_, i) => ({
4  json: { url: `${base}?page=${i + 1}` }
5}));

2. صِل Loop Over Items node لتكرار القائمة.
3. داخل الحلقة، أضف HTTP Request node (واجعل الرابط {{ $json.url }})، ثم HTML node للتحليل.
4. أضف Wait node (من 1 إلى 3 ثوانٍ وبشكل عشوائي) داخل الحلقة لتجنب حدود 429.
5. بعد الحلقة، اجمع النتائج وصدّرها إلى Google Sheets أو CSV.

السلسلة الكاملة: Code (بناء الروابط) → Loop Over Items → HTTP Request → HTML → Wait → (العودة للحلقة) → Aggregate → Export.

تنبيه مهم: لدى Loop Over Items bug معروف . إذا كنت تقوم بترقيم الصفحات وفي الوقت نفسه بإثراء صفحات فرعية، فاختبر بعناية — فقد لا يتطابق عدد العناصر المكتملة مع عدد العناصر المدخلة.

ترقيم الصفحات بالتمرير اللانهائي: لماذا تتعثر عُقد n8n المدمجة

صفحات التمرير اللانهائي تحمل المحتوى عبر JavaScript أثناء التمرير. عقدة HTTP Request تجلب فقط HTML الأولي — ولا تستطيع تنفيذ JavaScript أو تشغيل أحداث التمرير. أمامك خياران:

• استخدم عقدة headless browser من المجتمع (مثل أو ) لعرض الصفحة ومحاكاة التمرير.
• استخدم scraping API مثل ScrapeNinja أو Firecrawl أو ZenRows مع تفعيل JavaScript rendering.

كلاهما يضيف تعقيدًا كبيرًا. غالبًا ستحتاج إلى 30–60+ دقيقة إعداد لكل موقع، بالإضافة إلى صيانة مستمرة.

كيف يتعامل Thunderbit مع ترقيم الصفحات بدون إعدادات

قد أكون منحازًا، لكن الفارق واضح جدًا:

إذا كنت تستخرج 200 صفحة منتج عبر 10 قوائم مترقمة، فسيأخذك n8n فترة بعد الظهر كاملة. أما Thunderbit فسيستغرق نحو دقيقتين. هذا ليس انتقاصًا من n8n — بل هو ببساطة أداة مختلفة لمهمة مختلفة.

اضبطه وانسَه: خطوط Web Scraping على n8n بتشغيل Cron

الاستخراج لمرة واحدة مفيد، لكن القوة الحقيقية لـ n8n web scraping تكمن في جمع البيانات المتكرر والمؤتمت. والمفاجأة أن شبه لا يوجد شرح scraping على n8n يغطي Schedule Trigger للاستخراج — رغم أنه من أكثر الميزات طلبًا في المجتمع.

بناء خط يومي لمراقبة الأسعار

استبدل Manual Trigger بعقدة Schedule Trigger. يمكنك استخدام واجهة n8n ("Every day at 8:00 AM") أو تعبير cron (0 8 * * *).

سلسلة workflow الكاملة:

1. Schedule Trigger (يوميًا الساعة 8 صباحًا)
2. Code node (إنشاء روابط الصفحات)
3. Loop Over Items → HTTP Request → HTML → Wait (استخراج كل الصفحات)
4. Code node (تنظيف البيانات، توحيد الأسعار)
5. Google Sheets (إضافة صفوف جديدة)
6. IF node (هل انخفض أي سعر دون الحد؟)
7. Slack (إرسال تنبيه إذا نعم)

واجعل معه workflow موازٍ بـ Error Trigger يعمل عند أي فشل ويرسل تنبيهًا إلى Slack. وإلا، عندما تتعطل CSS selectors — وستتعطل — ستكتشف الأمر بعد ثلاثة أسابيع حين يكون التقرير فارغًا.

هناك متطلبان غير واضحين عادةً:

• يجب أن يعمل n8n على مدار 24/7. إذا كان self-host على لابتوب، فلن يعمل عند إغلاق الغطاء. استخدم خادمًا أو Docker أو n8n Cloud.
• بعد كل تعديل على workflow، أوقفه ثم أعد تشغيله. لدى n8n Cloud مشكلة معروفة ، دون أي رسالة خطأ.

بناء خط أسبوعي لاستخراج العملاء المحتملين

نفس النمط، لكن الهدف مختلف: Schedule Trigger (كل اثنين الساعة 9 صباحًا) → HTTP Request (دليل أعمال) → HTML (استخراج الاسم والهاتف والبريد) → Code (إزالة التكرار، تنظيف التنسيق) → إرسال إلى Airtable أو HubSpot.

عبء الصيانة هو التكلفة التي لا يتحدث عنها كثيرون. إذا غيّر موقع الدليل تصميمه، فإن CSS selectors ستتعطل وسيفشل workflow بصمت. تقدر HasData أن من وقت البناء الأولي يجب تخصيصه للصيانة المستمرة سنويًا في أي خط يعتمد على selectors. وعندما تدير نحو 20 موقعًا، يصبح هذا العبء حقيقيًا.

Scheduled Scraper من Thunderbit: البديل بلا كود

يتيح لك Scheduled Scraper في Thunderbit وصف الفترة الزمنية بلغة طبيعية (مثلًا: "every Monday at 9 AM")، ثم إدخال الروابط والضغط على "Schedule." يعمل في السحابة — بلا استضافة، بلا تعبيرات cron، بلا إلغاء تسجيل صامت.

الصف الأخير هو الأهم فعلًا. يقول مستخدمو المنتدى الأمر ببساطة: "most of them are fine until a site changes its layout." نهج Thunderbit القائم على الذكاء الاصطناعي يزيل هذا الألم لأنه لا يعتمد على CSS selectors ثابتة.

عندما يتم حظر n8n Web Scraper الخاص بك: دليل لتشخيص مشاكل الحظر

الحظر هو الإحباط رقم 1 بعد ترقيم الصفحات. والنصيحة التقليدية — "أضف User-Agent header" — لا تفيد كثيرًا، مثل إغلاق باب شبكي أمام إعصار.

بحسب تقرير Imperva 2025 Bad Bot، فإن ، و منها خبيث. وقد ردت شركات مكافحة البوتات (Cloudflare وAkamai وDataDome وHUMAN وPerimeterX) ببصمات TLS، وتحديات JavaScript، وتحليل السلوك. عقدة HTTP Request في n8n، التي تعتمد داخليًا على مكتبة Axios، تنتج بصمة TLS مميزة وسهلة التعرف وليست بصمة متصفح حقيقي. تغيير User-Agent لا يفيد — لأن يكشفك قبل أن تتم قراءة أي header.

شجرة قرار مكافحة الحظر

إليك إطارًا منهجيًا للتشخيص — وليس مجرد "أضف User-Agent":

هل تم حظر الطلب؟

• 403 Forbidden → أضف User-Agent وAccept headers (انظر الخطوة 2 أعلاه) → ما زال الحظر قائمًا؟
  • نعم → أضف تدوير بروكسيات سكنية → ما زال الحظر قائمًا؟
    • نعم → انتقل إلى scraping API (ScrapeNinja أو Firecrawl أو ZenRows) أو عقدة headless browser من المجتمع
    • لا → تابع
  • لا → تابع
• ظهر CAPTCHA → استخدم scraping API مع حل CAPTCHA مدمج (مثل )
• استجابة فارغة (محتوى معروض عبر JavaScript) → استخدم عقدة headless browser من المجتمع أو scraping API مع JavaScript rendering
• تم تقييد المعدل (خطأ 429) → فعّل batching في HTTP Request node، واضبط انتظار 2–5 ثوانٍ بين الدفعات، وخفّض التوازي

مشكلة أخرى مهمّة: لدى n8n bug معروف في حيث لا تستطيع HTTP Request node تمرير HTTPS بشكل صحيح عبر proxy HTTP. تفشل مكتبة Axios أثناء TLS handshake، رغم أن curl في الحاوية نفسها يعمل بشكل طبيعي. إذا كنت تستخدم proxy وتحصل على أخطاء اتصال غامضة، فهذه غالبًا هي السبب.

لماذا يتجاوز Thunderbit معظم مشكلات الحظر

يقدم Thunderbit وضعين للاستخراج:

• Browser Scraping: يعمل داخل متصفح Chrome الحقيقي الخاص بك، ويرث ملفات تعريف الارتباط الخاصة بالجـلسة، وحالة تسجيل الدخول، وبصمة المتصفح. هذا يتجاوز معظم آليات مكافحة البوتات التي تمنع الطلبات الصادرة من الخادم — لأن الطلب هو بالفعل متصفح حقيقي.
• Cloud Scraping: للمواقع العامة، تتولى سحابة Thunderbit التعامل مع الحظر على نطاق واسع — .

إذا كنت تقضي وقتًا في محاربة Cloudflare أكثر من تحليل البيانات، فهذا هو البديل العملي.

رأي صريح: متى يعمل n8n Web Scraping، ومتى تستخدم شيئًا آخر؟

n8n منصة ممتازة. لكنها ليست الأداة المناسبة لكل مهمة scraping، ولا يصرّح أي مقال منافس بذلك بوضوح. المستخدمون يسألون حرفيًا في المنتديات: "how difficult is it to create a web scraper with n8n?" و*"which scraping tool works best with n8n?"*

أين يتفوق n8n Web Scraping

• مسارات عمل متعددة الخطوات تجمع scraping مع معالجة لاحقة — تحديثات CRM، تنبيهات Slack، تحليل بالذكاء الاصطناعي، الكتابة في قواعد البيانات. هذه هي القوة الأساسية لـ n8n.
• الحالات التي يكون فيها scraping خطوة واحدة ضمن سلسلة أتمتة أكبر — scrape → enrich → filter → push to CRM.
• المستخدمون التقنيون الذين يرتاحون مع CSS selectors والمنطق القائم على العقد.
• السيناريوهات التي تتطلب تحويلًا مخصصًا للبيانات بين الاستخراج والتخزين.

أين يصبح n8n Web Scraping متعبًا

• المستخدمون غير التقنيين الذين يحتاجون البيانات بسرعة فقط. إعداد العقد، واكتشاف CSS selectors، ودورة التصحيح كلها معقدة جدًا لمستخدمي الأعمال.
• المواقع ذات الحماية الثقيلة من البوتات. إضافات البروكسي والواجهات البرمجية تزيد التكلفة والتعقيد.
• الصيانة عندما يتغير تصميم الموقع. تتعطل selectors ويفشل workflow بصمت.
• الاستخراج الجماعي عبر أنواع كثيرة من المواقع. كل موقع يحتاج إعداد selectors خاصًا به.
• إثراء الصفحات الفرعية. يتطلب بناء مسارات فرعية منفصلة داخل n8n.

مقارنة جنبًا إلى جنب: n8n مقابل Thunderbit مقابل سكربتات Python

الخلاصة: استخدم n8n عندما يكون scraping جزءًا من سلسلة أتمتة معقدة ومتعددة الخطوات. استخدم Thunderbit عندما تحتاج البيانات بسرعة دون بناء workflows. استخدم Python عندما تحتاج أقصى درجة من التحكم وتملك موارد تطوير. هذه الأدوات ليست متنافسة — بل متكاملة.

أمثلة واقعية على Workflows لـ n8n Web Scraping يمكنك نسخها فعليًا

يواصل المستخدمون في المنتدى السؤال: "Has anyone chained these into multi-step workflows?" إليك ثلاثة workflows محددة — تسلسلات عقد فعلية يمكنك بناؤها اليوم.

Workflow 1: مراقب أسعار منافسي التجارة الإلكترونية

الهدف: تتبع أسعار المنافسين يوميًا والحصول على تنبيه عند انخفاضها.

سلسلة العقد: Schedule Trigger (يوميًا، 8 صباحًا) → Code (إنشاء روابط الصفحات) → Loop Over Items → HTTP Request → HTML (استخراج اسم المنتج، السعر، التوفر) → Wait (2s) → (العودة للحلقة) → Code (تنظيف البيانات، توحيد الأسعار) → Google Sheets (إضافة الصفوف) → IF (هل السعر أقل من الحد؟) → Slack (إرسال تنبيه)

درجة التعقيد: 8–10 عقد، وإعداد يستغرق 30–60 دقيقة لكل موقع منافس.

اختصار Thunderbit: Scheduled Scraper من Thunderbit + يمكن أن يحقق نتائج مشابهة خلال دقائق، مع تصدير مجاني إلى Google Sheets.

Workflow 2: خط توليد العملاء المحتملين للمبيعات

الهدف: استخراج دليل أعمال أسبوعيًا، تنظيف العملاء المحتملين وتصنيفهم، ثم دفعهم إلى CRM.

سلسلة العقد: Schedule Trigger (أسبوعيًا، الاثنين 9 صباحًا) → HTTP Request (صفحة قائمة الدليل) → HTML (استخراج الاسم، الهاتف، البريد الإلكتروني، العنوان) → Code (إزالة التكرار، تنظيف التنسيق) → OpenAI/Gemini node (التصنيف حسب المجال) → HubSpot node (إنشاء جهات اتصال)

ملاحظة: لدى n8n عقدة أصلية لـ — وهي مفيدة لإرسال البيانات إلى CRM. لكن خطوات scraping والتنظيف ما زالت تحتاج إلى عمل يدوي على CSS selectors.

اختصار Thunderbit: يتيح لك المجاني في Thunderbit وPhone Number Extractor سحب معلومات التواصل بنقرة واحدة من دون بناء workflow. كما يمكن لوضع AI labeling تصنيف العملاء أثناء الاستخراج. المستخدمون الذين لا يحتاجون سلسلة الأتمتة الكاملة يمكنهم تجاوز إعداد n8n بالكامل.

Workflow 3: متعقّب القوائم العقارية الجديدة

الهدف: رصد القوائم الجديدة على Zillow أو Realtor.com أسبوعيًا وإرسال بريد تلخيصي.

سلسلة العقد: Schedule Trigger (أسبوعيًا) → HTTP Request (صفحات القوائم) → HTML (استخراج العنوان، السعر، عدد الغرف، الرابط) → Code (تنظيف البيانات) → Google Sheets (إضافة) → Code (مقارنة ببيانات الأسبوع السابق، تحديد القوائم الجديدة) → IF (هل توجد قوائم جديدة؟) → Gmail/SendGrid (إرسال الملخص)

ملاحظة: لدى Thunderbit — بلا CSS selectors. المستخدمون الذين يحتاجون سلسلة الأتمتة الكاملة (scrape → compare → alert) يستفيدون من n8n؛ أما من يحتاج فقط بيانات القوائم فيستفيد أكثر من Thunderbit.

ولمزيد من الإلهام حول workflows، تضم مكتبة مجتمع n8n قوالب لـ ، و، و.

نصائح لإبقاء خطوط n8n Web Scraping تعمل بسلاسة

الإنتاج في scraping هو 20% بناء و80% صيانة.

استخدم batching والتأخير لتجنب حدود المعدل

فعّل batching على HTTP Request node واضبط وقت انتظار من 1 إلى 3 ثوانٍ بين الدفعات. الطلبات المتوازية هي أسرع طريقة لتتعرض لحظر IP. قليل من الصبر هنا يوفر الكثير من الألم لاحقًا.

راقب تنفيذات workflow لتجنّب الفشل الصامت

استخدم تبويب Executions في n8n للتحقق من أي تشغيل فاشل. قد تعود البيانات المستخرجة فارغة بصمت إذا غيّر الموقع تصميمه — فيبدو أن workflow نجح، لكن جدولك ممتلئ بالخانات الفارغة.

أنشئ workflow بـ Error Trigger يعمل عند أي فشل ويرسل تنبيهًا إلى Slack أو البريد. هذا غير قابل للتفاوض في خطوط الإنتاج.

خزّن CSS selectors خارجيًا لتسهيل التحديث

احتفظ بـ CSS selectors في Google Sheet أو متغيرات بيئة n8n حتى تتمكن من تحديثها دون تعديل workflow نفسه. عندما يغيّر الموقع تصميمه، ما عليك إلا تحديث selector في مكان واحد.

اعرف متى تنتقل إلى scraper مدعوم بالذكاء الاصطناعي

إذا وجدت نفسك تعدّل CSS selectors باستمرار، أو تحارب حظر البوتات، أو تمضي وقتًا أكبر في صيانة scrapers من استخدام البيانات نفسها، ففكر في أداة مدعومة بالذكاء الاصطناعي مثل التي تقرأ الموقع من جديد في كل مرة وتتأقلم تلقائيًا. نهج يعمل جيدًا: Thunderbit يتولى طبقة الاستخراج الهشة (الجزء الذي ينكسر كلما حدّث الموقع <div>)، ويصدّر إلى Google Sheets أو Airtable، ثم يتولى n8n الصفوف الجديدة عبر الـ trigger الأصلي لـ Sheets/Airtable لمعالجة orchestration — تحديثات CRM، التنبيهات، المنطق الشرطي، والتوزيع على عدة أنظمة.

الخلاصة: ابنِ خط الأنابيب الذي يناسب فريقك

يكون web scraping عبر n8n قويًا عندما تحتاج إلى أن يكون scraping خطوة واحدة داخل workflow أتمتة أكبر. لكنه يتطلب إعدادًا تقنيًا، وصيانة مستمرة، وصبرًا مع ترقيم الصفحات، وحظر البوتات، وإعدادات الجدولة. غطى هذا الدليل خط الأنابيب كاملًا: أول workflow لك، وترقيم الصفحات (الجزء الذي تتجاهله كل الشروحات)، والجدولة، وتشخيص الحظر، وتقييمًا صريحًا لمكان n8n المناسب، وworkflows واقعية يمكنك نسخها.

وهكذا أفكر في الأمر:

• استخدم n8n عندما يكون scraping جزءًا من سلسلة أتمتة معقدة ومتعددة الخطوات — تحديثات CRM، تنبيهات Slack، إثراء بالذكاء الاصطناعي، توجيه شرطي.
• استخدم عندما تحتاج البيانات بسرعة دون بناء workflows — حيث يتولى الذكاء الاصطناعي اقتراح الحقول، وترقيم الصفحات، والتعامل مع الحظر، والتصدير في ضغطتين.
• استخدم Python عندما تحتاج أقصى تحكم وتملك موارد تطوير.

وبصراحة، أفضل إعداد لدى كثير من الفرق هو الجمع بين الاثنين: Thunderbit للاستخراج، وn8n للتنسيق. وإذا أردت أن ترى كيف يقارن scraping المدعوم بالذكاء الاصطناعي مع workflow الخاص بك في n8n، فإن تتيح لك التجربة على نطاق صغير — كما أن يُثبَّت في ثوانٍ. وللعروض التوضيحية بالفيديو وأفكار workflows، اطلع على .

الأسئلة الشائعة

هل يستطيع n8n استخراج مواقع تعتمد بكثافة على JavaScript؟

ليس عبر HTTP Request node المدمجة وحدها. هذه العقدة تجلب HTML الخام ولا تستطيع تنفيذ JavaScript. للمواقع المعروضة عبر JS، تحتاج إلى عقدة مجتمعية مثل أو تكامل مع scraping API مثل ScrapeNinja أو Firecrawl يقوم بعرض JavaScript على الخادم. Thunderbit يتعامل مع المواقع الثقيلة بـ JS بشكل أصلي في وضعي Browser Scraping وCloud Scraping.

هل web scraping على n8n مجاني؟

نسخة n8n المستضافة ذاتيًا مجانية ومفتوحة المصدر. أما n8n Cloud فكان لديه سابقًا مستوى مجاني، لكنه حتى أبريل 2026 يقدم فقط تجربة لمدة 14 يومًا — وبعدها تبدأ الخطط من 24 دولارًا شهريًا مقابل 2,500 عملية تنفيذ. وقد يتطلب scraping المواقع المحمية أيضًا خدمات بروكسي مدفوعة (5–15 دولارًا/GB للبروكسيات السكنية) أو scraping APIs (من 49 إلى 200+ دولار شهريًا بحسب الحجم).

كيف يقارن n8n web scraping مع Thunderbit؟

n8n أفضل لمسارات الأتمتة متعددة الخطوات حيث يكون scraping جزءًا من workflow أكبر (مثل: scrape → enrich → filter → push to CRM → alert on Slack). Thunderbit أفضل لاستخراج البيانات بسرعة وبدون كود، مع اكتشاف الحقول بالذكاء الاصطناعي، وترقيم صفحات تلقائي، وصيانة شبه معدومة عند تغيّر المواقع. كثير من الفرق تستخدم الاثنين معًا — Thunderbit للاستخراج، وn8n للتنسيق.

هل يمكنني استخراج البيانات من مواقع تتطلب تسجيل دخول باستخدام n8n؟

نعم، لكن ذلك يتطلب إعداد cookies أو رموز الجلسة داخل HTTP Request node، وهو أمر قد يكون صعبًا في الصيانة. أما Browser Scraping في Thunderbit فيرث جلسة Chrome المسجّل فيها دخولك تلقائيًا — فإذا كنت مسجّل الدخول، يستطيع Thunderbit استخراج ما تراه.

ماذا أفعل عندما يتوقف n8n scraper الخاص بي فجأة عن إرجاع البيانات؟

أولًا، راجع تبويب Executions في n8n بحثًا عن الأخطاء. السبب الأكثر شيوعًا هو تغيّر في تصميم الموقع كسر CSS selectors — فيبدو أن workflow نجح لكنه يعيد حقولًا فارغة. تحقق من selectors باستخدام أداة Inspect في Chrome، وحدثها داخل workflow (أو في ورقة selectors الخارجية)، ثم أعد الاختبار. إذا كنت تصطدم بحظر من أنظمة مكافحة البوتات، فاتبع شجرة التشخيص الموجودة في هذا الدليل. وللاستقرار طويل المدى، فكّر في scraper مدعوم بالذكاء الاصطناعي مثل Thunderbit يتكيف تلقائيًا مع تغيّر التخطيطات.

اعرف المزيد