robots نص مولد
أدوات المطورrobots نص مولد هو أداة للمطورين مجاني يساعدك على إنجاز المهام الشائعة بسرعة من المتصفح.
الترجمة المدعومة بالذكاء الاصطناعي قيد المراجعة
تُرجمت هذه الصفحة بمساعدة الذكاء الاصطناعي ولم تخضع بعد لمراجعة مهنية. تحقق من المصادر المذكورة قبل اتخاذ قرار مهم.
ما هذه الأداة؟
تجمع صفحة robots نص مولد حقول الإدخال والنتائج والإرشادات المفيدة في مكان واحد لإتمام المهمة ذات الصلة بسهولة. بعد مراجعة النتيجة يمكنك نسخها أو تشغيل الأداة مرة أخرى بقيم مختلفة.
robots.txt = repeated User-agent blocks (Allow/Disallow rules) + Sitemap: URL
طريقة الاستخدام
- 1أدخل القيم أو النص المطلوب.
- 2اضبط الخيارات وفق احتياجك.
- 3اعرض النتيجة فورًا وانسخها عند الحاجة.
مرجع
| Crawler | Operator | Purpose |
|---|---|---|
| GPTBot | OpenAI | AI model training crawl |
| ChatGPT-User | OpenAI | live fetches for ChatGPT users |
| OAI-SearchBot | OpenAI | ChatGPT search index |
| ClaudeBot | Anthropic | AI model training crawl |
| Google-Extended | Gemini training control token | |
| PerplexityBot | Perplexity | AI search index |
| CCBot | Common Crawl | open web archive (reused for AI training) |
| Bytespider | ByteDance | AI training crawl |
| Applebot-Extended | Apple | Apple AI training control token |
المصادر والمعايير
- RFC 9309: Robots Exclusion Protocol - IETF
- Introduction to robots.txt - Google Search Central
- OpenAI crawlers and bots - OpenAI
الأسئلة الشائعة
كيف أستخدم robots نص مولد؟
أدخل البيانات المطلوبة واضبط الخيارات. تعرض الأداة النتيجة فورًا في الصفحة نفسها.
كيف يتم إنشاء النتيجة؟
تُنشأ النتيجة باستخدام المدخلات في الصفحة وقواعد الحساب أو التحويل الموضحة للأداة.