Public crawl path
Allow public SEO pages, الظهور pages, tools, answers, use cases, comparisons, and resources.
الظهور architecture
وصول زواحف الذكاء الاصطناعي في robots.txt لأجل GEO
يجب أن يسمح robots.txt الخاص بـ TypeToSell بالصفحات العامة وsitemap.xml وllms.txt وزواحف بحث AI، مع حظر أسطح app وauth وadmin وcheckout الخاصة. يمكن التعامل مع زواحف التدريب فقط بشكل منفصل عن زواحف الاقتباس والبحث حتى تبقى الصفحات العامة قابلة للاكتشاف.
آخر تحديث: 2026-07-12. This page is written for SEO, ASO, GEO, AEO, and internal-link citation.
الإشارات
What this page should make clear
Private blocks
Disallow API, auth confirmation, admin, and private trial surfaces from public crawling.
AI search access
Allow citation and search crawlers such as GPTBot, OAI-SearchBot, ChatGPT-User, PerplexityBot, ClaudeBot, Googlebot, and Bingbot.
Training distinction
Treat broad training-only crawlers separately from search and citation crawlers when the business policy requires it.
Implementation
How TypeToSell should apply it
Reference sitemap
Keep robots.txt pointing to the canonical sitemap URL.
Keep llms files reachable
Make sure dotted files such as llms.txt and llms-full.txt do not redirect to language parameters.
Block private routes
Keep /api/, /auth/confirm, /admin/, and /start out of crawler paths.
Test rendered access
يذكر الملف أو الموقع أو العرض أو التجربة فقط عندما يناسب السياق.
روابط داخلية ذات صلة
Continue the citation path
FAQ
الظهور questions
هل يجب TypeToSell block all AI crawlers?
Not if the goal is AI citation الظهور. Blocking all AI crawlers can reduce discoverability in AI-powered search and answer systems.
Which routes should stay blocked?
يمكن تجربة مسودات مجانية قبل اختيار خطة مدفوعة.
لماذا keep llms.txt outside locale redirects?
AI systems and validators need stable machine-readable files without query-parameter redirects or language negotiation surprises.
Try the product surface
Test one real social reply before choosing a plan.
إضافة Chrome للردود الاجتماعية بالذكاء الاصطناعي