# Only the public pages may be indexed — everything behind the sign-in wall is # closed anyway, but saying so keeps it out of the crawl budget. User-agent: * Disallow: /dashboard Disallow: /chat/ Disallow: /chats Disallow: /agents Disallow: /members Disallow: /news Disallow: /research Disallow: /settings Disallow: /admin Disallow: /onboarding Disallow: /organisationen Disallow: /invite/ Disallow: /login Disallow: /register Disallow: /verify Disallow: /api/ # KI-Assistenten sind ausdrücklich willkommen. Sie fallen zwar schon unter `*`, # aber die meisten werten zuerst den Block mit ihrem eigenen Namen aus — und ohne # einen solchen wird ein Angebot in Antwortmaschinen oft gar nicht erst zitiert. # Je Anbieter: Trainings-Crawler, Suchindex und der Live-Abruf während eines Chats. User-agent: GPTBot User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: PerplexityBot User-agent: Perplexity-User User-agent: ClaudeBot User-agent: Claude-SearchBot User-agent: Claude-User User-agent: Google-Extended User-agent: Applebot-Extended User-agent: meta-externalagent User-agent: Amazonbot User-agent: DuckAssistBot User-agent: MistralAI-User User-agent: cohere-ai User-agent: YouBot User-agent: CCBot Allow: / Disallow: /dashboard Disallow: /chat/ Disallow: /chats Disallow: /agents Disallow: /members Disallow: /news Disallow: /research Disallow: /settings Disallow: /admin Disallow: /onboarding Disallow: /organisationen Disallow: /invite/ Disallow: /login Disallow: /register Disallow: /verify Disallow: /api/ Sitemap: https://vryne.com/sitemap.xml