# 机场观察 Robots.txt # 自动生成于 2026-11-07 # 站点: https://www.jichangwatch.com # ── 通用规则(允许所有机器人抓取所有内容) ────────────────────── User-agent: * Allow: / Disallow: # ── Google 搜索机器人 ─────────────────────────────────────────── User-agent: Googlebot Allow: / Crawl-delay: 1 User-agent: Googlebot-Image Allow: / User-agent: Googlebot-Video Allow: / User-agent: AdsBot-Google Allow: / # ── Bing / Microsoft 搜索机器人 ───────────────────────────────── User-agent: Bingbot Allow: / Crawl-delay: 1 User-agent: BingPreview Allow: / User-agent: MicrosoftPreview Allow: / # ── OpenAI / ChatGPT 机器人 ───────────────────────────────────── User-agent: GPTBot Allow: / User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / # ── Perplexity AI 机器人 ───────────────────────────────────────── User-agent: PerplexityBot Allow: / # ── Anthropic Claude 机器人 ───────────────────────────────────── User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / # ── Google Gemini / AI 机器人 ─────────────────────────────────── User-agent: Google-Extended Allow: / User-agent: Gemini-AI Allow: / # ── Meta AI 机器人 ─────────────────────────────────────────────── User-agent: FacebookBot Allow: / User-agent: Meta-ExternalAgent Allow: / # ── Apple 搜索机器人 ───────────────────────────────────────────── User-agent: Applebot Allow: / User-agent: Applebot-Extended Allow: / # ── 百度搜索机器人 ─────────────────────────────────────────────── User-agent: Baiduspider Allow: / Crawl-delay: 2 # ── 其他主流 AI 抓取机器人 ────────────────────────────────────── User-agent: YouBot Allow: / User-agent: CCBot Allow: / User-agent: cohere-ai Allow: / User-agent: Diffbot Allow: / User-agent: Amazonbot Allow: / User-agent: anthropic-ai Allow: / # ── Sitemap 位置声明 ────────────────────────────────────────────── Sitemap: https://www.jichangwatch.com/sitemap-index.xml # ── llms.txt AI 知识图谱索引 ───────────────────────────────────── # AI 引擎请参考 https://www.jichangwatch.com/llms.txt 获取结构化内容摘要