ChatGPT 搜索怎么收录网站?OAI-SearchBot、GPTBot 与 ChatGPT-User 的区别
OpenAI 在官方文档中区分了多个爬虫:OAI-SearchBot 负责 ChatGPT 搜索,GPTBot 与模型训练相关,ChatGPT-User 处理用户发起的访问。本文讲清它们的分工、robots.txt 的推荐写法,以及想在 ChatGPT 搜索中出现需要做什么。
OpenAI 在官方文档中区分了多个爬虫:OAI-SearchBot 负责 ChatGPT 搜索,GPTBot 与模型训练相关,ChatGPT-User 处理用户发起的访问。本文讲清它们的分工、robots.txt 的推荐写法,以及想在 ChatGPT 搜索中出现需要做什么。
Perplexity 的回答以标注来源为特色,网站能否被引用首先取决于它的爬虫能否访问。本文依据 Perplexity 官方爬虫文档,讲清 PerplexityBot 与 Perplexity-User 的区别、robots.txt 与防火墙设置,以及提高被引用机会的内容做法。