✅ 一句话理解robots.txt:告诉爬虫能不能抓取页面(准入权限) sitemap.xml:告诉搜索引擎网站有哪些 URL(全部网址清单)llms.txt:告诉 AI 大模型,网站里哪些内容最重要、优先…...