告知搜索引擎网站框架的是什么文件

来源：赴品旅游

robots.txt文件。
告知搜索引擎网站框架的是robots.txt文件。robots.txt文件是一种文本文件，通常位于网站的根目录下，用于告诉搜索引擎哪些页面可以被抓取，哪些页面不能被抓取。它是搜索引擎爬虫爬取网站内容前的第一个文件，也是搜索引擎了解网站内容的第一个文件。
所谓搜索引擎，就是根据用户需求与一定算法，运用特定策略从互联网检索出指定信息反馈给用户的一门检索技术。

违法及侵权请联系：TEL:199 1889 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务