當我們的網站上線之后，一定會有一些不想讓百度抓取的頁面、文件，針對這種問題，我們就要使用協議去屏蔽。那么這個協議是什么？究竟怎么寫這個協議呢？一、什么是搜索引擎協議：搜索引擎協議也就是我們常說的robots.txt。這是我們網站和搜索引擎之間的協議。當搜索引擎來到我們網站的時候，會先看一看有沒有這個文件，在進行下一步的抓取。但是需要注意的是，這個協議只是我們單方面的，搜索引擎遵守與否，我們管不了。