标签：seo

搜索引擎是SEO最常用到的工具，也是程序员最得力的助手。用好搜索引擎是每个程序员的必修课，这里介绍一些常用的搜索引擎高级搜索语法指令。 1、site: site:是SEO最熟悉的高级搜索指令（例如：site:www.sujianbao.com），用来搜索...

robots协议 Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（Robots Exclusion Protocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。 robots.txt 1. 什么是robots.txt...