怎样限制蜘蛛,让它不爬页面上我规定的链接

发布网友发布时间：2022-04-29 11:11

共2个回答

热心网友时间：2022-06-26 17:46

用nofollow 就可以Nofollow的写法有以下两种1.在meta中定义，如果在meta中定义Nofollow的话，则搜索引擎不会跟踪该页面的所有链接。语法为：表示禁止抓取本页，同时禁止跟踪本页中的链接还有其他的写法： a).index,follow：允许抓取本页，允许跟踪链接。 b).index,nofollow：允许抓取本页，但禁止跟踪链接。 c).noindex,follow：禁止抓取本页，但允许跟踪链接。 d).noindex,nofllow：禁止抓取本页，同时禁止跟踪本页中的链接。2.在链接中定义nofollow，写法为：链接帮手网如果这样写的话，搜索引擎遇到这个外链的时候，则不会往下跟踪下去。所以，对于nofollow的链接方式，google是不会传递PR的，对于nofollow的链接方式，对于站长来说没有任何意义，所以大家在交换友情链接的时候，一定要注意对方是否以nofollow的方式链接你的站。查看原帖>>

热心网友时间：2022-06-26 17:46

这个好像需要后台那边设置，在根目录下设置一个拒绝指令还是文件夹什么的把不想被抓去的链接放进去

啊，太久了记不清了