http协议,User-Agent域里的参数什么意思?

发布网友发布时间：2022-04-20 05:39

共1个回答

热心网友时间：2022-04-20 07:08

这个是用来标示访问者是谁或者访问者性质(爬虫或者浏览器访问)的东西，你问题里的是浏览器访问的标准的格式
很多爬虫都会有自己的User-Agent，比如百度会是Bai-spider之类的，用来标示自己
当然，有些公司或者用户会传假的User-Agent就是了，这当然是不道德的，但是这种事情嘛，大家都懂的追问爬虫是什么？是专门获取网页内容的东西？是一个程序吗还是啥阿？

追答爬虫是搜索引擎用来抓取网页用的，就是用来获取网页内容的，就是一个自动化的用来访问网页(不只是网页，页面中有链接的元素，比如图片也可以)的工具。百度之所以能搜到那么多东西，与它有强力的爬虫是分不开的。当然，谷歌更厉害些。