早教吧作业答案频道 -->其他-->
非常郑重的请教大家一个问题请问怎么样知道蜘蛛有没有来网站啊，我看到别人都说查这可以看出来查那可以看出来。可是我就是看不出来，急啊！！！！！
题目详情
非常郑重的请教大家一个问题请问怎么样知道蜘蛛有没有来网站啊，我看到别人都说查这可以看出来查那可以看出来。可是我就是看不出来，急啊！！！！！
▼优质解答
答案和解析
每个网络蜘蛛都有自己的名字，在抓取网页的时候，都会向网站标明自己的身份。网络蜘蛛在抓取网页的时候会发送一个请求，这个请求中就有一个字段为User－agent，用于标识此网络蜘蛛的身份。例如Google网络蜘蛛的标识为GoogleBot，Baidu网络蜘蛛的标识为BaiDuSpider，Yahoo网络蜘蛛的标识为Inktomi Slurp。如果在网站上有访问日志记录，网站管理员就能知道，哪些搜索引擎的网络蜘蛛过来过，什么时候过来的，以及读了多少数据等等。 你试试下 希望能帮到 你
看了 非常郑重的请教大家一个问题请...的网友还看了以下：
自卑的人用放大镜看别人的优点用显微镜看自己的缺点?乐观的对待别人,看到别人的优点大过缺点,而发现自 2020-05-23 …
谁知道“言亡虑绝，事过无痕”的出处？在《论语别裁》中看到这个句子，谁知道出处？ 2020-06-25 …
XRD图普 除了对比标准图谱,还可以分析什么?已知样本是 “氧化铜”.XRD 和标准图对比相似.可 2020-06-27 …
当别人从平面镜中看到你的眼睛时，你从平面镜中是否也看到了别人的眼睛？试一试看，能否做到你看到了别人 2020-07-05 …
假设：有一个人,他有一种奇怪的色盲症.他看到的两种颜色和别人不一样,他把蓝色看成绿色,把绿色看成蓝 2020-07-12 …
蓝绿色盲的无解问题假设：有一个人，他有一种奇怪的色盲症。他看到的两种颜色和别人不一样，他把蓝色看成 2020-07-12 …
假设：有一个人，他有一种奇怪的色盲症。他看到的两种颜色和别人不一样，他把蓝色看成绿色，把绿色看成蓝 2020-07-12 …
蓝绿色盲的无解问题假设：有一个人，他有一种奇怪的色盲症。他看到的两种颜色和别人不一样，他把蓝色看成绿 2020-11-25 …
12个硬币的解释谁能看看有没有问题把硬币标上序号分别为123456789101112把硬币分为4份分 2020-12-05 …
《背影》第六自然段“我知道……我的眼泪又来了”“怕他看见,也怕别人看见”和“他先将橘子散放在地上.. 2020-12-25 …