在哪里看百度蜘蛛爬过自己的网站,求助怎么查看百度蜘蛛浏览我的网页的痕迹
来源:整理 编辑:网络营销 2025-05-04 19:20:18
本文目录一览
1,求助怎么查看百度蜘蛛浏览我的网页的痕迹
百度蜘蛛baiduspider+(+ 谷歌蜘蛛Mozilla/5.0(compatible;googlebot/2.1;+ 在你的日志文件中查看有没有以上痕迹,有就是访问过了
2,如何得知百度蜘蛛有没有爬过自己的网站
你好!你去站长之家chinaz那个,你申请管理工具里面的IIS日志分析就可以看到蜘蛛的爬行轨迹了去 http://www.cnzz.com注册个账号然后拷贝人家给你的代码,放到你需要查看的页面里,就能看到你网站的整个受访情况了!
3,怎样查看百度蜘蛛是否来过自己的网站
查看百度蜘蛛是否来过自己的网站可以下载网站日志文件,使用记事本打开,然后搜索baiduspider就行了,有这个说明百度蜘蛛来了判断蜘蛛有没有来过自己的网站可以查看iis日志代码。或者联系空间商开通了蜘蛛访问记录也可以。具体查看过程和判断蜘蛛
4,怎样查看百度蜘蛛来过我网站的记录
作为站长都很关心自己的网站被各大收录引擎收录多少,那么百度和谷歌蜘蛛究竟有没有来过呢?如果你是本地服务器,请查看日志文件,如access.log如果你是虚拟主机,登录空间管理页面,看控制面板是否有相关日志.如果没有找到,你可以联系你的服务商.日志格式一般是:220.181.38.198 - - [11/Nov/2007:04:28:29 +0800] "GET / HTTP/1.1" 200 61083 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"这就说明百度蜘蛛来过你的站了,如果你还想知道有没有其它搜索引擎的蜘蛛来过你的站,你可以在日志文件中搜索“spider”这个词,或者搜索蜘蛛的IP,我的就查到sogou也来过我的站,IIS日志与Apache的日志是一样的,都可以查到。补充一点,百度蜘蛛并不完全遵守这个规则,有的时候是匿名抓取.蜘蛛喜欢抓什么?网站建设SEO有哪些技巧?欢迎我们来交流http://xhcit.yo2.cn
5,怎么查看百度蜘蛛有没有来过我的网站
判断蜘蛛有没有来过自己的网站可以查看IIS日志代码。或者联系空间商开通了蜘蛛访问记录也可以。如果你的空间商给你的空间支持查询蜘蛛访问记录的话。可以在ftp找到WebLog的文件夹,具体步骤e799bee5baa6e997aee7ad94e4b893e5b19e31333332633038如下:1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.4.解压后,打开日志文件.Ctrl+F查找baidu.com/search特征字符(这里以百度蜘蛛为例)通过分析蜘蛛来访纪录,可以了解本站的大体情况,而不用再为百度不放出内页或者不收录的问题而苦恼了.蜘蛛来访正常,可以确切的说,搜索引擎对你的站很友好的,坚持更新自己的网站,会有不错的收录的.注:有些共享IP空间可能不支持日志功能.对于独立ip虚拟主机则提供每天的日志下载.而实在没有可以日志功能的空间可以参考使用蜘蛛爬行插件的一些方法进行分析.
6,如何知道百度蜘蛛是否来过自己的网站
通过查看网站日志,可以了解搜索引擎蜘蛛的访问情况。通过FTP访问网站的根目录。可以看到一个log的文件夹,这是存放日志的地方。可以压缩(日志文件一般很大)后通过下载到本地电脑上解压缩后打开日志文件。1、网站刚上线,看搜索引擎蜘蛛的抓取情况;如果网站提交给搜索引擎2天后,发现日志里蜘蛛不少,并都返回200,则说明已经可以正常。只是Google展示的时间比较快,而百度则需要20天左右(经验平均值)展示出来。2、网站异常,对比日志中蜘蛛的行为情况;正常增加时和现在异常时的日志,进行对比分析。如果没有异常,则应该是搜索引擎展示数据库出问题所致。如果蜘蛛爬取量明显减少,是否突然减少很多。如果日志依然,则认为是搜索引擎的展示问题。3、解决网站被封问题时,日志情况。网站被封时,往往日志里有百度蜘蛛,但很少,而且往往只访问robots.txt文件和首页。经过站长检查修改一切不符合搜索引擎的优化行为后,再将自己网站提交给百度,之后的2天日志情况如果一直只是百度蜘蛛很少光临,而且往往只访问robots.txt文件和首页。这样的情况维持1个月,可以考虑放弃该域名。如果蜘蛛明显增加,而且返回200代码居多,则被百度重新收录的希望很大,只是时间问题,需要站长更加努力。百度知道来过就会收录你的网站的,很简单的方法,就是你在百度中搜索你网站的名称或者关键词,看是否有你的网站在百度的搜索页中显示Baiduspider会自动根据服务器的负载能力调节访问密度。在连续访问一段时间后,Baiduspider会暂停一会,以防止增大服务器的访问压力。所以在一般情况下,Baiduspider对您网站的服务器不会造成过大压力。
文章TAG:
在哪里看百度蜘蛛爬过自己的网站 求助怎么查看百度蜘蛛浏览我的网页的痕迹