在国外网站上看到的一个有意思的图,特贴出来分享
这张图形象的说明了搜索引擎蜘蛛在抓取网页时,会遇到的陷阱,不友好的因素对蜘蛛的影响。
1,Orphan Pages;Spider是根据顺着链接来抓取网页,没有链接的网页,自然使蜘蛛抓取困难。
2,Unfriendly SEO-CMS System;CMS如过不友好,js、ajax、frame结构,不利于分别设置SEO标题等等元素也会造成影响。
3,Bad server Configuration;服务器不能访问,DNS故障,程序错误,这些对蜘蛛来说是致命的陷阱。
4,Cloaking;伪装,隐蔽,对搜索引擎蜘蛛显示出与普通阅览者不同内容的网页,你会让蜘蛛很生气,后果很严重。
5,Session Based Coding;URL根据访问者的cookie随机变换、html代码中大量无意义字符比如空格字符,会让蜘蛛非常的纠结。
6,No error Handing:没有处理错误提示,蜘蛛走错路了,应该争取引导,别让他进入死胡同。
QQ群,网络营销学院88634302 ,欢迎加入,一起分析网络营销的知识。
本篇文章来源于彭愿网络营销顾问,原文链接:http://www.peng-yuan.com/post/109.html
感谢 china028 的投稿