网站更快的被搜索引擎收录?重要的原因就是让搜索蜘蛛更好的抓取和搜索你的网站。我们可以用一些技巧让这个过程对搜索引擎尽可能的简单化,同样的,对站长们也是如此。
由于google掌控者搜索市场的大部分的份额,所以应时时关注和听取它的一些动态。“Google发表了一篇叫做优化蜘蛛爬取和索引的技巧”,是不是该引起我们的注意呢?
文中内容高度强调可以提高你站点爬取的能力的一些技巧,下面是陈列的关于URL的具体的例子。
“互联网是个大世界,时时刻刻都有新的内容被发表,创造,”Google 分析师Susan Moskwa说到。“Google 拥有无限的资源,所以当它面临几乎无限的在线的可利用的资源时,google的蜘蛛只有能力去找寻和爬取一部分的内容,而面对已经爬取了的内容,我们又只能索引一部分。”
“长尾理论来自于对音乐商Rhapsody的每月统计数据的观察。统计表明,该公司和其它任何唱片店一样,都有相同的符合“幂指数”形式的需求曲线--一条由左上陡降至右下的倾斜曲线。左边的短头部分,表示对排行榜前列的曲目都有巨大的需求,右边的长尾部分,表示的是不太流行的曲目。深入挖掘排名在4万以后的歌曲,沃尔玛在这些排名在4万以后的唱片上的销量几乎为0,而在网上,在Rhapsody网上音乐商店,这部分唱片的需求却一直不断。
“Rhapsody的长尾需求一直源源不断。不仅位于排行榜前10万的每个曲目每个月至少会被点播一次,前20万、30万、40万的曲子也是这样。只要Rhapsody在它的曲库中增加了曲子,就会有听众点播这些新曲,尽管每个月只有少数几个人点播了它们,而且还分布在世界上不同的国家。只要符合一个条件,让经营40万首曲子的成本,与经营4万首曲子的成本相差无几,那么把得自4万首曲子以外的利润加总起来,就会白赢一个世界。这个世界就是长尾的世界,它的利润甚至可以超过大热门的世界。
“这就是长尾理论讲的故事。”