网站不收录成为SEO主要问题,解析搜索引擎不收

阅读  ·  发布日期 2022-04-10 09:21  ·  admin

一般来说,阻止搜索引擎收录也可能成为一个SEO问题,尽量让搜索引擎抓取和索引更多内容是SEO们经常头疼的一个问题,没有收录、索引就无从谈排名。尤其对达到一定规模的网站来说,使上海seo的网站充分收录是个颇令人费神的SEO技术,当页面达到比如说几十万,无论网站架构怎么设计、多么优化,收录都是不可能的,只能尽量提高收录率。  

但有时候怎么阻止搜索引擎收录也可能成为一个问题,网站不收录近几年越来越成为SEO问题。需要阻止收录的情况如保密信息、复制内容、广告链接等。过去常用的阻止收录方法包括密码保护、把内容放在表格后面、使用JS/Ajax、使用Flash等。  

使用Flash 

Google几年前就开始尝试抓取Flash内容了,简单文字性内容已经能抓取。Flash里面的链接也能被跟踪。  

表格  

Google蜘蛛也能填表,也能抓取POST请求页面。这个早就能从日志中看到。  

JS/Ajax 

使用JS链接一直以来被当作不搜索引擎友好的方法,因此可以阻止蜘蛛爬行,但两三年前我就看到JS链接不能阻止Google蜘蛛抓取,不仅JS中出现的URL会被爬,简单的JS还能被执行找到更多URL。  

上图为:阻止搜索引擎收录的原因

前几天有人发现很多网站优化使用的Facebook评论插件里的评论被爬、被收录,插件本身是个AJAX。这是个好消息。我的一个实验电子商务网站产品评论功能就因为这个费了不少心思,用Facebookcomments插件好处大大的,具体什么好处以后有时间再说,的问题就是评论是AJAX实现的,不能被抓取,而产品评论被收录是目的之一(产生原创内容)。我当时想了半天也没有解决方法,只好先傻傻地既放上Facebookcomments插件又打开购物车本身的评论功能。现在好了,Facebookcomments里的评论能被收录,就不用两套评论功能了。  

Robots文件  

目前确保内容不被收录的方法是robots文件禁止。但也有个坏处,会流失权重,虽然内容是不能收录了,但页面成了只接受链接权重、不流出权重的无底洞。  

Nofollow  

Nofollow并不能保证不被收录。就算自己网站所有指向页面的链接都加了NF,也不能保证别人高等网站建设不给这个页面弄个链接,搜索引擎还是能发现这个页面。  

MetaNoindex+Follow  

为防止收录又能传递权重,可以在页面上使用metanoindex和metafollow,这样页面不收录,但能流出权重。确实如此,也是个比较好的方法。也有一个问题,还是会浪费蜘蛛爬行时间。哪位读者有能防止收录、又没有权重流失、又不浪费爬行时间的方法,请留言,对SEO界功德无量。SEO(Search Engine Optimization):汉译为搜索引擎优化。是一种方式:利用搜索引擎的规则提高网站在有关搜索引擎内的自然排名。目的是让其在行业内占据领先地位,获得品牌收益。很大程度上是网站经营者的一种商业行为,将自己或自己公司的排名前移。搜索引擎优化,又称为SEO,即Search Engine Optimization,它是一种通过分析搜索引擎的排名规律,了解各种搜索引擎怎样进行搜索、怎样抓取互联网页面、怎样确定特定关键词的搜索结果排名的技术。搜索引擎采用易于被搜索引用的手段,对网站进行有针对性的优化,提高网站在搜索引擎中的自然排名,吸引更多的用户访问网站,提高网站的访问量,提高网站的销售能力和宣传能力,从而提升网站的品牌效应。网站搜索引擎优化任务主要是认识与了解其它搜索引擎怎样紧抓网页、怎样索引、怎样确定搜索关键词等相关技术后,以此优化本网页内容,确保其能够与用户浏览习惯相符合,并且在不影响网民体验前提下使其搜索引擎排名得以提升,进而使该网站访问量得以提升,最终提高本网站宣传能力或者销售能力的一种现代技术。基于搜索引擎优化处理,其实就是为让搜索引擎更易接受本网站,搜索引擎往往会比对不同网站的内容,再通过浏览器把内容以最完整、直接及最快的速度提供给网络用户。网站优化是指通过对网站功能、网站结构、网页布局、网站内容等要素的合理设计,使得网站内容和功能表现形式达到对用户友好并易于宣传推广的最佳效果,充分发挥网站的网络营销价值,是一项系统性和全局性的工作,包括对用户的优化、对搜索引擎的优化、对运营维护的优化。网站优化已经成为网络营销经营策略的必然要求。

网站优化可以从狭义和广义两个方面来说明。
(1)狭义的网站优化,即搜索引擎优化,也就是让网站设计得适合搜索引擎检索,满足搜索引擎排名的指标,从而在搜索引擎检索中获得靠前的排名,增强搜索引擎营销的效果。
网站优化的最终结果是要把网站的排名优化,而首先要做的是网站的内部优化,分析网页相关性。
(2)广义的网站优化所考虑的因素不仅仅是搜索引擎,也包括充分满足用户的需求特征、清晰的网站导航、完善的在线帮助等,在此基础上使得网站功能和信息发挥出最佳的效果,也就是以企业网站为基础,与网络服务商(如搜索引擎等)、合作伙伴、顾客、供应商、销售商等网络营销环境中各方面因素建立良好的关系。
网站优化是企业进军互联网必然的选择。通过对企业的网站进行网站优化(搜索引擎优化),使企业网站对搜索引擎更加友好,提高企业网站在搜索引擎中的排名,增强企业的宣传推广效果。搜索引擎优化,是影响客户网站在搜索引擎排名的最主要的因素。由于各个搜索引擎考虑的侧重点不同,所以在不同的搜索引擎上搜索出来的结果也是不同的。
从易用性来说,网站优化的原因有:最早的网站可能存在每当主流浏览器升级时,刚刚建立的网站就有可能过时的问题,这就需要升级或重新建造一遍网站;为了使网站兼容Netscape和IE,网站不得不为这两种浏览器提供不同的代码;每当新的网络技术和交互设备出现后,也需要制作新版本来支持这种新技术或设备,如支持手机上网的WAP技术;网站代码臃肿浪费了大量带宽。经过优化的网站文件下载与页面显示速度更快;内容能够被更多的用户所在地访问;当浏览器版本更新,或者出现新的网络交互设备时,确保所有应用能够继续正确执行。
从可维护性和搜索引擎优化的角度来说,网站优化的原因有:简洁的代码,大大降低了带宽的要求,加快了页面加载速度,使得网站更容易维护;有利于搜索引擎抓取,使得网站对于搜索引擎更加友好,有利于提高网站的排名等。
对于网站设计和开发人员来说,网站优化就是使用标准;对于用户来说,网站优化就是最佳体验。
网站优化