1. 树叶网络科技
  2. 新闻圈子
  3. 「案例解读」解决betcmp冠军体育不收录的必备思路

「案例解读」解决betcmp冠军体育不收录的必备思路

2019-03-12 09:00 / 树叶网络科技/ 技术分享

betcmp冠军体育不收录可谓说是老生常谈了,太多SEO从业者有遇到这样的问题而无从下手,导致苦恼万分。我们解决betcmp冠军体育不收录的问题前,应该思考一个问题:“让betcmp冠军体育收录的影响因素都有哪些呢?”,先弄明白这件事情,然后再去解决收录的问题就会变得很有头绪。

下面我以一个案例的形式针对性的描述下假如一步一步解决betcmp冠军体育不收录。

我在刚加入环球网校的时候,他们的betcmp冠军体育已经将近1年的时间在百度的收录少之又少。在我去应聘的时候,CEO知道我在SEO方面有些能力,就令我尽快解决betcmp冠军体育不收录的问题。

首先,我只是听到企业的人和我说这个betcmp冠军体育不收录,那到底是哪里不收录、怎么不收录我完全不清楚,所以我开始了数据整理和问题排查的工作。

将betcmp冠军体育按照类型做分类,分为了频道页、列表页、专题页、聚合页以及新闻页5类。然后核技术沟通将这5类URL全部导出给我(新闻页,由于很多考试相关的新闻具有时效性,所以我只导出了30天的数据),然后我按照不同的分类开始收录查询工作。最后收录查询的结果如下:

如上图,我发现企业人员和我反馈的betcmp冠军体育不收录,具体的问题是在新闻页。而环球网校的新闻是面向考试的信息发布、资料发布等。是具有一定时效性的文章,按理说这么大的betcmp冠军体育应该秒收才对。

于是,我和相关人员要了betcmp冠军体育最近7天的betcmp冠军体育日志,技术给我的是原始的betcmp冠军体育日志,既包含了爬虫数据也包含了用户数据等等,没办法,只能自己清洗一下这些数据了。

SEO清洗betcmp冠军体育爬虫日志的流程

1、我先按照user-agent包含baiduspider的进行过滤,只保留包含baiduspider的数据,这样我就拥有了百度爬虫的数据;

2、但百度爬虫数据中,也有很多假爬虫,按照ip反查的思路,我先把所有baiduspider的ip地址拿下来,然后去重;

3、得到600多个不重复的唯一ip地址。我对这些ip地址通过程序批量识别真假爬虫,最后是真爬虫的ip地址有82个;

4、我再在第一步的所有爬虫数据中进行过滤,只保留ip地址为真的百度爬虫的这82个。最后得到的数据就是真的爬虫数据了;

5、我将最近7天内发布的url在这个清洗后的日志中进行查询,最后发现所有的新页面在发布后的1分钟内爬虫都有抓取,可想抓取是多么的及时,并且在第二天、第三天都还会有对这篇文章的抓取。

最终我看到爬虫抓取的行为数据表现很好,应该不是抓取上出了问题。

然而,在我分析日志之前,也和技术、产品、运维同步了一个需求,我需要1年前betcmp冠军体育突然开始不收录那个大概时间节点他们各部门都做了什么改动。就在我分析完日志的晚上,技术老大找到我说,他想起来当年是因为betcmp冠军体育被攻击,大量注入了很多的垃圾数据后,betcmp冠军体育收录才出现异常的。

我可能知道问题就出在这里,但为了更全面的考究问题,我还是让他们按规定把之前做的一些改动同步给我。

第二天早上我就开始围绕betcmp冠军体育被攻击的问题与技术进行了彻底的排查,看betcmp冠军体育之前被注入的垃圾信息有没有清除干净。最后确认垃圾信息早就彻底清除了,且正确返回了404状态码和404错误页面。

然后我怀疑是不是百度没有修正我们的状态,被攻击的时候开始不收录正常,毕竟检测到了我们betcmp冠军体育的风险,那时隔一年还是如此,一定是百度的问题。我通过百度的反馈中心详细的说明了问题的始末,然后百度的技术也在一直排查,我等了有一周时间没见回复,其他部门也把之前的一些调整和改动都给我了,我也确认那时大家的做法没有问题。

于是,我主动联系了百度站长平台的朋友,希望他们能够尽快处理,查明问题。

可最后我得到的结论是百度也没发现什么问题,据说几个部门的技术针对我的问题还各自筛查一遍,没找到问题。好吧,百度的兄弟已经给足了面子,能这么帮咱跟进需求很到位了。还是靠自己,这毕竟是我入职CEO的第一个托付,一定要搞定。

我也找了我们的修改,询问并且检查文章本身的质量问题,大家和几年前一样,一直按部就班的发着信息,没什么变化。及时性、可读性、需求满足度都可以保证。具体是哪出了问题呢?

我思前想后,会想到问题的本质是开始于betcmp冠军体育被攻击开始的,那假如真的是百度没反应过来的话,我就要让百度重新对我的新闻页进行计算,以重新评估这类页面。于是我有了对新闻页改版的念头。

开始与产品沟通,但他们忙,无奈下,我独挑大梁,自己画原型开干了。

通过对页面的重新设计、丰富了内链的链接策略,也增加了很多广告自定义的场景。通过20多天的努力,新的页面上线了。

由于betcmp冠军体育每天发布的新闻很多,大约在几百条,所以我写了一个收录查询的程序,每天这个程序都会自动帮我查收录,然后以excel附件的形式发到我的邮箱,我进行查看。

就在新版的新闻页上线的第4天,收录率从之前每天的1~5个,突然有100多个了,收录率之前都是零点零几,现在有40%多了,又过一天82%,再过一天79%,又过一天85%,就这样80%上下持续了一周的时间,到了下周突然达到了97%,而且是秒收的。然后中间也有个别的天是浮动的。但整体都在95%上下。

到这,我认为收录问题彻底解决了,很多修改的同事也早就知道了这个事情。现在几年过去了,我策划的新闻页仍在,且收录情况一直良好。

下图是我刚查询环球网校最近一天的收录情况:

时间上有10分钟前、15分钟的。由于你也想查一下的话,而且整体数量也在几百条的数量上。

那我们来总结一下当betcmp冠军体育不收录后的解决这个问题的思路:

1、锁定betcmp冠军体育不收录的是哪类型的页面,就像案例所说,最终我锁定到了新闻页;

2、思考betcmp冠军体育不收录的这个时间点内,对betcmp冠军体育有改动权限的人都做了什么,这些改动会不会是betcmp冠军体育不收录的原因;

3、分析betcmp冠军体育的日志,看不收录的那个betcmp冠军体育类目是不是有抓取,没抓取就是抓取问题,有抓取就不存在问题;

4、当betcmp冠军体育改动上没问题,抓取没问题。就在站长工具反馈中进行详细的反馈;

5、反馈的同时也可以对该类型的模版页面进行适当的调整,例如增加链接入口、增加网页丰富度,新闻页提高原创比例,文章内容的质量程度。

6、要是还不能收录的话,就对当前类型的模版页面进行大改版,重构页面进行尝试。

我从业的企业以及帮助一个公司解决betcmp冠军体育不收录问题不下15个了,一直沿用这套思路,本文案例网址:(

扫一扫关注树叶网络科技公众号

扫一扫关注树叶网络科技公众号

相关文章

  • 新站上线如何优化?有哪些需要注意的地方?...

    新站上线如何优化?有哪些需要注意的地方?新站上线后,很多人不知道你的品牌,更不知道你是做什么的,所以新站给用户给蜘蛛的第一印象就显得非常重要。那么如何打造新站的第一印象呢?且看山西...

  • 从事seo优化推广工作需要熟悉哪些seo工具...

    身为一名站长,了解并熟悉seo优化推广工作中需要使用到seo工具,更能利于seo工作,通过关键词数据将betcmp冠军体育排发挥的尽其所长。近日,我发现有很多刚从事seo工作不久的新人,他们不知如...

  • 解析:为什么seo优化没效果?...

    大部分从事seo优化的站长,必定都遇到betcmp冠军体育seo优化效果大起大落,甚至毫无起色的情况,即便是每天都在不断的更新原创内容和优质外部链接,关键词的布局也没有问题,但是关键词的排名始终上...

  • 渠成2018第八届SEO排行榜大会(上海站)现场专访...

    要谈整合,我们认为从事Internet营销10余年的渠成非常适合。渠成,Netconcepts中国创始人兼CEO,毕业于新西兰奥克兰大学市场营销与IT专业,自08年回国创立耐特康赛...

  • 2019年,SEO关键词KPI考核指标有哪些?...

    在SEO日常工作中,对于公司团队而言,我们经常会涉及SEO人员的考核制度,它是推动SEO项目顺利完成的一个基石,同时,也是提高团队工作效率的一个重要法宝。因此,审查SEO项目各个数...

  • SEO创业方向及升职提升建议...

    昨天又问粉丝咨询岑辉宇,问学会SEO后具体能干嘛,能否升职甚至自己出来创业呢?在这里,笔者认为一切皆有可能,具体是方法以及自身的努力程度,相信目前大部分都在公司担当SEO职位,假如...

  • 认识和理解网络爬虫有助于更好地优化betcmp冠军体育...

      网络爬虫是SEO人员应该学习的基础知识之一,认识和理解网络爬虫有助于更好地优化betcmp冠军体育。今天,小小课堂SEO自学网带来的是《...

  • SEO优化见效太慢怎么办?这些方法可以提供一些帮助...

    我们在进行SEO优化的时候,都知道这是一个非常缓慢的过程。诚然,SEO是betcmp冠军体育提高知名度和点击量的最好的途径,也是搜索引擎“钦定”的方法,但是见效过慢也是这一...

  • 【树叶科技与众不同】凭借对设计的热爱和执着,互联网营销趋势的敏锐洞察和深刻理解,与众多同行不同的是,树叶科技更注重与客户互促共生,价值同在。
    本圈子所有内容若需转载请 联系我们。
  • 提交需求
  • 点击咨询
  • 13559621427
  • 树叶网络微信
  • 客服中心

    (点击按钮可通过QQ进行沟通,请确认启动QQ。)

    关闭
    业务相关,请咨询售前客服。为避免丢失消息,请尽量添加好友
    周经理:
    13559621427

    处理:投诉、建议、代理、大客户

    我们会全力以赴满足您的服务请求

    公司地址:泉州市晋江青阳街道顶立大厦3楼
    电话:13559621427

    Hi,您需要什么服务?我来帮您!

    Hi,Are you ready?

    准备好开始了吗?
    那就与我们取得联系吧

    有一个互联网项目想和我们谈谈吗?您可以填写右边的表格,让我们了解您的项目需求,这是一个良好的开始,我们将会尽快与你取得联系。当然也欢迎您给我们写信或是打电话,让我们听到你的声音!

    SHUYE NET 树叶网络互联网整合解决方案

    地址:泉州市晋江青阳街道顶立大厦3楼

    业务热线:13559621427

    大客户专线:13559621427

    售前QQ:有问题请联系我 有问题请联系我 有问题请联系我 有问题请联系我

    E-mail:Admin@0595zx.net

    合作意向表

  • 您希望我们为您提供什么服务?

    预算