网站带有index.php，影响网站收录

打开网站首页，直接跳转至带有index.php，百度收录了所有带有index.php后缀页面

通过爬虫模拟，首页.com后缀域名抓不到任何东西，但是带有index.php后缀文件却能全部抓取

百度收录了首页的.com域名地址，但是title、description却抓取不到

因服务器与网站管理是分属不同部门，解决方法是什么样的？昨日已通知服务器部门，把index.html提升最优先，不知道有没有作用这个问题是需要网站后台统一调整网址，还是需要服务器设置？
望各位大神帮忙解决，万分感谢！

举报该问题

其他回答

第1个回答 2015-12-09

这个要查清楚是什么地方使得url会自动跳转，只要解决自动跳转问题就不会出现这问题了
自动跳转跟index.html的优先级没有关系
暂时想到的可以有以下几种情况：
1、url重写
2、程序判断追问

那这个就是需要网站后台修改了？另外我是中途接手这个网站，网站已经收录了六百多个页面，全部带有index.php，如果我一次性全部改回不带index.php，会不会影响很大？

追答

收录方面倒是不怕，可以写一个301，把所有带index.php的都转到不带这个页面的url上去
主要还是排查出跳转的原因

追问

那是因为跳转，但是跳转方式不对，导致蜘蛛爬行不到.com上面么？怎么.com上，根本就抓不到内容？

追答

爬虫本身也是一个模拟人为访问
你去访问时候也发现了，打开域名后是直接跳转到index.php了，所以域名本身下面不会显示任何信息，只有跳转到index.php后才能显示
可以先看看网站根目录下是不是有一个“.htaccess”，有的话可以打开看看里面有没有涉及到index.php的重写

追问

公司网站是外包服务，和那边沟通说是可以改成.com，但是公司网站英文页面是网站的子域名，修改成.com会影响应英文页面的跳转，所以不能修改。
还有.com是没有内容的，做了跳转爬虫是无法爬行到index.php么？我怎么不这么认为，是不是加上某些代码可以实现让爬虫爬至index.php呢？
大神如果不介意可以加我么？1656508742，这个问题我很想了解彻底一些，非常感谢！

追答

已经加你qq了，通过下

本回答被提问者采纳

相似回答

为什么百度收录我的网站链接带index.php答：这个跟你服务器或使用的框架有关系的，不过你可以使用robots.txt文件来限制搜索引擎来限制收录的。

...收录的后缀带index.html的。也收录了index.php的了为什么了不带后...答：就目前来看和文件没有任何关系。首先你的网站根本就没有被度娘收录，可能有以下几种情况新做的网站，访问量小，还没被自动收录，就需要你截图里面的，“提交网址”让度主动收录，一般一到两周会进行收录。该域名以前做过违反度娘规则的事情，被屏蔽了，如果是这样，你的域名就废了。趁早换一个吧用...

影响网站收录的因素有哪些?答：租用服务器通常不稳定，会导致网站或网页在打开的时候出现比较缓慢甚至完全打不开的情况，这种情况不仅会降低用户体验，还会导致搜索引擎无法抓取到网站中的页面信息和内容信息，所以会使网站在用户以及搜索引擎心目中的印象大打折扣，甚至还会面临降权的风险。4、选择好域名域名也是影响新网站收录快慢的因素之...

.../index.php 怎么只让他收录域名不带有index.php或者index.html_百 ...答：在主机控制面板首页文档设置里面吧index.php 设置顺序为第一其次index.html 和index.htm 就可以了。主机控制面板找服务器提供商要。

如何避免网站收录带index.html的首页导致权重分散答：详细检查下全站，凡是出现首页链接的地方都直接使用主域名，所有外部链接也都使用主域名，这样一来站内站外都不会出现/index.html,这就最大程度上避免了/index.html被收录。不过由于主域名实际上就是 /index.html页面，搜索引擎还是有检索和收录/index.html的可能。二、用robots屏蔽默认首页在robots....