url获取失败原因（URL网址规范化产生的原因及解决办法）
url获取失败原因（URL网址规范化产生的原因及解决办法）6、部分站点有推荐注册功能，一般网址后面带有用户识别码，每一个用户的推荐链接都不同，但打开的是同一个页面。5、加密网址共存，如http://www.fenxiangseo.com和https://www.fenxiangseo.com是两个不同的网址;2、网站首页http://www.fenxiangseo.com和http://fenxiangseo.com未进行任何处理。3、网站设置了伪静态之后，动态页面静态页面共存；4、网站首页或者目录后面带与不带"/"(如http://www.fenxiangseo.com和http://www.fenxiangseo.com/是另个不同的网址);
一、URL网址规范化的定义
URL网址规范化指的是网站因为种种原因，同一个页面可能会出现多个URL，搜索引擎挑选的URL有可能不是最合适的URL，我们需要通过网站设置，使搜索引擎更容易挑选出最合适、所谓的规范的URL。
二、页面为什么会出现不同网址
1、因为网站程序的原因，同一个页面可以通过几个不同的URL访问；
2、网站首页http://www.fenxiangseo.com和http://fenxiangseo.com未进行任何处理。
3、网站设置了伪静态之后，动态页面静态页面共存；
4、网站首页或者目录后面带与不带"/"(如http://www.fenxiangseo.com和http://www.fenxiangseo.com/是另个不同的网址);
5、加密网址共存，如http://www.fenxiangseo.com和https://www.fenxiangseo.com是两个不同的网址;
6、部分站点有推荐注册功能，一般网址后面带有用户识别码，每一个用户的推荐链接都不同，但打开的是同一个页面。
三、网址未规范的严重性
1、两个不同的网址返回同一个页面，页面相似度过高，搜索引擎对站点友好度降低；
2、分散页面权重，不利于关键词排名；
3、搜索引擎判断的规范网址可能不是站长希望的那个网址；
4、如果网站规范化问题太严重，可能会影响网站的收录。
四、如何解决网址规范化问题
1、确保网站程序只产生规范化网址；
2、网站设置伪静态之后，将原先的动态页面使用robots.txt禁止搜索引擎抓取；
3、网站首页一般解析到两个不同的网址，由于用户习惯，我们需要将不带WWW的域名通过301设置自动跳转到带WWW的网址；
4、提交给搜索引擎的网站地图中的网址全部使用规范后的网址；
5、网站域名设置了https加密，所有域名需做301跳转到https加密网址；
6、站长自己操作外链的时候注意网址规范化，如网站首页是https://www.fenxiangseo.com/ 那么所有指向首页的链接均为https://www.fenxiangseo.com/。其他网址都不要使用。当然，其他站点发布的指向本站的链接大部分我们是无法控制的。
