怎样统计网站特定类型URL的收录信息？

发布时间：2021-11-06 15:26 所属栏目：21 来源：互联网

导读：你在操作一个网站seo时，是否会出现这样的情况，要确切的统计网站收录情况而无从下手，因为如今很少有，统计整站收录情况的统计软件，一些号称有这个功能的，你可以尝试也很鸡肋，根本都不准，所以我们需要另辟蹊径，那么，如何才能得到网站所有收录具体URL？

你在操作一个网站seo时，是否会出现这样的情况，要确切的统计网站收录情况而无从下手，因为如今很少有，统计整站收录情况的统计软件，一些号称有这个功能的，你可以尝试也很鸡肋，根本都不准，所以我们需要另辟蹊径，那么，如何才能得到网站所有收录具体URL？

https://www.batmanit.com/h/zb_users/upload/2020/06/202006201592636158143785.jpg

根据做seo攻略的经验，我们认为：

1.大型网站

对于统计数据这项工作来说，做seo是经常要做的，不过一般都是做排名统计、点击率统计等，做收录统计，尤其是一些大网站，动则几百上千万个页面，靠一般统计软件几乎是无法完成的，但好在这些大网站都是团队运营，其中必然少不了网站技术人员，可以让技术人员通过诸如python、java语言开发出一种专门抓取url的程序，在通过对接API来实现，收录查询。

不过我们也要注意一个问题，虽然这样查收录会比较快，但面对百万、千万页面，其也很耗时，更重要的是，这些页面在被统计后，是否会被收录呢？所以就算按照以上方式测试完毕整站页面，其数据也极其不准确，所以作为一个大型网站，我们建议，不要这么做，其参考意义不大。

2.中小型网站

而中小型网站则不同，首先网站体量小，收录变化小，数据准确率高，再者获取网站url也比较方便。

①sitemap

你可以查看网站是否有sitemap功能，如果有，一般都会按照网站更新频率来截取成不同大小，因为网站地图过大会影响网站加载速度，如果url信息不全，你可以设置其数量，生成整站页面数据，使用后再调回原设置即可。

如果没有网站地图功能，你网站是cms系统搭建的，都会有相应的插件可以使用，下载或购买一个就可以，如果是开发网站，咨询开发者，让其做一个网站地图功能即可，之后再查询收录情况。

②采集

如果做不到使用网站地图获取url，或者你要做其他网站的统计，你可以利用采集软件，整站采集，也就可以获得页面url数据，在通过批量查收录工具进行查询。

③url猜测

如果采集也做不到，还可以观察要统计网站的url是否有一定规律，比如一些网站的文章内容都是在一个目录下，你可以查看这个网站建站初期的文章id，利用Excel的拖拽功能，将id拉倒最新更新id数，就可以得到网站的文章url，剩下的一般都是分类和tag页面，按照相同的方式找即可，最后利用批量查收录就可以了。

总结：如何才能得到网站所有收录具体URL的问题，我们就讨论到这里，以上内容，仅供参考。

（编辑：ASP站长网）