网站整体用的是动态链接让技术做了伪静态处理，但是做sitemap的时候发现只能抓取到栏目页的url，文章和产品的url都抓取不到，这种应该怎么做

顺晟科技：

3、网站需要能被蜘蛛抓取识别，才有可能索引和放出收录，先前没伪静态的时候，URL是可以正常抓取识别吗，如果是那么可能是URL规划有误，如果不是就是自身框架结构问题，查看源码看看。

ps：抓取不到文章的URL，可以尝试换个其他抓取工具看看

2、如果内容都抓取不了，就需要考虑网站的框架结构是否有异常。