今天在测试采集一个地址时，发现采集的列表地址多了一层地址，如下图 查看源码发现，它的列表地址前面不带协议头https:  这样，它获取的地址就会多一层。 这……

最近发现网站用火车头采集的内容里有很多重复的内容。如下图，标题、内容都一样。但发布日期不一样。 采集器里面我明明设置检测重复网址了，如下图 最后检查……