在使用scrapy时,使用xpath解析网页的结构,碰到一个问题 比如我要解析一本,在A网站的结构是 <div id="text">标题</div> 在B网站上是 <div class="text">标题</div> 那么我该如何解决这个问题。总不能爬一本,就手动改一下解析结构吧
@Py站长 大概了解了,谢谢
@407102799 你搞个配置文件,程序读取你的配置文件,
当你要添加时,只需要改下配置文件就可以了
@Py站长 这是一种方法,那么如果我爬的格式多呢?是不是要一个个写上去?
代码里两种格式一起解析和抓取