Rule(LinkExtractor(allow=rule.get("allow", None), restrict_xpaths=rule.get("restrict_xpaths", ""),deny=('guba','f10','data','fund.*?\.eastmoney\.com/\d+\.html','quote','.*so\.eastmoney.*','life','/gonggao/')),callback=rule.get("callback", ""),follow=rule.get('follow',True))Rule设置如上，deny拒绝guba、data等链接，但是实际运行中，还是有这些链接（包含了guba的链接）：
2019-06-27 10:33:24 [scrapy.core.engine] DEBUG: Crawled (200) <GET http://guba.eastmoney.com/list,of166401.html> (referer: http://fund.eastmoney.com/LOF_jzzzl.html)
2019-06-27 10:33:24 [scrapy.core.engine] DEBUG: Crawled (200) <GET http://guba.eastmoney.com/list,of164206.html> (referer: http://fund.eastmoney.com/LOF_jzzzl.html)
2019-06-27 10:33:24 [scrapy.core.engine] DEBUG: Crawled (200) <GET http://guba.eastmoney.com/list,of161823.html> (referer: http://fund.eastmoney.com/LOF_jzzzl.html)请问是哪里设置的不对么
来自 “ ITPUB博客 ” ，链接：https://blog.itpub.net/1386/viewspace-3130074/ ，如需转载，请注明出处，否则将追究法律责任。
上一篇：
marquee为什么很少用
下一篇：
java中如何中断main函数？
请登录后发表评论
登录
全部评论
