小天管理 发表于 2024年9月18日 发表于 2024年9月18日 使用 scrapy 框架爬一些数据，大概上千万，但是是不是的会出现问题，导致中断，不知道有没有什么办法能够实现断点续爬。爬的类型就是典型的新闻列表，然后进入详情页抓取新闻内容。 感谢
已推荐帖子