Scrapy项目运行和debug断点调试

Scrapy项目运行和debug断点调试#

  1. 在项目的文件夹下增加一个文件debug.py

    #debug.py
    
    
    from scrapy.cmdline import execute
    import os
    import sys
    
    # 添加当前项目的绝对地址
    sys.path.append(os.path.dirname(os.path.abspath(__file__)))
    # 执行 scrapy 内置的函数方法execute,  使用 crawl 爬取并调试,最后一个参数example 是我的爬虫文件名
    execute(['scrapy', 'crawl', 'example'])
    
    
    

  2. 然后直接运行debug.py文件,即可添加断点进行调试


参考博客:https://www.cnblogs.com/grimm/p/13884670.html

posted @   就学45分钟  阅读(181)  评论(0编辑  收藏  举报
编辑推荐:
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
阅读排行:
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 别再用vector<bool>了!Google高级工程师:这可能是STL最大的设计失误
· 单元测试从入门到精通
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
点击右上角即可分享
微信分享提示
主题色彩