摘要:
OutLine Pycharm 中完成编码,且在 Pycharm 中可正常运行,以为就万事大吉了,但在Linux命令行中执行时,报错:找不到所导入的包; 先看下目录结构: from scripts import * 我在 scripts/__init__.py 中写了一个基类,供后续继承使用 dum 阅读全文
摘要:
Outline 之前在某个 Linux 服务器上跑了个 NFS Server,供内网其他 Linux 机器共享数据; 后来想在本地 PC 上也使用那个Linux NFS Server 的数据; 这里记录下 Windows10(我的 PC 是win10) 挂载NFS操作步骤。 Linux 下挂载NFS 阅读全文
摘要:
Outline 之前捣鼓了下自定义博客园主题样式,顺手记录了下:https://www.cnblogs.com/bigtreei/p/8450686.html 看了下留言评论,有不少小伙伴感觉我当前这个主题样式还不错,也想设置下; 我这个主题是github上一个开源主题:https://github 阅读全文
摘要:
Outline 今天新建了个conda虚拟环境,需要安装某个库,进行了以下操作: conda activate py38 # 激活名为py38的虚拟环境 pip install mdlib -i http://nexus.td.internal/nexus/repository/pypi_group 阅读全文
摘要:
Outline 今天准备在服务器(Linux)开一个notebook做些实验,但notebook打开后,发现kernel只有一个python环境,无法选择我创建的conda虚拟环境: 创建jupyter notebook服务方式: # 端口、IP根据自己实际情况来 jupyter notebook 阅读全文
摘要:
场景 源分支代码:https://github.com/microsoft/qlib fork过来的代码:https://github.com/GaochaoZhu/qlib 例如: 我在1月份从【源分支】把代码fork到我个人github代码库; 在9月份的时候,我对qlib代码做了些更新,想要把 阅读全文
摘要:
Outline 项目是 Flask + Celery 实现异步,需要断点调试 celery task 中的代码,但celery是通过命令行启动的,怎么借助pycharm进行断点调试? Pycharm断点调试Flask,参见:https://www.cnblogs.com/bigtreei/p/147 阅读全文
摘要:
Outline 因为爬虫代码突然爬取失败了,因此拿来调试; 用pycharm调试scrapy爬虫代码时,代码思路、流程都是ok的,理论来说应该可以按逻辑走,而且以前也是调通过的; 但就是无法debug到 parse() 方法中; 问题定位 看了下scrapy打印的日志,看到了上图信息; 关键点在这里 阅读全文
摘要:
Outline 服务器代码出现问题,在服务器上调试代码不方便,拉到本地用Pycharm调试; 解决 step1 运行 app.py 运行后会报错: 正常情况下运行一个 Flask Server 可以这么来: python app.py runserver 后面是要加参数的,而直接pycharm里ru 阅读全文
摘要:
OutLine 下午发现服务器资源吃紧,ps看了下,发现自己 selenium + FireFox 爬虫任务有N多进程; 处理 这些进程一直积累,没有销毁,导致资源大量占用; 代码里也确保FireFox最终会 driver.close(),退出浏览器; 后来对比了下 driver.close() 和 阅读全文