随笔分类 - Python
摘要：https://github.com/Yogayu/awesome-jupyterlab-extension https://pandas.pydata.org/docs/user_guide/index.html https://github.com/elyra-ai/elyra
阅读全文
摘要：在 MAC 上 安装 Anaconda 后在 ITerm2 终端找不到 conda 提示 zsh:command not found:conda，查询默认把配置写在 bash_profile 里 ➜ bin cat ~/.bash_profile # added by Anaconda3 2.5.0
阅读全文
摘要：实际应用中，我们有可能在启动 Scrapy 的时候自定义一些参数来控制不同的业务流程，Google 尝试了如下方式可以实现 。 修改 Spider 构造函数 class myspider(Spider): # 爬虫名称 name = "myspider" # 构造函数 def __init__(se
阅读全文
摘要：基本属性 在做一些数据分析的时候，我们通常会把数据存为矩阵的形式，然后python本身对于矩阵的操作是不够的，因此出现了numpy这样一个科学开发库来进行python在次上面的不足。 Numpy's array 类被称为ndarray。 这个对象常用而重要的属性如下： ndarray.ndim： 输
阅读全文
摘要：环境：Ubuntu Xenial (16.04) Scrapy 是一个不错的爬虫框架，但是不支持定时执行，常规的做法是使用 crontab 的方式进行定时执行 shell ，当爬虫数量多的时候，管理起来就非常麻烦，总是一个scrapy project 做一个deploy，很不方便 ，Google 了
阅读全文
摘要：相信大多数 python 的初学者们都曾为开发环境问题折腾了很久，包管理和 python 不同版本的问题,特别是 window 环境安装个 scrapy 各种报错 ,使用 Anaconda 可以很好的解决一些不必要的学习成本。 Anaconda 概述 Anaconda 是一个用于科学计算的 pyth
阅读全文
摘要：之前使用 scrapy 抓取数据的时候 ，默认是在逻辑中判断是否执行下一次请求 比如： 今天无意查看了 scrapy 的官方文档，可以使用 start_requests() 这个方法循环生成要爬取的网址 使用 python 一定要简单粗暴，于是把我把之前代码换了如下方式 注意：要注意的是重写 sta
阅读全文
摘要：原文：http://insights.thoughtworkers.org/full-stack-python/ 前段时间，ThoughtWorks在深圳举办一次社区活动上，有一个演讲主题叫做“Fullstack JavaScript”，是关于用JavaScript进行前端、服务器端，甚至数据库（M
阅读全文
摘要：https://github.com/search?l=Python&o=desc&q=python&s=stars&type=Repositories&utf8=%E2%9C%93https://github.com/vinta/awesome-pythonhttps://github.com/j
阅读全文
摘要：环境：centos6.7https://github.com/vinta/awesome-pythonhttps://github.com/PyMySQL/PyMySQLhttps://github.com/kennethreitz/requestshttp://flask.pocoo.org/ht
阅读全文
摘要：使用了几天sublimetext3，后面尝试了pycharm 秒杀一切 ！！！ http://www.sublimetext.com/ https://packagecontrol.io/ http://www.jetbrains.com/pycharm/ http://python3-cookbo
阅读全文
摘要：原文：http://blog.jobbole.com/80006/ 许多Python初学者都会问：我应该学习哪个版本的Python。对于这个问题，我的回答通常是“先选择一个最适合你的Python教程，教程中使用哪个版本的Python，你就用那个版本。等学得差不多了，再来研究不同版本之间的差别”。 但
阅读全文