随笔分类 -  Python

摘要:最近在学PySpark,发现有几个有意思的点。 ScalaSpark→JavaSpark→PySpark Python如何获取外部传参 在Java、Scala中,可执行文件代码都会有一个main方法 def main(args: Array[String]): Unit = { val input 阅读全文
posted @ 2025-05-13 22:38 MrSponge 阅读(39) 评论(0) 推荐(0)
摘要:SQLAlchemy 2.0 版本检查 import sqlalchemy sqlalchemy.__version__ 建立连接-engine 任何 SQLAlchemy 应用程序的开始都是一个称为Engine的对象。此对象充当连接到特定数据库的中心源,既提供一个工厂,又提供一个称为 连接池 的存 阅读全文
posted @ 2024-07-19 14:42 MrSponge 阅读(1012) 评论(0) 推荐(0)
摘要:目录Scrapy什么是scrapy创建爬虫项目制作爬虫步骤创建爬虫文件执行爬虫文件response的数据和方法Scrapy shellScrapy架构组成即工作原理(重要)架构组成工作原理SpidersSpiders 返回Itemsspiders返回Requests开始scrapy爬虫1. 创建爬虫 阅读全文
posted @ 2024-04-16 11:49 MrSponge 阅读(121) 评论(0) 推荐(0)
摘要:创建Django 项目前置条件:已完成Python环境和PyCharm安装 Django的安装和项目的创建 | 在命令行输入pip 命令安装 pip install -i https://pypi.douban.com/simple django 或 指定相应的django版本: pip insta 阅读全文
posted @ 2023-01-04 09:36 MrSponge 阅读(521) 评论(0) 推荐(0)