<3> MongoDB存储
from pymongo import MongoClient class Spider(object): def __init__(self): # 将数据存储到数据库中 try: self.client = MongoClient('localhost', 27017) self.sina_db = self.client.sina self.jd_collection = self.sina_db.collection_sina # 标识 self.opened = True except: print('服务未启动') self.opened = False
def save(self): try: # 将字典数据插入到 MongoDB 数据库中 self.jd_collection.insert_one(data_dict) except: print('数据入库失败') # 关闭爬虫 def close_spider(self): if self.opened: # 关闭数据库客户端 self.client.close()
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· 三行代码完成国际化适配,妙~啊~
· .NET Core 中如何实现缓存的预热?
· 如何调用 DeepSeek 的自然语言处理 API 接口并集成到在线客服系统