上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 35 下一页

日报3.7

摘要: 今天学习并使用ajax制作了一个区域分布的弹窗显示该地区药品的功能,然后又对查询框进行了改进,增加了输入框的联想功能,对于药物来说增加了按照归经以及味道进行了分类 准备明天就药品信息界面做一个分页显示的效果,提高界面的简洁度。 阅读全文
posted @ 2021-03-07 22:43 一往无前! 阅读(24) 评论(0) 推荐(0) 编辑

日报3.6

摘要: 今天对已经爬取到的信息进行展示,主要是对数据的集中展示,查询,以及用地图来显示中药材的地域分布 今日遗留问题:现在地图上可以显示药材的数量,并设置点击事件,可以获取到所点击的省份,明天首要解决的就是将省份传入后台,并查询出该地域所包含的中药材名称。 阅读全文
posted @ 2021-03-06 23:29 一往无前! 阅读(29) 评论(0) 推荐(0) 编辑

日报3.5

摘要: 今天学习了代理ip的使用。爬取了快代理中的免费ip,可是昨天的问题还是无法解决,即便是开设新的账户进行登录还是被限制,应该还是网络ip的原因,更换网络就可以正常爬取,所有被限制的网络还是提示被限制,爬取内容为空。明天准备就现有数据进行展示,处理,之后逐步的添加数据 阅读全文
posted @ 2021-03-05 21:40 一往无前! 阅读(28) 评论(0) 推荐(0) 编辑

日报3.4

摘要: 今天继续爬取中药信息中的详细信息 由于信息中都是使用}进行分割的所以使用正则对数据进行切分选取即可 另外由于每味药中的信息都不同,所以只能通过一项一项的去爬取 #只爬取药材名称for tr in trs: for td in tr: #print(td.string) #print (td) if 阅读全文
posted @ 2021-03-04 18:32 一往无前! 阅读(21) 评论(0) 推荐(0) 编辑

日报3.3

摘要: 今天爬取详细信息准备从详细信息中提取地址信息,药品的详细信息就存放在一个table表格中当爬取整个表格的时候只爬取第一个td中的标题信息,而第二列中td还包含一个span标签,其中的内容没有爬取到 直接爬取 for tr in trs: ui = [] for td in tr: ui.append 阅读全文
posted @ 2021-03-03 19:18 一往无前! 阅读(28) 评论(0) 推荐(0) 编辑

日报3.2

摘要: 今天成功爬取药智库中的中药材基本信息库共收集中药2251种 阅读全文
posted @ 2021-03-02 21:24 一往无前! 阅读(17) 评论(0) 推荐(0) 编辑

Python的模拟登陆

摘要: 在进行网页爬取的过程中很多网站都会有账户密码,信息只对注册的用户开放,所以在爬取过程中必须的模拟浏览器进行登录 就以我今天爬取的药智库为例,如果没有登录,显示的信息会是这样的,会找不到详细信息, 所以在爬取过程中需要用到模拟登录 首先要审查网页的元素,查看他的network 然后进行登录,点击上方的 阅读全文
posted @ 2021-03-02 21:21 一往无前! 阅读(426) 评论(0) 推荐(0) 编辑

Python爬取并写入文件时编码错误

摘要: UnicodeEncodeError: 'gbk' codec can't encode character '\ue81f' in position 116: illegal multibyte sequence 爬取时已经设置了编码格式了,但是还是出现了错误 原来是在写入的时候,没有规定具体的编 阅读全文
posted @ 2021-03-02 20:25 一往无前! 阅读(130) 评论(0) 推荐(0) 编辑

日报3.1

摘要: 今天爬取中药的图片,最初是采用直接爬取整个网页,然后解析爬取网页中的图片,由于网页中存在很多其他图片并且不好命名,所以用之前爬下来的数据才能够数据库中读取,根据图片的具体地址爬取图片 #图片爬取全代码 import requests import os import 数据库连接 #定义一个函数参数为 阅读全文
posted @ 2021-03-01 16:46 一往无前! 阅读(31) 评论(0) 推荐(0) 编辑

Python爬取图片实例

摘要: 使用网页中图片的具体地址下载并保存图片,保存时判断文件是否存在 #定义一个函数参数为图片的地址,以及文件名 def picture (url ,str1): root = '你的存储地址' #图片的存储地址 path = root + str1 + '.jpg' #图片的地址以及名称 try: if 阅读全文
posted @ 2021-02-28 21:30 一往无前! 阅读(128) 评论(0) 推荐(0) 编辑
上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 35 下一页