摘要：
series数据操作: 增: 删: 改: 查: 算术运算符: """ add 加(add) sub 减(substract) div 除(divide) mul 乘(multiple) """ 加: 减: 乘: 除: 当数据数量不相等时,可以通过fill_value=0或者其他数值 DataFram 阅读全文
摘要：
练习: 1. 1.计算数组每一行和每一列的中位数(不能使用axis参数) array([ [ 80.5, 60., 40.1, 20., 90.7], [ 10.5, 30., 50.4, 70.3, 90.], [ 35.2, 35., 39.8, 39., 31.], [91.2, 83.4, 阅读全文
摘要：
4由于python对数字的不准确,不只是python 其他很多编程语言对数字都不是很敏感 但python又可以做人工智能,量化交易等,数据必须精确无误,就需要用到numpy模块 numpy简介 1.Numpy是高性能科学计算和数据分析的基础包2.也是pandas等其他数据分析的工具的基础3.NumP 阅读全文
摘要：
关于数据分析 数据分析就是从现有的数据中挖掘出价值 应用领域: 商品推荐 :根据分析用户日常行为数据挖掘潜在用户 金融量化交易:指定股票的交易规则,战略,使用代码控制股票的买入卖出 视频网站推送:根据用户在网站所看视频的标签分类 精准推送用户感兴趣的视频从而增加用户粘性 数据分析的工作流程: ①:需 阅读全文
摘要：
思路： """ 1.先进入官网看图片的标签数据 2.查看英雄细节界面 皮肤是背景图片 3.查看网页代码 4.找到了url参数，研究发现了一个可疑的请求 5.对json加密的数据进行解密，发现结果如下： 6.通过不同的英雄逐渐发现图片地址的规律以及单页同英雄皮肤图片数据的规律 7.在url中前者的数字 阅读全文
摘要：
用户权限管理 1.涉及到用户权限相关 引号推荐全部使用双引号 2.mongodb针对用户权限的创建，数据可以保存在不同的数据库下 之后在登录的时候只需要自己指定账户数据来源于哪个数据库即可 3.管理员数据推荐保存到admin库下,普通用户任意库都可以,为了便于管理可以在test库下创建 管理员账户需 阅读全文
摘要：
爬虫框架之scrapy 框架:别人提前搭建好了基本架构,具备了一定的动能 安装 pip3 install scrapy 安装完毕后 win+r 输入scrapy 出现此界面表示安装成功 在安装时 mac不会出现问题 ,windows电脑会出现问题 windows电脑如果下载报错并且没有典型的关键字特 阅读全文
摘要：
爬取京东数据商品(单页) 关于延时等待 有时候我们在访问网站数据的时候 加载需要一定的时间 没有加载完全的情况下代码极其容易报错 此时需要我们的等待页面数据加载完毕 如何精确等待? bro.implicitly_wait(10) #延时等待十秒(对于正常网速十秒足够) 关于控制浏览器鼠标滚轮下滑 w 阅读全文
摘要：
第一章:爬取百度翻译,天气数据,药品许可证 第二章:爬取红牛分公司,农产品数据 第三章:爬取糗图百科,优美图库,梨视频 第四章:爬取梨视频网站详细过程 第五章:爬取链家 汽车之家数据 第六章:爬取京东数据 百度自动登录 知乎破解登录 阅读全文
摘要：
首先导入模块: from selenium import webdriver 获取属性 tag.get_attribute('src') 获取标签ID，位置，名称，大小 print(tag.id)print(tag.location)print(tag.tag_name)print(tag.size 阅读全文