潜水闲鱼

摘要： NumPy函数分为字符串函数，数学算数函数，算数运算和统计函数，以及排序、搜索和计数函数。 咱们依次讲解以上各类： 1.字符串行数 以下函数用于对dtype为numpy.string_或numpy.unicode_的数组执行向量化字符串操作。这些函数在字符数组类(numpy.char)中定义。num 阅读全文

摘要： 1.首先，我们回顾一下NumPy的数组属性： np.shape:重塑数组 如 ：a = np.array([[1,2,3],[4,5,6]]) a.shape = (3,2) np.reshape:重塑数组 如：a = np.array([[1,2,3],[4,5,6]]) b = a.reshap 阅读全文

摘要： NumPy简介： NumPy系统是Python的一种开源的数值计算扩展。这种工具可用来存储和处理大型矩阵，比Python自身的嵌套列表（nested list structure)结构要高效的多（该结构也可以用来表示矩阵（matrix））。 NumPy（Numeric Python）提供了许多高级的 阅读全文

摘要： 上一篇博客已经讲述了对文本信息的爬取，本章将详细说一下对图片信息的爬取。 首先先看一下项目的目录： 老规矩，根据代码页进行讲解：(本次只针对一个页面进行讲解，多页面爬取只需解除注释即可) kgcspider.py 精解：对于之前的文本内容的爬取代码保持不变，增加的图片的爬取路径image_urls, 阅读全文

摘要： 爬虫整个过程中，需要蜘蛛，调度器，下载器，管道 的配合，才能真正完成整个操作，今天就来说一说这个过程以及编码和使用过程： 本章主要了解一下item和pipline的运用 （注意：在使用item的前提是，将setting文件中的ITEM_PIPELINES释放） 代码预览： spider.py 精解： 阅读全文

摘要： 对于大多数idea系统来说，安装的过程基本问题都会出现在解码过程中，如果出现类似CPU的问题，可能要更加繁琐的解决办法，今天先说一说有关解码的问题。 关于注册码的获取页面，可以使用自动生成的最新的编码，网址是：http://idea.lanyus.com/ 接下来可能就会遇到无法进入，遇到类似问题为 阅读全文

摘要： 1.函数 函数参数：必须 默认 关键 可变 函数种类：外部 内部 匿名 lambda 装饰函数：@语法糖 函数总是要返回的 ，若没有return，None总是被返回 2.面向对象： 对象：已存在，可被使用的实例 万物皆对象 类：描述其他实例信息的对象 方法：定义其他实例行为的对象 3.与函数区别： 阅读全文

摘要： 创建项目 在开始爬取之前，您必须创建一个新的Scrapy项目。进入您打算存储代码的目录中，运行下列命令： 该命令行将会创建包含下列内容的tutorial目录： 这些文件分别是： scrapy.cfg:项目的配置文件 tutorial:该项目的python模块。之后您将在此加入代码。 tutorial 阅读全文

摘要： python对XML的解析 常见的XML编程接口有DOM和SAX，这两种接口处理XML文件的方式不同，当然使用场合也不同。 python有三种方法解析XML，分别是SAX，DOM，以及ElementTree三种方法。 以下案例依次介绍三种方法： 先写一个关于book的xml文件 1.DOM(Docu 阅读全文

摘要： 一、文件流 1. open方法是打开文件，方法是： open(“文件名”，‘打开方式’，‘缓存’’) 参数说明： “文件名”：包含了你要访问的文件路径及文件名称的字符串值。尽量使用绝对路径 ‘打开方式’：默认文件访问模式为只读（r） ‘缓存’：如果值<0，寄存区的缓冲大小则为系统默认; 如果值=0， 阅读全文