摘要： 1，将所有访问过的url保存在数据库中 2，将访问过的url保存在内存中，只需要o(1)代价就可以查询url 1000000000*2byte*50个字符/1024/1024/1024≈9G 3，url经过md5等方法哈希后保存到内存中 （scrapy用的方法） 4，用bitmap方法，将访问过的u 阅读全文

摘要： 说明： python这门语言在设计的时候，有一个全局解释器锁（GIL锁）这个就尴尬了，这个就导致了python的多线程都是伪多线程，也就是本质上还是一个线程 但是这个线程每个事情只做几毫秒，几毫秒以后就保存现场，换做其他事情，几毫秒以后再做其他事情， 微观上的单线程，宏观上就相当于同时，这个在（I/ 阅读全文

摘要： 1，软件的开发生命周期 ① 测试人员必须全程参与（先去需求调研，需求分析评审（开始参与），编码,要求开发人员编写单元测试，集成测试，系统测试，预发布系统测试，上线！） ② 参与测试时遇到什么困难？ 1） 接口文档不完善，更新需求之后不能及时更新接口文档？ 在需求评审的时候每一次都会和开发人员进行讨论 阅读全文

摘要： 得到的结果是一种有序字典。 阅读全文

摘要： # -*- coding:UTF-8 -*- __autor__ = 'zhouli' __date__ = '2018/10/21 14:54' import numpy as np l = [1, 2, 3, 4, 5, 6] l2 = np.array(l) print(l, type(l), 阅读全文

摘要： 新增组件 使用 python manage.py startapp新建一个app，并且在settings中注册，添加stark.apps.StarkConfig, 然后在stark的apps中添加ready()方法， from django.apps import AppConfig from dj 阅读全文

摘要： ''' 字符串初始化 ''' html=''' first item second item third item fourth item fifth item ''' # from pyquery import PyQuery as pq # doc=pq(html) # print(doc('li')) ''' 运行结果如下： first item second item third... 阅读全文

摘要： 1，批量在django中插入数据 2， from django.db import models from datetime import datetime from django.db import transaction from archive.models import Customer f 阅读全文

摘要： 抓取猫眼电影排行： 目标：提取出猫眼电影排行前100位的相关内容。request比urllib好用，所以暂时使用request，目前采用正则表达式作为解析工具。 在下方还有分页。观察首页的网址为： 点击第二页： 发现后面均多出一个参数就是offset=10，并且每一次之后都是额外的增加10，所以初步 阅读全文

摘要： 文章详情页的编写： 细节在于，在点赞的时候不必给两个按钮同时绑定事件，而是利用： 上面是点赞的编写，下面是事件的绑定，利用的是hasClass判断返回是否为空； 来返回True或者是false。 在JS中ajax如何向python插入变量一样呢?就是利用了${变量名}来进行带入，如下代码： 注意当点 阅读全文