摘要: django 2.1 + mysql 5.6 1.在setting中设置 2.下载mysqlclit 阅读全文
posted @ 2019-03-15 21:37 404NooFound 阅读(108) 评论(0) 推荐(0) 编辑
摘要: 转自: https://blog.csdn.net/weixin_39416561/article/details/82111455 思路:通过search找到js文件,然后模仿js文件,通过python编译js代码,获得url参数。 as,cp _signature 1 navigator = { 阅读全文
posted @ 2019-02-21 15:19 404NooFound 阅读(1033) 评论(0) 推荐(0) 编辑
摘要: 1.MONGODB 2.MYSQL 提前建好表文件 阅读全文
posted @ 2019-02-15 20:46 404NooFound 阅读(303) 评论(0) 推荐(0) 编辑
摘要: 1.User-Agent scrapy默认的由UserAgentMiddleware设置为 "User-Agent": "Scrapy/1.5.1 (+https://scrapy.org)" 一、可以在setting中设置USER-AGENT设置 二、自定义随机user-agent 设置完成后在s 阅读全文
posted @ 2019-02-15 14:45 404NooFound 阅读(95) 评论(0) 推荐(0) 编辑
摘要: 在代理池构建时候出现问题: Traceback (most recent call last): File "D:\py_work\ProxyPool-master\proxypool\tester.py", line 32, in test_single_proxy self.redis.max( 阅读全文
posted @ 2019-02-14 16:33 404NooFound 阅读(286) 评论(0) 推荐(0) 编辑
摘要: 1. 2.打开redis服务 3.修改配置文件 4.在cmd窗口切换到redis目录下 如果 REDIS_START_URLS_AS_SET = False 命令为 redis-cli lpush 项目名:start_urls 启动链接 如果 REDIS_START_URLS_AS_SET = Tr 阅读全文
posted @ 2019-02-12 23:28 404NooFound 阅读(149) 评论(0) 推荐(0) 编辑
摘要: #启用Redis调度存储请求队列 SCHEDULER = "scrapy_redis.scheduler.Scheduler" #确保所有的爬虫通过Redis去重 DUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeFilter" #默认请求序列化使用的是pickle 但是我们可以更改为其他类似的。PS:这玩意儿2.X的可以用。3.X的不... 阅读全文
posted @ 2019-02-12 22:56 404NooFound 阅读(88) 评论(0) 推荐(0) 编辑
摘要: 运行信息 要买彩票的位数:2INFO:root:[8, 3]欢迎进入彩票购买系统(q键退出)名字:tom号码(用空格隔开):1 2欢迎进入彩票购买系统(q键退出)名字:alex号码(用空格隔开):8 3欢迎进入彩票购买系统(q键退出)名字:q本期奖号为:8 3本期购买的嘉宾名单tom:1 2alex 阅读全文
posted @ 2018-12-22 16:07 404NooFound 阅读(110) 评论(0) 推荐(0) 编辑
摘要: """杨辉三角 1 1 1 1 2 1 1 3 3 1 1 4 6 4 1 1 5 10 10 5 1 """ def yanghuisanjiao(i,j): """ :param i:行 :param j: 列 :return: """ if i==j or j==1: return 1 return yanghuis... 阅读全文
posted @ 2018-12-22 15:19 404NooFound 阅读(881) 评论(0) 推荐(0) 编辑
摘要: import pymysql """1.创建数据库""" db=pymysql.connect(host='localhost',user='root',password='123456',port=3306) #连接mysql cursor=db.cursor() #z设置光标 sql='CREATE DATABASE pymysql_test' #sql语句 cursor.execut... 阅读全文
posted @ 2018-12-11 19:20 404NooFound 阅读(108) 评论(0) 推荐(0) 编辑