会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
404NooFound
博客园
首页
新随笔
联系
订阅
管理
2019年3月15日
django | 连接mysql数据库
摘要: django 2.1 + mysql 5.6 1.在setting中设置 2.下载mysqlclit
阅读全文
posted @ 2019-03-15 21:37 404NooFound
阅读(117)
评论(0)
推荐(0)
2019年2月21日
今日头条 url (as,cp,_signature)模拟js文件
摘要: 转自: https://blog.csdn.net/weixin_39416561/article/details/82111455 思路:通过search找到js文件,然后模仿js文件,通过python编译js代码,获得url参数。 as,cp _signature 1 navigator = {
阅读全文
posted @ 2019-02-21 15:19 404NooFound
阅读(1045)
评论(0)
推荐(0)
2019年2月15日
数据库轮子
摘要: 1.MONGODB 2.MYSQL 提前建好表文件
阅读全文
posted @ 2019-02-15 20:46 404NooFound
阅读(307)
评论(0)
推荐(0)
scrapy | downloader middleware
摘要: 1.User-Agent scrapy默认的由UserAgentMiddleware设置为 "User-Agent": "Scrapy/1.5.1 (+https://scrapy.org)" 一、可以在setting中设置USER-AGENT设置 二、自定义随机user-agent 设置完成后在s
阅读全文
posted @ 2019-02-15 14:45 404NooFound
阅读(104)
评论(0)
推荐(0)
2019年2月14日
在代理池构建时候出现问题:
摘要: 在代理池构建时候出现问题: Traceback (most recent call last): File "D:\py_work\ProxyPool-master\proxypool\tester.py", line 32, in test_single_proxy self.redis.max(
阅读全文
posted @ 2019-02-14 16:33 404NooFound
阅读(292)
评论(0)
推荐(0)
2019年2月12日
分布式爬虫scrapy_redis
摘要: 1. 2.打开redis服务 3.修改配置文件 4.在cmd窗口切换到redis目录下 如果 REDIS_START_URLS_AS_SET = False 命令为 redis-cli lpush 项目名:start_urls 启动链接 如果 REDIS_START_URLS_AS_SET = Tr
阅读全文
posted @ 2019-02-12 23:28 404NooFound
阅读(157)
评论(0)
推荐(0)
scrapy_redis配置文件
摘要: #启用Redis调度存储请求队列 SCHEDULER = "scrapy_redis.scheduler.Scheduler" #确保所有的爬虫通过Redis去重 DUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeFilter" #默认请求序列化使用的是pickle 但是我们可以更改为其他类似的。PS:这玩意儿2.X的可以用。3.X的不...
阅读全文
posted @ 2019-02-12 22:56 404NooFound
阅读(95)
评论(0)
推荐(0)
2018年12月22日
python随练 | 巨Low版本彩票系统小练
摘要: 运行信息 要买彩票的位数:2INFO:root:[8, 3]欢迎进入彩票购买系统(q键退出)名字:tom号码(用空格隔开):1 2欢迎进入彩票购买系统(q键退出)名字:alex号码(用空格隔开):8 3欢迎进入彩票购买系统(q键退出)名字:q本期奖号为:8 3本期购买的嘉宾名单tom:1 2alex
阅读全文
posted @ 2018-12-22 16:07 404NooFound
阅读(118)
评论(0)
推荐(0)
Python基础练习 | 递归杨辉三角
摘要: """杨辉三角 1 1 1 1 2 1 1 3 3 1 1 4 6 4 1 1 5 10 10 5 1 """ def yanghuisanjiao(i,j): """ :param i:行 :param j: 列 :return: """ if i==j or j==1: return 1 return yanghuis...
阅读全文
posted @ 2018-12-22 15:19 404NooFound
阅读(885)
评论(0)
推荐(0)
2018年12月11日
Python | 关系数据库mysql基本操作练习
摘要: import pymysql """1.创建数据库""" db=pymysql.connect(host='localhost',user='root',password='123456',port=3306) #连接mysql cursor=db.cursor() #z设置光标 sql='CREATE DATABASE pymysql_test' #sql语句 cursor.execut...
阅读全文
posted @ 2018-12-11 19:20 404NooFound
阅读(124)
评论(0)
推荐(0)
下一页
公告