上一页 1 ··· 81 82 83 84 85 86 87 88 89 ··· 123 下一页
摘要: #!/usr/bin/env python # encoding: utf-8 import pymysql from config.config import * import datetime def get_conn(): conn=pymysql.connect(host=HOST,port=PORT,user=USER,passwd=PASSWORD,db=DB,char... 阅读全文
posted @ 2018-05-21 17:02 公众号python学习开发 阅读(6344) 评论(0) 推荐(0) 编辑
摘要: 1. "su"的加密算法,su是username经过BASE64计算得来的: 2.获取sp的值,就是密码rsa的加密值 1.首先访问http://login.sina.com.cn/sso/prelogin.php?entry=weibo&callback=sinaSSOController.pre 阅读全文
posted @ 2018-05-21 09:42 公众号python学习开发 阅读(1867) 评论(0) 推荐(0) 编辑
摘要: #!/usr/bin/env python # encoding: utf-8 import requests from random import choice from lxml import html from urllib.parse import urljoin,quote import os import time NAMEURLDIC={} NAMEURLDIC_L2={} u... 阅读全文
posted @ 2018-05-18 10:55 公众号python学习开发 阅读(200) 评论(1) 推荐(0) 编辑
摘要: https://crontab.guru/ 阅读全文
posted @ 2018-05-17 10:30 公众号python学习开发 阅读(184) 评论(0) 推荐(0) 编辑
摘要: multiprocessing 用的最多的是pool.map,类似的还有pool.map_async这个是异步的,这两个需要传递的参数不同,另外python3不建议使用pool.apply了,具体我不很清楚自己查。 简单解释下上面代码用的参数,其中partial是一个偏函数,关于它的用法参照(我看着 阅读全文
posted @ 2018-05-17 10:20 公众号python学习开发 阅读(21650) 评论(3) 推荐(3) 编辑
摘要: #!/usr/bin/env python3 from functools import partial from itertools import repeat from multiprocessing import Pool, freeze_support def func(a, b): return a + b def main(): a_args = [1,2,3] ... 阅读全文
posted @ 2018-05-17 09:11 公众号python学习开发 阅读(10171) 评论(0) 推荐(0) 编辑
摘要: # -*-coding: utf-8-*- # Author : Christopher Lee # License: Apache License # File : test_example.py # Date : 2017-06-18 01-23 # Version: 0.0.1 # Description: simple test. import logging import ... 阅读全文
posted @ 2018-05-16 13:51 公众号python学习开发 阅读(1105) 评论(0) 推荐(0) 编辑
摘要: 1.创建项目 我这里的项目名称为scrapyuniversal,然后我创建在D盘根目录。创建方法如下 打开cmd,切换到d盘根目录。然后输入以下命令: 如果创建成功,d盘的根目录下将生成一个名为scrapyuniversal的文件夹。 2.创建crawl模板 打开命令行窗口,然后定位到d盘刚才创建的 阅读全文
posted @ 2018-05-15 13:37 公众号python学习开发 阅读(671) 评论(0) 推荐(0) 编辑
摘要: 对于刚接触scrapy的同学来说, crawlspider中的rule是比较难理解的, 很可能驾驭不住. 而且笔者在YouTube中看到许多公开的演讲都都错用了follow这一选项, 所以今天就来仔细谈一谈. 首先我们看scrapy中的follow是如何实现的: # 为了方便理解, 去除了不必要代码 阅读全文
posted @ 2018-05-15 10:10 公众号python学习开发 阅读(499) 评论(1) 推荐(0) 编辑
摘要: Option Explicit Dim objIE Set objIE = CreateObject("InternetExplorer.Application") objIE.Visible = True WScript.sleep(100) call asplogin(objIE, "用户名", "密码") Wscript.Quit '---------------------------... 阅读全文
posted @ 2018-05-15 09:16 公众号python学习开发 阅读(242) 评论(0) 推荐(0) 编辑
上一页 1 ··· 81 82 83 84 85 86 87 88 89 ··· 123 下一页