2018年1月16日
单条insert
摘要： ugc_l = browser.find_elements_by_class_name('ugc-item') try: myl = [{'statistics': i.text.replace('阅读', '').replace('赞', '').replace('评论', '').replace(' ⋅ ', ... 阅读全文
posted @ 2018-01-16 18:35 papering 阅读(175) 评论(0) 推荐(0) 编辑
Illegal mix of collations (utf8_unicode_ci,IMPLICIT) and (utf8_general_ci,IMPLICIT) for operation '=
摘要： [SQL]SELECT username,password,toutiao_uidFROM pwdtab pLEFT JOIN toutiao_action_article aON p.toutiao_uid=a.toutiao_uid WHERE 1 AND p.id>3000 [Err] 126 阅读全文
posted @ 2018-01-16 15:36 papering 阅读(236) 评论(0) 推荐(0) 编辑
每秒刷新页面
摘要： 阅读全文
posted @ 2018-01-16 09:54 papering 阅读(303) 评论(0) 推荐(0) 编辑
反黑
摘要： www.youdomain.com?tmUnblock.cgi www.youdomain.com? www.youdomain.com?xltestdesfs 阅读全文
posted @ 2018-01-16 02:50 papering 阅读(216) 评论(0) 推荐(0) 编辑
curl HTTP_USER_AGENT
摘要： [root@bigdata-server-01 ~]# curl 13.26.92.20array(27) { ["HTTP_USER_AGENT"]=> string(11) "curl/7.29.0" ["HTTP_HOST"]=> 阅读全文
posted @ 2018-01-16 02:35 papering 阅读(394) 评论(0) 推荐(0) 编辑
location.replace
摘要： [root@bigdata-server-01 ~]# curl www.baidu.com<!DOCTYPE html><!--STATUS OK--><html> <head><meta http-equiv=content-type content=text/html;charset=utf- 阅读全文
posted @ 2018-01-16 02:34 papering 阅读(262) 评论(0) 推荐(0) 编辑
提升600百万数据的处理速度 禁止图片下载
摘要： firefox_profile = webdriver.FirefoxProfile()firefox_profile.set_preference('permissions.default.image', 2)#某些firefox只需要这个firefox_profile.set_preference('browser.migration.version', 9001)#部分需要加上这个#... 阅读全文
posted @ 2018-01-16 00:02 papering 阅读(271) 评论(0) 推荐(0) 编辑