摘要: 一、库相关操作 1.1创建数据库 CREATE DATABASE 数据库名 charset utf8; 1.2查看数据库 show databases; show create database db1; select database(); 1.3选择数据库 USE 数据库名 1.4删除数据库 D 阅读全文
posted @ 2019-11-15 16:05 徐大 阅读(290) 评论(0) 推荐(0) 编辑
摘要: 一、mysql申请连接的四种方式 1 . TCP/IP TCP/IP套接字连接方式是MySQL在任何平台都提供的一种连接方式,也是网络中使用最多的一种方式。这种方式在TCP/IP连接上建立一个基于网络的连接请求,一般情况下客户端在一台服务器上,而MySQL实例在另外一台服务器上,这两台机器通过TCP 阅读全文
posted @ 2019-11-15 15:51 徐大 阅读(3682) 评论(0) 推荐(0) 编辑
摘要: 一、Mysql相关设置 1.设置自增列从1开始 ALTER TABLE stuinfo auto_increment=1; View Code 2.mysql设置局域网访问 查询 select user,host from user; 直接在mysql命令中修改 mysql -u root -p u 阅读全文
posted @ 2019-11-15 15:35 徐大 阅读(150) 评论(0) 推荐(0) 编辑
摘要: 一、用户管理 默认:用户root 创建用户: use mysql; create user 'alex'@'192.168.193.200' identified by '123456'; 创建了alex用户,密码为123456,只能在ip192.168.193.200上连接 create user 阅读全文
posted @ 2019-11-15 15:28 徐大 阅读(328) 评论(0) 推荐(0) 编辑
摘要: 一、linux下Mysql的安装 1.安装mysql5.7.201.1 解压及制作软链接cd /opttar xf mysql-5.7.20-linux-glibc2.12-x86_64.tar.gzln -s mysql-5.7.20-linux-glibc2.12-x86_64 mysql 制作 阅读全文
posted @ 2019-11-15 14:35 徐大 阅读(379) 评论(0) 推荐(0) 编辑
摘要: 1.简介 selenium可以认为是反反爬虫的最佳利器,它基本可以等同于真实的浏览器访问,用它可以加载到动态数据,也省去了cookie的操作,但是用这个有一个重大的效率问题。所以selenium可以用来爬取一些对爬虫限制很大的网站。 2.基本使用 # -*-coding:utf8 -*- #sele 阅读全文
posted @ 2019-04-29 03:33 徐大 阅读(300) 评论(0) 推荐(0) 编辑
摘要: 1.简介 在爬虫中,生产者与消费者模式是经常用到的。我能想到的比较好的办法是使用redis或者mongodb数据库构造生产者消费者模型。如果直接起线程进行构造生产者消费者模型,线程容易假死,也难以构造复杂的生产者消费者模型。这里提供的condition版其实是最基本的生产者消费者模型的改良版,为了保 阅读全文
posted @ 2019-04-29 03:09 徐大 阅读(533) 评论(0) 推荐(0) 编辑
摘要: 1.简介 XPath是一门在XML和HTML文档中查找信息的语言,可以用来在XML和HTML文档中对元素和属性进行遍历 XPath的安装 Chrome插件XPath Helper 点Chrome浏览器右上角:更多工具 扩展程序 谷歌商店 勾选XPath Helper(需要FQ) 2.语法详解 #1. 阅读全文
posted @ 2019-04-29 02:50 徐大 阅读(13380) 评论(0) 推荐(0) 编辑
摘要: 1.发送get请求 import requests # response=requests.get('http://www.baidu.com') # 查看响应内容,返回的是已经解码的内容 # response.text 服务器返回的数据,已解码。解码类型:根据HTTP头部对响应的编码做出有根据的推 阅读全文
posted @ 2019-04-29 02:23 徐大 阅读(215) 评论(0) 推荐(0) 编辑
摘要: urlib库实际上不是很常用,因为其api调用复杂,已被requests模块取代。 1.request发送请求 from urllib import request #默认指定的是get请求 #urlopen可以指定data,设置了这个值,那么将变成post请求 response=request.u 阅读全文
posted @ 2019-04-29 01:53 徐大 阅读(496) 评论(0) 推荐(0) 编辑