随笔分类 - 爬虫
大二的学习总结
print()、转义字符、标识符和保留字、变量、数据类型、类型转换
摘要:安装 1.安装对应版本的Python,并进行相应的测试 2.安装对应版本的PyCharm并配置相关的内容 print()函数 输出内容是数字 输出内容是字符串 输出的内容是含有字符串的运算符的表达式 可以将数据输出到指定的位置 显示器 文件 例子:输出到文件 #a+: 以读写的方式创建,文件不存在创
阅读全文
六:自动化模块:
摘要:六:自动化模块: 1.协程 例子 1.学习的例子: # # python 协程import asyncioimport timeasync def func():#某些程序是在警告上才能跑的 eeee async print("我叫赛利亚")if __name__ == '__main__': g
阅读全文
五:并发模块:
摘要:五:并发模块: 1.多线程: 每个进程一定要有一个线程 启动程序默认都会要一个主线程 进程是资源单位,线程是执行单位。 例子: 1.学习的例子 #不是2线程的例子:下面# def fun():# for i in range(1000):# print("func",i)# if __name__
阅读全文
四:升级模块
摘要:1.reques高级: 例子: 1.17k小说网: #我们利用session去请求(是一连串的请求,过程中不会cookie丢失import requests# 会话session =requests.session()data ={"loginName": "18835556819", "passw
阅读全文
三.爬虫开始:
摘要:三.爬虫开始: ….第三方类库: request模块 安装: pip install request 例子: (1)你喜欢的明星 import requestsquery = input("输入一个你喜欢的明星")url = 'http://www.baidu.com/s?word={query}'
阅读全文
二.爬虫的开端:
摘要:二.爬虫的开端: 爬虫的一些小的例子:(5) 利用python的原始的库写爬虫: urlopen() from urllib import requestresp = request.urlopen('http://www.baidu.com')print(read()) 2.urlretrieve
阅读全文
一.爬虫的小知识:
摘要:一.爬虫的小知识: 我学的爬虫课有: 樵夫:樵夫 12800:12800 用到的正则的练习的网站:正则表达式练习 爬虫是什么? 网络爬虫(Web Spider)又称“网络蜘蛛”或“网络机器人”,它是一种按照一定规则从 Internet 中获取网页内容的程序。 原理: 爬虫程序之所以可以抓取数据,是因
阅读全文