会员
T恤
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
sfccl
博客园
首页
新随笔
联系
订阅
管理
随笔 - 59
文章 - 2
评论 - 1
阅读 -
11万
12 2019 档案
《学习scrapy框架爬小说》的进一步完善
摘要:一、完善目标: 1、为方便使用,把小说拼音或英文名,小说输出中文名,第一章节url地址变量化,修改这些参数即可爬取不同的小说。 2、修改settings.py设置文件,配置为记录debug的log信息,以方便排错。 3、修改字符集编码,解决部分网页有emoji符号,导致无法把爬取的网页内容存入数据表
阅读全文
posted @
2019-12-17 19:02
sfccl
阅读(333)
评论(0)
推荐(0)
公告
昵称:
sfccl
园龄:
7年1个月
粉丝:
4
关注:
1
<
2025年4月
>
日
一
二
三
四
五
六
30
31
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
1
2
3
4
5
6
7
8
9
10
点击右上角即可分享