摘要:
好久没有用python写爬虫了,好多xpath语法都已经有点生疏了。 结合自己之前整理的资料,在这里做一下xpath常用语法总结,以及本次用到的需求是爬取某个节点下的所有内容(包含标签也需要获取) 常用定位语句实例 首先解决获取标签下所有内容的问题: 以 "三人行书屋" 为例: 我要获取 的div下 阅读全文
摘要:
python or php建站? 说实话,php能看懂,写的话就再需要熟悉一下语法。python建站需要从头开始。包括模板、cms、都没有php下的wordpress多。插件上也是wordpress有绝对的优势。自己一直写的python后台,前端页面放个一两年真是连个毛都不剩下了。仔细考虑了一些,还 阅读全文
摘要:
这段时间帮一个朋友迁移wordpress网站,从kinsta迁移至cloudways。kinsta直接托管wordpress服务。而cloudways则是主机托管。 使用cloudways的网站迁移工具,按照指导一步步操作。网站迁移过去,绑定域名后出现各种问题。由于原网站流量较大,只能绑定临时域名一 阅读全文
摘要:
python or php建站? 说实话,php能看懂,写的话就再需要熟悉一下语法。python建站需要从头开始。包括模板、cms、都没有php下的wordpress多。插件上也是wordpress有绝对的优势。自己一直写的python后台,前端页面放个一两年真是连个毛都不剩下了。仔细考虑了一些,还 阅读全文
摘要:
2020图书资源下载网站,最新整理 阅读全文
摘要:
最近疫情严重,在家闲的实在无聊,总不应该一直抱着手机一直玩农药,作为一个求上进的好IT青年,就想凑着假期提升一下自己。 这部刚想睡觉就有人送枕头,朋友推荐了![三人行书屋] (https://www.3rxsw.com)。网站上有多个分类目录,有“罗振宇专栏”和“樊登专栏”。找一个自己感兴趣的专栏钻 阅读全文
摘要:
首先是系统的环境问题。 linux 安装 moviepy需要很多依赖,安装起来费神费力。配置起来也非常麻烦,最简单的办法是直接使用他人构建好的镜像文件。 再就是字体显示问题。 镜像中的imagmagick不支持中文的字体。生成的视频中文乱码,搜索了好! 长时间,决定自己手动构建一个镜像。参考的文章链 阅读全文
摘要:
scrapy通过命令行创建工程,通过命令行启动爬虫,那么有没有方式可以在IDE中调试我们的爬虫呢? 实际上,scrapy是提供给我们工具的, 1. 首先在工程目录下新建一个脚本文件,作为我们执行爬虫的入口以取代命令行模式。 2. 编写代码: windows下调试可能会报 确实 model win32 阅读全文
摘要:
写一个解析xml的项目,标签中带有大量的 属性,依照程序员的尿性,肯定得写一个通用得方法给提取转换。随手写了一个纪录一下,下次再用到就不用翻代码了。 阅读全文
摘要:
tornado作为鼎鼎大名的web异步框架,用来作为高性能服务器以及web框架都是首选。自从python3.4加入了asyncio原生协程后,tornado的最新版本也开始使用了原生的协程。定义协程函数的时候就很简单了,也可以像sanic一样使用async def了。 一般的web项目都会有登陆的功 阅读全文