摘要:
完成了前4个spark基础实验 通过视频教程 学习了retrying模块的使用 处理cookie请求 xpath等爬虫的学习 - HTTP:超文本传输协议 - 以明文的形式传输 - 效率更高,但是不安全- HTTPS:HTTP + SSL(安全套接字层) - 传输之前数据先加密,之后解密获取内容 - 阅读全文
摘要:
from parse import parse_url#引用parse里面的方法 结果出现波浪线并提示This inspection detects names that should resolve but don't. Due to dynamic dispatch and duck typin 阅读全文
摘要:
1.Could not find a version that satisfies the requirement pyOpenSSL (from versions: none) 原因一:pip版本低 原因二:pip install 包名 -i http://pypi.douban.com/simp 阅读全文
摘要:
在学习Python scala 等过程中我发现都涉及到了正则表达式 然后主要根据菜鸟教程https://www.runoob.com/regexp/regexp-syntax.html进行了学习 这三个比较简单 用的也比较频繁 runoo+b,可以匹配 runoob、runooob、runooooo 阅读全文
摘要:
弄了整整一个晚上的sbt然后还是不行 停留在这个界面一动不动 下面这个问题由于上面的问题还待解决。。。(暂时先放弃了 ) 阅读全文
摘要:
这两天补充解决了几个问题 IDEA创建maven项目无javahttps://www.cnblogs.com/zzstdruan1707-4/p/12275328.html IDEA无法下载通过maven添加的jar包以及下载网速过慢https://www.cnblogs.com/zzstdruan 阅读全文
摘要:
在idea上使用Maven来添加依赖的jar包 发现无法下载jar包 总是提示某几个包下载失败 最后发现原因有两个(版本与网速的问题 对应解决如下) 一主要是因为版本的问题 我的idea是2019年1月份的 然后下载的maven是最新的3.6.3 经过各种搜索好像是因为版本不兼容然后引起的问题可以通 阅读全文
摘要:
在idea上创建maven-archetype-webapp项目后发现无法创建java文件然后参考此博客得以解决 https://www.cnblogs.com/mywangpingan/p/9448161.html 记录如下: 1.选择File->Project Structure 2.选择Mod 阅读全文
摘要:
这两天主要学习了爬虫(在学习爬虫过程中涉及到了学习maven)(https://www.cnblogs.com/zzstdruan1707-4/p/12267141.html) 以及scala集合 文件 模式匹配 迭代器等操作(磕磕绊绊 没掌握)(补充的第三个实验)(比源代码添加了更多便于理解的注释 阅读全文
摘要:
一、安装 1.下载http://maven.apache.org/download.cgi 2.选择zip格式 安装完后解压到某一位置(E:\xitong\major\apache-maven-3.6.3 解压位置即为maven安装目录) 3.配置环境变量 变量名:M2_HOME 变量值:E:\xi 阅读全文