上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 31 下一页
摘要: 对于老师要求的第二个个人作业进行完成。 这个作业要求爬取顶会热词,然后生成热词云。 首先是对内容的爬取,由于以前做过爬虫,因此对于文章的爬取就不是很难了,而且没有反爬虫的限制,但是中间会出现断网的情况,我的解决办法就是输出一共爬取了多少条,然后下次就从断网的那里继续爬。 代码如下: import r 阅读全文
posted @ 2021-06-05 21:11 软工新人 阅读(41) 评论(0) 推荐(0) 编辑
摘要: 寻找代码中存在的问题,对软件提出改进意见。 部分工作代码如下: public class Mechangeinf extends AppCompatActivity { String MYID=""; String MYNICHENG=""; String MYQIANMING=""; String 阅读全文
posted @ 2021-06-04 20:45 软工新人 阅读(47) 评论(0) 推荐(0) 编辑
摘要: 对已完成的代码检查并进行优化。 已经完成了大部分的工作,现在要做的就是对代码的检查和修改,发现其中的问题。 工作中的部分代码如下: public class firstFragment extends Fragment { private ProgressDialog progressDialog; 阅读全文
posted @ 2021-06-03 21:19 软工新人 阅读(43) 评论(0) 推荐(0) 编辑
摘要: 将在自己 电脑上的项目打包复制到云服务器上,然后将云服务器的mysql表进行创建用来避免错误的出现,在这一过程中还是出现了问题,经过反复测试终于解决问题,已经可以实现在自己的手机上访问到软件。 支持外网访问,也就是可以在自己的手机端运行,满足用户的使用要求。 工作中的部分代码如下: public c 阅读全文
posted @ 2021-06-02 20:56 软工新人 阅读(27) 评论(0) 推荐(0) 编辑
摘要: 将数据导入到云服务器的mysql中,云服务器不适合用来执行python爬虫代码。 现在自己的电脑上爬取数据,然后利用可视化软件导出数据为sql文件,然后将文件放到云服务器的数据库中,云服务器不适合在配置python环境,这样做也能使工作简单写。 阅读全文
posted @ 2021-06-01 21:36 软工新人 阅读(15) 评论(0) 推荐(0) 编辑
摘要: 爬取到了帖子的标题,还要对帖子的评论进行爬取,这其中就会有更多的服务器访问,因此出现反爬虫设定的概率就更大了,因此决定控制过一段时间进行一次爬虫,每个帖子不要爬取过多的内容,以此来保证可以让数据库不会太缺少内容。 应对爬虫出现问题的方法,因为解决不了验证,只能每次爬取少量内容,给程序设置了一个定时器 阅读全文
posted @ 2021-05-31 21:38 软工新人 阅读(30) 评论(0) 推荐(0) 编辑
摘要: 对爬虫代码的测试过程中发现,当爬取的数据过多时会出现错误,然后发现是因为百度贴吧有反爬虫设定,这就导致了无法爬取到过多的内容,如果访问的次数过多就会出现反爬虫,因此再代码的测试上也会出现阻碍,但对与贴吧主页的爬取成功。 在爬取过程中出现的不是验证码,而是一种图片的旋转,通过将图片旋转正了实现验证,我 阅读全文
posted @ 2021-05-30 19:57 软工新人 阅读(14) 评论(0) 推荐(0) 编辑
摘要: 按照老师的要求爬出石家庄铁道大学百度贴吧,对代码进行解析,今天实现了代码的功能,明天对代码进行优化爬取更多。 这里就是对于网页的解析,但是以前做的只是对于数据的读取,还没有做到解析,因此还要学习下html的解析,不过也实现了对于内容的爬取。 阅读全文
posted @ 2021-05-29 22:03 软工新人 阅读(16) 评论(0) 推荐(0) 编辑
摘要: 服务器端的代码也要进行修改,这次给读取数据时加上了条数限制,保证第一次加载只读取数据库中的5条,然后当用户上滑加载的时候再次请求网络,在去读取一条数据,经测试,有效解决了加载缓慢的问题. 这一部分的功能是对以前的的写的方法的修改,因为通过测试发现以前的方法存在设计不当的地方,因此需要对已经写好的部分 阅读全文
posted @ 2021-05-28 19:36 软工新人 阅读(14) 评论(0) 推荐(0) 编辑
摘要: 今天领取到了服务器,由于对linux系统的命令不熟悉,因此选择使用windows系统配置服务器,主要是mysql,Tomcat的配置,这就是上学期的javaweb的运行环境的配置,要做的就是将jdk复制到云服务器,将mysql和Tomcat都复制到云服务器,在上面在安装一遍。今天主要完成了服务器的配 阅读全文
posted @ 2021-05-27 20:36 软工新人 阅读(21) 评论(0) 推荐(0) 编辑
上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 31 下一页