11 2015 档案

M1事后分析报告
摘要：设想和目标 1.我们的软件要解决什么问题？是否定义得很清楚？是否对典型用户和典型场景有清晰的描述？ 我们的爬虫现阶段解决的就是文件爬取的问题。在定义中爬取对性能和功能的要求高，典型用户和场景的描述较为清晰。 2.是否有充足的时间来做计划? 有一周的时间来进行计划，这个时间还是很充裕的。 3... 阅读全文

posted @ 2015-11-24 13:40 爱码室 阅读(189) 评论(1) 推荐(0) 编辑

Alpha阶段个人贡献分及转会人员确定
摘要：13061177 潘礼鹏：5713061178 符美潇：5913061220 谢金洛：5413061173 焉域政：5413061169 周文祥：4771061105玉钟焕：29转会人员：玉钟焕 转会团队：Dream 阅读全文

posted @ 2015-11-17 23:50 爱码室 阅读(154) 评论(0) 推荐(0) 编辑

Alpha版本展示
摘要：团队成员人员分配:PM:潘礼鹏dev:符美潇 焉域政 谢金洛test:符美潇 周文祥 玉钟焕博客地址：13061178符美潇 博客链接：http://www.cnblogs.com/FUduomi/13061177潘礼鹏http://www.cnblogs.com/plp1306/13061220谢... 阅读全文

posted @ 2015-11-17 12:21 爱码室 阅读(210) 评论(0) 推荐(0) 编辑

【Alpha版本发布】爬虫队长正在待命！
摘要：一、基础功能简介 本团队的爬虫能够从网上搜索相关内容, 并归类，把所爬到的网页或各种类型的文档下载到本地上。 上届团队Beta版本爬虫的主要功能如下： a)可爬取网页，问答页并进行问答文件分类。 b)设计了一个较为完善的UI界面，可显示爬取的进度： c) 声称能够专门爬取pdf,... 阅读全文

posted @ 2015-11-12 03:53 爱码室 阅读(340) 评论(5) 推荐(0) 编辑

Last Daily Scrum (2015/11/9)
摘要：今晚我们终于完成了新版本的爬虫工作，可以替换掉之前部署在服务器上的那个爬虫了。由于周末大家各种原因导致了我们迭代一的截止日没有完成所有任务，所以今天晚上大家加班加点终于把这一迭代的爬虫项目完成了。成员今日任务及成果时间谢金洛经过几个UI版本的修改后，最终应新的功能而设计出了最新版本的UI界面。2... 阅读全文

posted @ 2015-11-10 01:05 爱码室 阅读(227) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/8)
摘要：由于编译大作业临近deadline以及各项选修课即将结课，虽然PM强调软工任务也很紧迫，但是大多数成员表示今天想请假一天。符美潇今天把自己所负责的数据库编码部分和谢金洛的UI进行了对接。在测试过程中发现了一些数据库连接上的错误，于是要求谢金洛对所写的UI进行修正。成员今日工作及成果时间明日任务符... 阅读全文

posted @ 2015-11-09 11:56 爱码室 阅读(144) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/7)
摘要：今晚谢金洛同学的UI工作完成，我们进行了UI和后端的拼接，准备开始规范化地进行系统测试。成员今日任务及成果时间明日任务符美潇1.把之前PM分配的编码任务及其说明准备好发给PM1h待定潘礼鹏1.查看DEV们的编码成果并做初略的BUG测试。1h谢金洛1.进行UI开发结果：已经开发完毕，发送给PM。2... 阅读全文

posted @ 2015-11-08 22:31 爱码室 阅读(136) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/6)
摘要：今晚除了玉钟焕的其他成员在一起开了个短会。讨论有关添加新功能以及一些BUG问题。由于时间原因，我们本想把动态爬取功能留到第二个迭代中，但是现在目前时间还够，我们便一起对这一功能的讨论和实现进行分析。 由于今天本就是我们组订的休息日，开会时间又比较晚。所以没有给组员安排今日的任务。周六和周末继续... 阅读全文

posted @ 2015-11-07 14:03 爱码室 阅读(115) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/5)
摘要：这天晚上我们对爬虫进行了一些测试，发现仍然存在一些不小的BUG。现在我们的爬虫已经能完成基本的功能，焉域政同学也正在把他之前写的分类功能继续完善。在BUG的测试中，我们发现如果要求爬虫爬取特定的文件类型（例如pdf），速度会较慢甚至不响应。我们在星期五晚将会统筹我们的项目时间，尽量解决多的BUG... 阅读全文

posted @ 2015-11-06 18:56 爱码室 阅读(132) 评论(2) 推荐(0) 编辑

Daily Scrum (2015/11/4)
摘要：因为距离部署的时间临近，而之前我们的进度偏慢。这天晚上我们大多数成员几乎所有时间都用在了这个项目上，成果还算令人满意。成员今日任务时间明日任务符美潇1.修复了一个BUG，此BUG会导致所爬取的网页数大于用户要求的网页数。2.改写了根据数据库中的数据来生成饼图的数据库操作函数，提高了访问数据库的效... 阅读全文

posted @ 2015-11-05 16:51 爱码室 阅读(159) 评论(0) 推荐(0) 编辑

关于sql server2008数据库的连接的几个问题及解决办法
摘要：写在开头 不得不说给一台新的服务器配置和部署的确是个不小的工程，在这里先感谢我们的DEV焉域政同学在这方面做出的一些贡献：把安装过程极为困难的sql server2008成功安装到服务器上，并且为我们配置了java环境、安装了Eclipse。目前数据处理小组也在使用我们服务器已经安装好的sql s... 阅读全文

posted @ 2015-11-04 14:25 爱码室 阅读(5955) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/3)
摘要：今天我们的爬虫能在pc上成功运行并且把所爬取的数据存到服务器上了！我们已经搭建好数据库，把相关信息存到数据库中，并把数据存到D盘里共享给数据处理小组使用。成员今日工作时间明日工作符美潇完成数据库的所有配置及连接需求3h待定潘礼鹏监督DEV编码汇总工作1h谢金洛已完成基本Button，继续设计UI... 阅读全文

posted @ 2015-11-04 13:35 爱码室 阅读(111) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/11/2)
摘要：今日我们完成了博客作业的发布，并且也完成了服务器的配置。成员今日工作时间明日工作符美潇两篇文档的修善和数据库的搭建。2h完成数据库搭建，并能爬取数据提供给第二小组使用潘礼鹏编写两篇博客文档2h汇集dev的编码工作焉域政完成了服务器的基础配置3h待定谢金洛继续设计UI1hUI设计周文祥待定玉钟焕待... 阅读全文

posted @ 2015-11-03 18:54 爱码室 阅读(141) 评论(0) 推荐(0) 编辑

爬虫项目设计文档
摘要：一、引言 1.1 目的 描述程序设计。 1.2 总体设计概述 提供网页爬取、内容分类、内容下载、图形分析等设计。二、整体架构 2.1 应用技术 2.1.1 JAVA多线程 JAVA使用java.lang.Thread类或者java.lang.Runnable接口编写代码来定义、实例化和... 阅读全文

posted @ 2015-11-02 22:59 爱码室 阅读(4437) 评论(2) 推荐(0) 编辑

爬虫项目功能规格说明书
摘要：一、引言 1.1编写目的 明确项目软件功能与需求。 1.2预期读者 （1）对爬虫项目有调研需求的程序员 （2）对爬虫软件有所需要的各类用户 1.3 项目背景 互联网信息繁杂冗余，虽然有搜索引擎如百度、谷歌给一般用户提供内容检索分类呈现的服务，这些引擎的表层功能虽然满足了一般互联网用户的... 阅读全文

posted @ 2015-11-02 21:52 爱码室 阅读(1638) 评论(2) 推荐(0) 编辑

Daily Scrum (2015/11/1)
摘要：今天晚上我们照例召开了每周末的小组例会，主要总结本周的工作和讨论下一周的工作。 首先是本周的一些主要工作： 1.进行了代码的修改和完善。 2.开始进行服务器配置和UI。 3.学习借鉴了nutch爬虫的工作模式。 4.团队博客作业。 5.三个项目小组开会。 ... 在例会上，我们按... 阅读全文

posted @ 2015-11-02 02:01 爱码室 阅读(133) 评论(0) 推荐(0) 编辑

Daily Scrum (2015/10/31)
摘要：这几天我们组的进度有点慢，剩下这一周的我们必须要加油认真对待。 周末这两天我们是这样安排的：成员今日任务时间明日任务符美潇数据库部分代码的编写1h每周小组例会潘礼鹏团队博客作业谢金洛继续UI开发1h焉域政继续服务器配置1h周文祥Bug测试与分析，新发现录入文档玉钟焕代码修改1h （注：表格空... 阅读全文

posted @ 2015-11-01 02:52 爱码室 阅读(139) 评论(0) 推荐(0) 编辑

导航