摘要： 这段时间阅读了需求工程三四章的内容：第三章是需求分析，都包含了：原则、信息域、需求协商、需求建模。 第四章是需求规约，都包含了：信息描述、行为描述、功能描述、检验标准等。 需求分析 3.1 原则 必须能够表示和理解问题的信息域 必须能够定义软件将完成的功能 必须能够表示软件的行为 必须划分描述的数据 阅读全文

摘要： 今天学习了Hadoop集群搭建的方法： 目的 本文描述了如何安装、配置和管理有实际意义的Hadoop集群，其规模可从几个节点的小集群到几千个节点的超大集群。 如果你希望在单机上安装Hadoop玩玩，从这里能找到相关细节。 先决条件 确保在你集群中的每个节点上都安装了所有必需软件。 获取Hadoop软 阅读全文

摘要： 今天学习了Hadoop的入门知识，在Hadoop官网上学的，下面是内容分享： 目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会，比如在HDFS上运行示例程序或简单作业等。 先决条件 支持平台 GNU/L 阅读全文

摘要： 今天学习了Hadoop的hdfs的概念： Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统（Distributed File System）。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是 阅读全文

摘要： 今天，阅读了《需求工程》第一二章，通过阅读第一二章，知道了需求工程的定义：需求工程是指应用已证实有效的技术、方法进行需求分析，确定客户需求，帮助分析人员理解问题并定义目标系统的所有外部特征的一门学科。需求工程通过合适的工具和记号系统地描述待开发系统及其行为特征和相关约束，形成需求文档，并对用户不断变 阅读全文

摘要： 今天学习了hadoop的基本概念： Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（ Distributed File System），其中一个组件是 阅读全文

摘要： 1.团队第一阶段做了绝大部分的事（可找同组人验证） 2.每词上课都提前十分钟到 3.每次上课都坐前几排 4.见到老师主动问好 希望老师加五分 阅读全文

摘要： 今天学习了屠戮盗版天堂来爬取信息： 代码 import requestsimport reurl = "https://www.dy2018.com/"headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKi 阅读全文

摘要： 最简单的单页面抓取 思路： 获取页面所有url 对获取的所有url进行分类 A 获取属于本域名下的url B 获取属于其他url 2 用到的模块 urllib 详细介绍见链接 http://blog.csdn.net/dolphin_h/article/details/45296353 bs4 详细 阅读全文

摘要： 今天学习了ruquests爬取数据： 代码部分： import requestsurl = "https://fanyi.baidu.com/sug"a = input("请输入你想要翻译的单词:")dat ={ "kw":a}resp = requests.post(url,data=dat)pr 阅读全文