02 2020 档案
摘要:因为疫情的原因导致我们没有去学校,但是学校组织在网上教学,在家里面上网看老师直播上课。 刚开始前两天,由于没有适应,比较懈怠。 最近几天上过几次课之后,状态渐渐恢复,开始步入开学的正常状态。 总结一下这一周的收获,那就是我开始了新的课程学习,在学习通上面看视频教学完成相应的小结测试。
阅读全文
摘要:以下以淘宝网为例: 可用性:与系统故障及其后果相关。(可用性是指系统正常运行时间的比例 稳定性的指标 出现故障恢复的时间) 场景:双十一购物节 刺激源:大量用户 刺激:短时间内大量用户迅速进入淘宝,系统崩溃 制品:系统崩溃的处理器 环境:正常模式 响应:记录故障,通知系统以及相关人员,根据已定义的规
阅读全文
摘要:通过观看设计师的视频,以及再一次的阅读九篇架构漫谈,我在设计师上找到了与软件架构师相通的特性,这次对漫谈的阅读和理解能让我更深一步的了解“什么是架构”,“什么是架构师”。 王概凯从认识架构讲到到最后的理清技术、业务和架构的关系,看完这些内容,相较寒假看的《软件架构实践》这一教材,收获是非常不一样的。
阅读全文
摘要:再一次阅读了资深架构师王概凯的架构漫谈以及结合自己对以前架构的一些理解后,在架构这方面自己有了不一样的体会。 先从最根本开始,为什么会出现架构,架构是怎么出来的。王概凯在漫谈中也提到了试想人类早期阶段,每个人的生活起居都是靠自己一个人来打理的,不管是什么事情都是一个人在做,不管是简单还是复杂。实际呢
阅读全文
摘要:这两天我读了王概凯写的架构漫谈,他在文章中详细介绍了什么是架构、怎样做好架构、软件架构如何落地、如何写好程序等问题。谈起架构师许多人都比较陌生这个名词。他们主要是一个最终确认和评估系统需求,给出开发规范,搭建系统实现的核心构架,并澄清技术细节、扫清主要难点的技术人员。主要着眼于系统的“技术实现”。而
阅读全文
摘要:软件架构实践在1-6章主要讲述创建架构的基础,介绍了一组广泛的基本概念和原理,主要是架构的商业方面,架构视图和架构,质量属性,和质量属性的结构战术和模式。后面开始讲述具体的架构设计,这也是比较重要的环节,因此我反复研读。 以前,我们提到一个概念叫做生命周期,好像是从出入编程的时候就已经知道了这个词,
阅读全文
摘要:软件架构实践在一到三章讲述了一些概念内容以及实例,比如什么是架构,架构的重要性和评判架构的准则等等。同样,作为书的第一部分,它介绍了架构的商业周期,是分析软件架构的基础。而第二部分讲述的就是设计师如何创建构架。概括的说,因为质量属性的实现对系统的成功至关重要,因此我们开始对质量属性以及设计师如何借助
阅读全文
摘要:今天了解一下什么是热词分析 例如今日头条: 能够将点击量最多的信息推送到顶部,方便观看。 python趴取热词 下面是一个小列子: 百度新闻页面(http://news.baidu.com/)上的百度热搜词部分的html是这个样子的 <a href="http://news.baidu.com/ns
阅读全文
摘要:python编程中的细节 NameError:尝试访问一个未声明的变量 NameError 表示我们访问了一个没有初始化的变量. 在 Python 解释器的符号表没有找到那个另人讨厌的变量. 我们将在后面的两章讨论名称空间, 现在大家可以认为它们是连接名字和对象的”地址簿”就可以了. 任何可访问的变
阅读全文
摘要:今天主要看了林子雨老师的spark基础和scala基础。 基本学会了scala基本语法和spark的简单使用,与scala的结合。 并且观看了一些教学视频资料。
阅读全文
摘要:本次阅读我阅读了前三章,众所周知,软件体系架构如大众的观点一致:需求在架构之前。即传统的思想:在知道了系统的需求,就可以为此系统构建构架。而紧接着,书中使用了经典的“瑞典的瓦萨战舰”以证明这种观点的缺乏远见——不能真正揭示出架构的重要价值。 “瑞典的瓦萨战舰”讲的是一个违背当时技术水平建造的战舰,这
阅读全文
摘要:功能要求为:1,数据采集,定期从网络中爬取信息领域的相关热词 2,数据清洗:对热词信息进行数据清洗,并采用自动分类技术生成自动分类计数生成信息领域热词目录。 3,热词解释:针对每个热词名词自动添加中文解释(参照百度百科或维基百科) 4,热词引用:并对近期引用热词的文章或新闻进行标记,生成超链接目录,
阅读全文
摘要:不管是正常的爬虫还是恶意爬虫,不仅会导致网站信息泄露,而且还会导致服务器压力过大。想象一下,一台计算机模拟人工请求访问服务器,并且与以计算机的速度与服务器进行交互,势必会导致服务器压力过大或者瘫痪。所以,很多正规的大型网站不想让网络爬虫爬取数据,设置了反爬虫机制。最常见的就是user-agent,简
阅读全文
摘要:1.spark-shell 交互式编程 (1)该系总共有多少学生; (2)该系共开设来多少门课程; (3)Tom 同学的总成绩平均分是多少; (4)求每名同学的选修的课程门数; (5)该系 DataBase 课程共有多少人选修; (6)各门课程的平均分是多少; (7)使用累加器计算共有多少人选了 D
阅读全文
摘要:python采集某市政百姓信件内容 #coding:utf-8 import requests from lxml import etree import time import pymysql import datetime import urllib import json from IPyth
阅读全文
摘要:相比较spark来说我感觉python还是更容易上手,今天在家开始了一些简单的爬虫,明天将要继续。
阅读全文
摘要:今天在B站上面看了python学习视频 学习地址:https://www.bilibili.com/video/av14184325 菜鸟教程上面有详细的资料目录,在上面进行了一些简单的练习 早上起来的时候看了一部分考研单词,感觉明天还是会忘记。 明天还要继续
阅读全文
摘要:今天看了实验的第二题感觉好难啊 2. 模拟图形绘制 对于一个图形绘制程序,用下面的层次对各种实体进行抽象。定义一个 Drawable 的特 质,其包括一个 draw 方法,默认实现为输出对象的字符串表示。定义一个 Point 类表示点, 其混入了 Drawable 特质,并包含一个 shift 方法
阅读全文
摘要:今天观看桂尚谷大数据学习视频跟着学习Scala基础: https://www.bilibili.com/video/av39126512?from=search&seid=3479125343083328567
阅读全文
摘要:今天根据老师发的资料完成了一道例题: 计算级数 请用脚本的方式编程计算并输出下列级数的前 n 项之和 Sn,直到 Sn 刚好大于或等于 q 为止,其中 q 为大于 0 的整数,其值通过键盘输入。 例如,若 q 的值为 50.0,则输出应为:Sn=50.416695。请将源文件保存为
阅读全文
摘要:我今天参考网上的教程对spark进行了安装: 在spark官网上下载spark 地址: http://mirrors.hust.edu.cn/apache/spark/spark-2.4.0/spark-2.4.0-bin-hadoop2.7.tgz 安装spark 命令如下: sudo tar -
阅读全文