摘要：
今天的实验是在上次清洗数据的基础上进行数据分析。根据单位的名称判断所在省市县，需要使用百度地图或者高德地图的接口。 我是使用python模拟百度地图搜索请求来判断所在位置的，但是卡在模拟请求这一步很长时间，每次response返回的都是html页面，并不是真正的json数据。后来才发现是因为网址写的 阅读全文
摘要：
今天读了《大型网站技术架构：核心原理与案例分析》的第一篇第一章和第二章，第一章主要讲的是大型网站架构的演化，第二章主要讲了大型网站的架构模式。感觉这本书有点偏理论性。 1 大型网站架构演化 1.1 大型网站特点 高并发 高可用 海量数据 用户分布广泛，网络情况复杂 安全环境恶劣 需求快速变更，发布频 阅读全文
摘要：
本周是第三周，本来以为这一周返校，结果又延长了。仔细想想也很正常，毕竟大学学生来自全国各地，不等疫情真正结束，学校肯定不会让我们返校。 所花时间（包括上课） 二十个小时 代码量（行） 500行左右 博客量（篇） 无 了解到的知识点 在德拓公开课上学习了大数据的相关技术，比如大数据同步技术DataX， 阅读全文
摘要：
这一周是在家里学习的第二周，感觉在家学习没有在学校学习效率高。本周看了《软件架构实践_第二版》的部分内容，详细了解了系统的六个质量属性。 所花时间（包括上课） 二十个小时 代码量（行） 1000行左右 博客量（篇） 1篇 了解到的知识点 系统的六个质量属性 阅读全文
摘要：
安全性战术有三个方面：抵抗攻击、检测攻击和从攻击中恢复。 抵抗攻击 对用户进行身份验证、对用户进行授权这两个方面暂时未涉及到。 维护数据的机密性是保证用户接收到的数据和发送方发送的数据一致。目前还不知道怎么重构信息化领域热词分析系统来实现这方面的要求。 维护完整性这一方面没怎么搞明白书上到底什么意思 阅读全文
摘要：
本周是开学第一周，因为疫情原因，本周在家里进行上课学习。这周完善了寒假里的那几个项目：信件爬取、热词分析、疫情分析。除此之外，还看了一点《架构漫谈》。 所花时间（包括上课） 十四个小时 代码量（行） 1000行左右 博客量（篇） 2篇 了解到的知识点 架构的一些相关内容以及系统的六个质量属性 阅读全文
摘要：
系统的质量属性：可用性，可修改性，性能，安全性，可测试性和易用性。 可用性 刺激源 服务器集群 刺激 单个服务器宕机 环境 正常运行 制品 淘宝网 响应 将服务由另外的服务器继续提供支持 响应度量 15s内完成服务的转移 可修改性 刺激源 开发人员 刺激 更改商品搜索算法 环境 正常运行 制品 淘宝 阅读全文
摘要：
说起软件架构师，我只能说我几乎没有任何了解。听名字可以看出软件架构师是管理软件架构的，但是软件架构又是什么？昨天，软件体系结构这门课开课了，老师提到了软件架构，课后我又看了看架构漫谈的几篇博客（https://www.infoq.cn/profile/1279517/publish），可以说是简单的 阅读全文
摘要：
今天开始做信息领域热词分析，实在不知道该从哪里爬取数据。后来同学给了我个网址，看起来信息领域的词汇挺全，然而热不热就不知道了，但是总归是有可以爬取的网站了。 https://baike.baidu.com/wikitag/taglist?tagId=76607 页面是用Ajax更新的，回传的值是js 阅读全文
摘要：
今天看了看实验七。 1. 数据导入 从文件中导入数据，并转化为 DataFrame。 2. 进行主成分分析（PCA ） 对 6 个连续型的数值型变量进行主成分分析。PCA（主成分分析）是通过正交变换把一组相关变量的观测值转化成一组线性无关的变量值，即主成分的一种方法。PCA 通过使用主成分把特征向量 阅读全文