随笔分类 - 大三上
摘要：在某些方面，编程就像是绘画。你从空白的画布和某些基本原材料开始，通过知识、艺术和技艺的结合去确定用前者做些什么。 你勾画出全景，绘制背景，然后填入各种细节。你不时后退一步，用批判的眼光观察你的作品。常常，你会扔掉画布，重新再来。 知识资产 知识的投资从来没有人说是不好的，它永远是一个人最重要的职业财
阅读全文
摘要：读完《程序员修炼之道:从小工到专家》后，我感觉有很大的收获，从这本书中，我看到了这些前辈的经验，给我的体会也很大，基础对软件工程来说十分的重要。 我们看到的整洁，运行良好的系统，一旦窗户开始破裂，就相当迅速的恶化，还有其他一些因素能够促生软件腐烂， 我们将在别处探讨他们，但与其他因素相比，置之不理都
阅读全文
摘要：一：概念 （1）定义 对象模型表示静态的、结构化的系统的数据性质。它是对模拟客观世界实体的对象以及对象彼此间的关系的映射，描述了系统的静态结构。对象模型为建立动态模型和功能模型，提供了实质性的框架。 （2）工具 使用UML（统一建模语言）提供的类图来建立对象模型。在UML中，类的实际含义是一个类及属
阅读全文
摘要：第一部分是打好基础。这部分主要是关于软件构建的前期工作，以及一些基本概念的介绍， 包括如何选择编程语言和构建实践方法，以及如何理解软件开发的过程。软件开发本质上是工程， 本书将其与建筑工程进行了比较。然而，由于软件产品的特性，它们的需求很可能会发生变化，这也会产生一系列需要额外考虑的问题 第二部分是
阅读全文
摘要：第四部分是陈述，它是程序主体的基本组成单元，它高于变量。 这部分主要描述语句的组织结构，如线性类型、循环控制、条件控制表驱动和其他常见方法，如条件循环，在大多数情况下并不常见。 我应该对程序逻辑有高度的概括和灵活性。这仅在编写编译器课程实践代码时使用 第五部分是代码改进。本部分包括以下主题：协作、测
阅读全文
摘要：《构建之法》是一本由丹尼尔·布鲁斯坦所著的研究人类思维方式的书籍。 它探讨了构建和创新的过程，以及我们如何利用这些过程来改善我们的生活和工作。 在全书中，布鲁斯坦提出了一种三个阶段的构建模型，分别是发现、抽象和建立。 他指出这三个阶段不仅是构建过程的必要步骤，而且在任何一个领域都适用。 首先是发现阶
阅读全文
摘要：看了第一章，第一章主要是概论，主要讲述软件是什么，是由什么组成的，然后接着陈述软件工程是什么，看了第一章之后，得知，软件工程只是实现软件的一个工具，有了工具做事情才容易。还有进行运维和维护软件，并且我们所开发的软件要符合客户的要求，不能盲目开发，浪费精力和体力，根据自己的想法去做满足客户的软件，而且
阅读全文
摘要：第四部分是陈述，它是程序主体的基本组成单元，它高于变量。 这部分主要描述语句的组织结构，如线性类型、循环控制、条件控制表驱动和其他常见方法，如条件循环，在大多数情况下并不常见。 我应该对程序逻辑有高度的概括和灵活性。这仅在编写编译器课程实践代码时使用 第五部分是代码改进。本部分包括以下主题：协作、测
阅读全文
摘要：2.3 个人开发流程 个人开发流程PSP（Personal Software Process） 特点：（1）不局限于某一种软件技术，而是着眼于软件开发的流程，这样，开发不同应用的软件工程师可以互相比较。 （2）不依赖于考试，而主要靠工程师自己收集数据，然后分析、提高。 （3）在小型、初创的团队中，很
阅读全文
摘要：(1) 本周做了什么： 这周是我大数据学习的进一步深化阶段。我投入了大约55小时的学习时间，深入研究了大数据领域的高级技术和应用。 我探索了数据湖和数据仓库的设计和实现，学习了如何构建灵活的数据存储架构，以满足不同的业务需求。 我还深入研究了大规模图数据处理和分析，了解了如何使用图数据库和图处理框架
阅读全文
摘要：#map计算 rdd = sc.parallelize([1,2,3,4,5]) def func(date): return date*10 rdds=rdd.map(func) #flatMap解除嵌套 rdd = sc.parallelize(["dwad wad wdas","dwadw d
阅读全文
摘要：新建 hadoop 用户 新建用户，名为 hadoop： adduser hadoop 安装一个小工具用于修改用户密码和权限管理： yum install -y passwd sudo 设置 hadoop 用户密码： passwd hadoop 接下来两次输入密码，一定要记住！ 修改 hadoop
阅读全文
摘要：from pyspark import SparkConf,SparkContext import json #创建sparkconf对象 conf = SparkConf().setMaster("local[*]").setAppName("test_app") #基于sparkconf对象创建
阅读全文
摘要：Python与Hadoop生态系统的集成博客题目：学习总结四：Python与Hadoop生态系统的集成实践内容概要：探索如何将Python与Hadoop生态系统工具进行集成，如使用Python编写MapReduce程序、使用PySpark进行数据处理等。学习资源：推荐的Python与Hadoop集成
阅读全文
摘要：我进一步学习了Apache Spark，在本地环境上搭建了一个Spark集群，并学习了Spark SQL和数据处理的相关概念。我实践了一些数据分析和处理任务，并研究了一些优化技巧和最佳实践。 时间分配： 学习时间：我每天投入了6个小时进行学习，其中4个小时用于深入学习Web开发和React框架，2个
阅读全文
摘要：格律诗乐器是一种传统文化艺术的代表，它在中国有着悠久的历史和独特的魅力。为了保证格律诗乐器的质量，制定并执行一个完善的生产流程和质量控制流程非常重要。本篇博客将详细介绍格律诗乐器的生产流程和质量控制流程。 一、生产流程 1. 原材料准备：选择高质量的原材料对于格律诗乐器的音质和工艺品质至关重要。通常
阅读全文
摘要：本周我在学习上主要集中在web开发和大数据技术框架方面。以下是我本周的学习内容和时间分配情况： 学习内容： Web开发：我深入学习了前端框架React，并通过实践项目进一步巩固了我的前端开发能力。我学习了React的高级特性，如状态管理和路由，并通过编写组件和处理数据请求的实际应用来提升我的编码技巧
阅读全文
摘要：我计划完成一个全栈应用项目，涉及到前后端的开发和数据交互。 大数据技术框架：我将探索更多的大数据技术，如Apache Kafka和Apache Flink，并完成一些实践任务，以进一步提升我的大数据处理和分析能力。 本周遇到的问题： 在本周的学习和项目开发过程中，我遇到了一些问题。其中一个主要问题是
阅读全文
