摘要:
Kafka Need No Keeper 最近在鹅厂工作中不断接触到Kafka,虽然以前也使用过,但是对其架构和发展过程总是模模糊糊,所以在回学校准备末考的时候找些资料总结一下。 Kafka Need No Keeper 是一个在Kafka Submit分享的标题,我也是看了Kafka needs 阅读全文
摘要:
认知 Mybatis3 中文文档 练习代码 MyBatis 是一款优秀的持久层框架,它支持自定义 SQL、存储过程以及高级映射。MyBatis 免除了几乎所有的 JDBC 代码以及设置参数和获取结果集的工作。MyBatis 可以通过简单的 XML 或注解来配置和映射原始类型、接口和 Java P 阅读全文
摘要:
写在前面的话 2021.04,准备面试和CCF CSP认证的我准备做一套CCF模拟题,然后就有了此篇博客(x 题目:201912-2 回收站报数 题目截图: 第一个想法:读取每个垃圾的位置,存入TreeSet中,然后依次取出判断是否可以建立回收站和评分(不可以建立回收站,评分为-1)。 这时候就有读 阅读全文
摘要:
写在前面的话 最近学习比较多流行的大数据框架和完成两个大数据项目后,又突然学起了Redis。之所以之前的框架不学习记录呢,是因为之前的学习都是为了完成参加服创比赛的项目所以时间较紧,现在基本架构和编码测试完成,就开始学习新的知识并且尝试优化服创项目。当然我也不愿意复制老师的PPT写成自己的博客:), 阅读全文
摘要:
写在前面的话 最近不是一直在学习大数据框架和引用嘛(我是按照B站视频先学习过一遍路线,以后找准方向研究),除了自己手动利用Kafka和HDFS写一个简单的分布式文件传输(分布式课程开放性实验,刚好用上了所学的来练练手)以外,还学习这个学习路线一个项目,电信客服实战。在这个项目里面还是学习到了不少内容 阅读全文
摘要:
介绍 这次设计的电梯系统是一次软件工程的小组作业~~(这门课没安排实验,佛),我在这次小组作业中负责的是后端设计和算法设计的部分,多亏了想出来了(不然只能CV了,其实我是这个系统的产品经理~~ 项目上传到了GitHub中,欢迎follow。 设计 设计思想 电梯系统要求采用有穷状态转换机的思想,在我 阅读全文
摘要:
写在前面的话 这是一次小项目的记录博客,项目具体内容是利用RCNN和Faster-RCNN在VOC数据集找出那些预测错误的图片。其实也称不上是一个项目,只是我花了很多时间并且像模像样的学着大佬写项目那样构造代码。 项目介绍 Introduction 这篇博客主要是讲解我的每个文件或者函数的作用,具体 阅读全文
摘要:
写在前面的话 在弄清楚RCNN、Fast-RCNN和Faster-RCNN的原理和区别后,找到了一份开源代码(具体链接见参考资料第一条)研究。第一次看这份代码的时候,我直接去世(doge,pytorch也只是新手的我真的是原地爆炸,后来发现主要是自己沉不住气看,后面看另一篇博主的代码解析的时候(具体 阅读全文
摘要:
写在前面的话 在目标检测的历史中,RCNN的出现使得深度学习和目标检测结合在了一起,RCNN的出现就是这一发展的开端。 在我自己的学习中,结束了Selective Search的学习后,自然就开始学习了RCNN,本来想三个RCNN一个一个学的,后来发现这三个之间的联系非常紧密,并且是一步一步将所有的 阅读全文
摘要:
写在前面 因为找到了指导老师,现在准备开始学习目标检测的相关内容,目标检测有一个感性的认识还是比较简单的,但是每个目标检测更新换代的过程要自己实现和弄懂细节的话还是有点难度的。 这是一篇目标检测的入门摘要博客,写得非常不错,有一个感性的认识完全是够了。 通过基本的了解,我发现目标检测的基本过程过主要 阅读全文
摘要:
Spark SQL Spark SQL里面最重要的就是DataFrame结构,与Spark的RDD结构相比,差别就在于是否已知元素里面的内容结构,举个栗子,RDD比作"{name:'lihua',age:18}",而DataFrame就是{name:'lihua',age:18}。 在对DataFr 阅读全文
摘要:
按照厦大给出的大数据学习路线,开始了spark的学习,这是spark基础的实验。我们常说的Spark在Spark生态中应该指的是Spark-Core负责批处理的部分,而Spark中还有Spark SQL,Spark Streaming、Spark MLlib和GraphX的组件。 1.pyspark 阅读全文
摘要:
承接上一篇,NoSQL实验 MapReduce实验 如何在Eclipse中运行MapReduce程序,参考厦大数据库实验室博客 总体代码: package org.apache.hadoop.examples; import java.io.IOException; import java.util 阅读全文
摘要:
承接上一篇,HBase实验,下一篇,MapReduce实验 一 MySQL数据库操作 安装 参考厦大数据库实验室博客 一般安装好Ubuntu后,第一次登录时无法登录,可以去更新root用户的密码,网上的很多教程我都试过了,总体来讲可以分为两步 登录mysql,网上的两种方法都是可行的。 一是终止服务 阅读全文
摘要:
承接上一篇HDFS实验,下一篇,NoSQL实验,学习入门课后的实验真的是以简单为主,后续估计得每个组件一一击破。 Hbase介绍 Hbase是一个分布式的、面向列的开源数据库,源于Google的一篇论文《BigTable:一个结构化的数据的分布式存储系统》。HBase中确定一个元素,需要提供表名,行 阅读全文
摘要:
下一篇Hbase实验 HDFS实验 学习了中国MOOC上的《大数据技术原理与应用》,然后找到实验开始学习。我认为这门课被认为是入门的专业课是可以的,很多地方都只是一个简单的描述一下体系结构,工作方式等等,这就足够了,多了也听不懂。学习完了这门课,就是深似海的感觉,对讲的内容总是一知半解,可能自己理论 阅读全文
摘要:
学习李航老师的 《统计机器学习》 第二版,遇到不清楚的博客记录。 基础预备 极大似然估计和贝叶斯估计是统计推断中两张最常见的参数估计方法,在机器学习中应用十分广泛。 极大似然估计和贝叶斯估计都需要已知总体$X$的概率密度函数$f(x|\theta)$,一组样本$(X_1,X_2,...,X_n)=( 阅读全文
摘要:
在一口气看完项亮老师的 《推荐系统实践》 后,又花费几天看完了王喆老师的 《深度学习推荐系统》 ,虽然学过一门深度学习的课,但是直接看推荐系统的深度学习还是有点不懂的(手动狗头×)。在上一篇的协同过滤后,这一篇来记录协同过滤后推荐系统的发展,也就是 特征工程 。 (图片有点大,可右键点击查看) 推荐 阅读全文
摘要:
最近一段时间,看完了项亮大佬的**《推荐系统实践》,然后开始看和实践王喆老师的新书《深度学习推荐系统》**,整篇博客对自己的代码整理和知识点的回顾。在初次接触后,我对推荐系统的初印象是并不仅仅是算法的学习,还有架构和其他数据处理的知识需要掌握。 推荐系统前沿 之 协同过滤 初次接触推荐系统,看到最多 阅读全文
摘要:
引言 拉格朗日乘子法和原始问题与对偶问题的转换,最近总被人提到,我对网上的教程和书上的知识进行学习,尝试从公式上进行理解,对于几何中的理解稍微会接触到,简单做下笔记以防自己遗漏(防peach🐕) 拉格朗日乘子法 简介 拉格朗日乘子法是用来求解带约束条件的最优化的问题的方法,分为带等式约束和不等式约 阅读全文
摘要:
完结撒花 这段时间(标记:武汉时刻+,整完了吴恩达老师的深度学习视频,随便说一说自己的见解。 体验: 1,老师的声音和语速特别棒,即使是直接听英文的感觉也不是很有难度(没有过度吹捧老师和我自己🐕 2,作业和测验的布置没有直接练习代码而是像是填空一样,对我感觉不是很好,特别是后面,如果深度学习框架没 阅读全文
摘要:
流形学习 低维流形空间映射到高维空间中去(低维 高维,看了一天觉得这样好理解),也就是说一个高维空间可以有一个简单的低维流形空间来刻画。 举个简单的栗子,一个圆在二维空间中需要(x,y)两个坐标参数,而在极坐标系中只需要半径r一个参数就可以刻画出来了,也就是说高维空间中存在性质的冗余。流形学习要做的 阅读全文
摘要:
Principal component analysis(PCA) 中文就是主成成分分析。在学数学建模的时候将这分为了评价类的方法(我实在是很难看出来,在机器学习中是属于无监督学习 降维方法 的一种 线性 降维方法。 举一个最简单的栗子(下图,二维的数据降到一维,就得找到一条直线将所有的点都投影到该 阅读全文