随笔分类 -  Machine Learning

Circle Loss: A Unified Perspective of Pair Similarity Optimization
摘要：Circle Loss: A Unified Perspective of Pair Similarity Optimization 本文从一个统一的角度来看待 成对的 相似度 优化问题 (Pair Similarity Optimization)，这个问题的目的是让不同类别之间的相似度 $S_n$ 阅读全文
posted @ 2020-04-08 19:09 默写年华 阅读(2146) 评论(0) 推荐(1)
Pointwise Depthwise Groupwise Convolution
摘要：Pointwise/ Depthwise/ Groupwise 这三种方法都是在标准卷积的基础上进行修改，以达到参数削减，同时保证准确率能够满足要求的目的 标准卷积示意图： 这里假设卷积层的输入通道数为 $C_{in}$,输出通道数为 $C_{out}$,假设采用 k k 大小的卷积核来进行卷积，那 阅读全文
posted @ 2019-09-18 12:01 默写年华 阅读(2302) 评论(0) 推荐(0)
梯度累加实现 “显存扩大"
摘要：参考： "PyTorch中在反向传播前为什么要手动将梯度清零？ Pascal的回答 知乎" pytorch会在每一次 后进行梯度计算，但是 梯度不会自动归零，如果不进行手动归零的话，梯度会不断累加 1.1 传统的训练一个 batch 的流程如下： 获取loss: 输入图像和标签，通过infer计算得 阅读全文
posted @ 2019-07-11 12:32 默写年华 阅读(3472) 评论(0) 推荐(0)
Ablation study 2018-11-10
摘要：Ablation study: 消融研究，指通过移除某个模型或者算法的某些特征，来观察这些特征对模型效果的影响 以下摘自：https://www.quora.com/In the context of deep learning what is an ablation study An ablati 阅读全文
posted @ 2018-11-10 11:39 默写年华 阅读(1688) 评论(1) 推荐(1)
RSS 解析之 feedpaser 2018-10-02
摘要："参考:https://blog.csdn.net/lilong117194/article/details/77323673" RSS的相关介绍 1. RSS的介绍： "https://wikipedia.org/wiki/RSS" 2. RSS的XML格式介绍：http://www.w3scho 阅读全文
posted @ 2018-10-02 16:05 默写年华 阅读(184) 评论(0) 推荐(0)
Lp距离 2018-09-28
摘要：特征空间中两个实例点的距离是两个实例点相似程度的反应，其中Lp距离的定义如下： $L_p(x_i,x_j)=(\sum_{l=1}^n{|x_i^{(l)} x_j^{(l)}|^p})^{\frac{1}{p}} (p\geq1)$ \ 当 p = 1 时，称为曼哈顿距离，即: $L_1(x_i, 阅读全文
posted @ 2018-09-28 20:48 默写年华 阅读(1399) 评论(0) 推荐(1)
几种范数的简单介绍
摘要：https://blog.csdn.net/shijing_0214/article/details/51757564 阅读全文
posted @ 2018-08-21 19:41 默写年华 阅读(222) 评论(0) 推荐(0)
Data Augmentation
摘要：数据增广 是对训练数据进行某些自定义加工，以提高网络对数据的适应能力，特别是在数据不足的时候，可以借此来避免过拟合的问题。 通常的数据增广的做法是对样本 添加噪声、旋转拉伸、光照明暗、色度处理等。 阅读全文
posted @ 2018-08-21 19:41 默写年华 阅读(181) 评论(0) 推荐(0)
VOC0712
摘要：1. VOC: 20 object classes Person : person Animal : bird, cat, cow, dog, horse, sheep Vehicle : aeroplane, bicycle, boat, bus, car, motorbike, train In 阅读全文
posted @ 2018-08-21 19:38 默写年华 阅读(133) 评论(0) 推荐(0)
精确率、准确率、召回率
摘要：TP : Ture Positive 把正的判断为正的数目 True Positive,判断正确，且判为了正，即正的预测为正的。 FN : False Negative 把正的错判为负的数目 False Negative,判断错误，且判为了负，即把正的判为了负的 FP : False Positiv 阅读全文
posted @ 2018-08-21 19:38 默写年华 阅读(22804) 评论(0) 推荐(0)
SSD的安装与测试, invalid pointer double free解决方案
摘要：I suggest you use not , and use . Now the best solution is to remake with I think. What’s more, Here is something I suggest: when making openCV, I str 阅读全文
posted @ 2018-08-21 19:35 默写年华 阅读(894) 评论(0) 推荐(0)
Regression
摘要：什么是回归问题？ 回归问题即拟合问题，利用现有的数据，找出一个数学表达式，这个表达式能很好地描述这些数据的变化趋势。 阅读全文
posted @ 2018-08-21 19:30 默写年华 阅读(142) 评论(0) 推荐(0)
SSD: Single Shot Multibox Detector
摘要：1. Jaccard系数 : 用来比较两个有限集合之间的相似度，越大则相关性越高： Jaccard距离 :用于描述集合之间的不相似度 symmetric difference(对参差): 2. NMS(non maximum supression) : 抑制不是极大值的元素，搜索局部的极大值，这个局 阅读全文
posted @ 2018-08-21 19:27 默写年华 阅读(186) 评论(0) 推荐(0)
Receptive field(感受野)
摘要：终于在知乎上中找到[深度神经网络中的感受野(Receptive Field) 蓝荣祎的文章 知乎 http://zhuanlan.zhihu.com/p/28492837](https://zhuanlan.zhihu.com/p/22627224) 算是弄清了基本原理，记录以备忘 1.先举个例子： 阅读全文
posted @ 2018-08-21 19:26 默写年华 阅读(414) 评论(0) 推荐(0)
sigmiod方程
摘要：![sigmoid function](https://upload-images.jianshu.io/upload_images/9070639-1b5658d374f73f40.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240) 阅读全文
posted @ 2018-08-21 19:25 默写年华 阅读(222) 评论(0) 推荐(0)
What is fit and overfit
摘要：1. In statistics, goodness of fit refers to how closely a model's predicted values match the observed(true) values 2. overfit : A model that has learn 阅读全文
posted @ 2018-08-21 19:21 默写年华 阅读(143) 评论(0) 推荐(0)