摘要: 数据层面: 过抽样 直接复制,即不断复制类别样本数少的类别样本。 插值法:通过对样本归一化,采样,求得样本分布,极值,均值等,然后根据样本分布,极值,均值来生成新样本来扩充样本数目。 欠抽样: 直接删除,随机减少多数类样本的数量。 算法层面: Weighted loss function,一个处理非 阅读全文
posted @ 2019-11-21 22:22 SENTIMENT_SONNE 阅读(598) 评论(0) 推荐(0) 编辑
摘要: 一般在神经网络中, softmax可以作为分类任务的输出层。 输出n个类别选取的概率,并且概率和为1。 i​代表的是第i个神经元的输出,zi是下面 loss function表示的是真实值与网络的估计值的误差。交叉熵的函数是这样的 yi​表示真实的分类结果。 求导。首先,我们要明确一下我们要求什么, 阅读全文
posted @ 2019-11-10 16:49 SENTIMENT_SONNE 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 我们平时使用tf.Saver()保存的模型是checkpoint格式的, # construct graph! ... # add save/restore ops saver = tf.train.Saver() ... # save after training save_path = save 阅读全文
posted @ 2019-11-06 14:13 SENTIMENT_SONNE 阅读(348) 评论(0) 推荐(0) 编辑
摘要: find index of top 3 largest values of each column: df1.apply(lambda s: pd.Series(s.nlargest(3).index)) map dataframe column df["ItemIdx"] = df["questi 阅读全文
posted @ 2019-11-01 10:57 SENTIMENT_SONNE 阅读(176) 评论(0) 推荐(0) 编辑
摘要: brew update --debug --verbose brew install wget xcode-select --install 以上都不行 Error: No such file or directory @ dir_chdir - /usr/local/Cellar 卸载重装homw 阅读全文
posted @ 2019-10-13 23:20 SENTIMENT_SONNE 阅读(453) 评论(0) 推荐(0) 编辑
摘要: 反向传播的一个手算例子:https://blog.csdn.net/weixin_38347387/article/details/82936585 这里主要是靠这个文章学的pytorch:https://www.jianshu.com/p/52684285e335 我们首先使用 numpy 来实现 阅读全文
posted @ 2019-10-08 17:30 SENTIMENT_SONNE 阅读(176) 评论(0) 推荐(0) 编辑
摘要: batch size的设置经验: batch_size=1的极端,每次修正方向取决于单个样本,横冲直撞难以收敛。合理范围增大batch size,提高内存利用率,跑完一次epoch所需迭代次数减少。但是不能盲目增大,因为会内存溢出,想要达到相同精度训练时间变长,batchsize增加到一定程度,其确 阅读全文
posted @ 2019-09-29 13:05 SENTIMENT_SONNE 阅读(180) 评论(0) 推荐(0) 编辑
摘要: https://blog.csdn.net/zuolovefu/article/details/79024899 https://www.cnblogs.com/stillcoolme/p/10576563.html 阅读全文
posted @ 2019-09-24 12:55 SENTIMENT_SONNE 阅读(283) 评论(0) 推荐(0) 编辑
摘要: open new project,选择interpreter:/Users/jingyuli/miniconda3/envs/tf/bin/python3.5 安装新的api: conda-env list source activate tf pip install gensim pip inst 阅读全文
posted @ 2019-09-23 13:12 SENTIMENT_SONNE 阅读(114) 评论(0) 推荐(0) 编辑
摘要: 先anaconda open anaconda prompt $ conda create -n tensorflow python=3.5 确保名叫tensorflow的环境已经被成功添加:conda info --envs $ activate tensorflow. $ conda insta 阅读全文
posted @ 2019-09-22 19:50 SENTIMENT_SONNE 阅读(547) 评论(0) 推荐(0) 编辑