摘要:
1.安装 (1)下载安装 https://blog.csdn.net/weixin_40678266/article/details/103139456 (2)报错 The client is unauthorized due to authentication failure. 解决方法:修改ne 阅读全文
摘要:
1.知识图谱关系图 https://blog.csdn.net/Solitarily/article/details/79750220 2.具体操作步骤 https://blog.csdn.net/u012052268/article/details/88052390 3.一些说明 (1)Class 阅读全文
摘要:
1.找到最优学习率的方法 (1)笨方法——指数提高学习率 从0.0001开始尝试,然后用0.001,每个量级的学习率都去跑一下网络,然后观察一下loss的情况,选择一个相对合理的学习率,但是这种方法太耗时间了。 (2)简单的启发方法【有时间总结】 参考:https://arxiv.org/pdf/1 阅读全文
摘要:
1.ALBERT解决问题 (1)问题 深度学习圈子里一直出现了一些“怪象”,就是堆数据,让模型更复杂,训练出来的效果更好! 之前的BERT,XLNet为什么效果好? 这绝对离不开模型本身的复杂度,一个模型拥有上百亿的参数,效果不好就太对不起我们的资源了。 (2)解决 ALBERT试图解决上述的问题: 阅读全文