摘要: 去年11月份,OpenAI推出了ChatGPT,见识了大型语言模型的威力后, 很多人过来问我,hey,你们搞自然语言处理的AI工程师们,以后还有活干吗。记得我当时很淡定的回答,你看大型超市出来后,小卖部们还不是完全没有倒闭,而且你看小卖部的新版,小便利店不是依旧不可缺少,到处都是。当时我提这个比喻的 阅读全文
posted @ 2023-12-18 09:03 dagis 阅读(13) 评论(0) 推荐(0) 编辑
摘要: 记得几年前,刚被安排到机器学习团队,我问组长,机器学习,要学很多数学吗?记得他是这么回答,其实我们都是用各种库,并不是需要深度的掌握后面的数学原理。 过去几个月面试了很多来应聘机器学习工程师的小伙子,各种库使用起来非常麻溜,但是如果叫他们亲自计算个东西,没有几个能正确的算出来,比如说最简单的准确度p 阅读全文
posted @ 2022-05-18 04:09 dagis 阅读(1135) 评论(1) 推荐(5) 编辑
摘要: 建议大伙有空还是自己亲自读一下,虽然有点长,188页ppt。 https://docs.google.com/presentation/d/1bwJDRC777rAf00Drthi9yT2c9b0MabWO5ZlksfvFzx8/edit#slide=id.gef9b05119a_0_288 很多诸 阅读全文
posted @ 2021-12-10 05:55 dagis 阅读(572) 评论(2) 推荐(2) 编辑
摘要: NER为什么那么难 命名实体识别(Name Entity Recognition) 是自然语言处理中一个比较基础的问题。要解决的问题是,从unstructure的文本当中找到实体并归类。当然我这么定义已经有了一定的bias,认为是先找实体在归类,但实现过程则并不一定如此。 定义一般来说都比较抽象,我们举一些例子来理解一 阅读全文
posted @ 2021-10-09 05:23 dagis 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 聊聊Facebook的wav2vec-u 阅读全文
posted @ 2021-09-18 05:12 dagis 阅读(531) 评论(0) 推荐(1) 编辑
摘要: 机器学习项目经历的若干感想 阅读全文
posted @ 2021-07-05 05:41 dagis 阅读(653) 评论(0) 推荐(1) 编辑
摘要: 概念篇-多分类多标签 阅读全文
posted @ 2021-05-22 04:47 dagis 阅读(354) 评论(0) 推荐(0) 编辑
摘要: 上一篇文章提到了模型不环保这个话题。这篇文章就这个问题展开唠叨一下。 自从BERT, GPT此类的大型模型诞生以来,小作坊们除了把pre-trained的模型拿过来微调一下,就束手无策了,因为成本实在是太高,实在不宜重现。而大型网络继续扩大,似乎并没有停下脚步,模型计算量的增加速度大大超过了摩尔定律 阅读全文
posted @ 2021-04-20 04:36 dagis 阅读(316) 评论(0) 推荐(0) 编辑
摘要: 八卦一则 阅读全文
posted @ 2021-03-26 16:01 dagis 阅读(521) 评论(0) 推荐(0) 编辑
摘要: 让人头疼的AI bug 阅读全文
posted @ 2021-03-04 19:44 dagis 阅读(316) 评论(0) 推荐(0) 编辑