2024-06-10 - 大模型技术及交叉应用- 第一章 - 清华大学 - 刘知远

摘要

2024-06-10 周一 杭州 雨

小记: 自从5月底的考试结束以后,连续3周基本无休,今天终于可以腾出手来做些自己喜欢的事情了

课程内容

课程大纲

自然语言处理基础

小结: 什么叫自然语言处理,也就是让机器像人一样理解文字语言所具备的能力,使得机器像人一样理解并且可以进行自然语言的处理决策。语言是人类之所以成为万物之长的一个重要原因,其他生物界可以利用声音表示愤怒和求偶的行为,这是一种最基本的交流,但是并没有完整的语义语法体系。而语言文字在人类有书写记录的记载上也不过才千年的历史,人类便创造了如此璀璨的的文明,因此机器对于自然语言的处理能力是一种有效的智能衡量标准和有效参考。

图灵测试:近代以来,回溯人工智能的发展史,阿兰-图灵是一个无法绕开的人物,他参与的二战的密码破解团队成功的破解德军的军事密码,因此加速了二战的结束,又因为他是同性恋而被政府迫害,最终吃下涂有氰化物的毒苹果自杀身亡。天才往往不会自恋到用自己的名字命名什么,图灵测试最开始的名称为模仿游戏,只是好事者喜欢这样罢了。我尊重同性恋的存在,现今世界上很多天才也都是同性恋,或许是他们基因里衍生的馈赠,或许是生命诞生之初就被赋予的禁忌。潘多拉魔盒总是伴随着诸多禁忌,我是一个纯粹的庸才,不过我只是尊重和理解。

自然语言处理基本任务和应用

  • 自然语言基本任务

小结: 自然语言的基本任务任务包括,词性分析,语义识别,消指分析,依存关系等等,通过这些基本任务,可以使得机器有一套标准方法和流程实现对自然语言的拆分和理解,从而形成一套有效的标准和方法。

  • 自然语言应用场景







a. 搜索引擎和在线广告: 语义相似度匹配
b. 知识图谱(结构化数据: 知识信息的载体): 这个世界信息相关的实体构建成为一个巨大的网络
c. 机器阅读
d. 智能语音助手
e. 自然语言处理
f. 情感分类与意见挖掘
g. 计算社会科学

自然语言处理基础-词表示与语言模型

小结: WC ,这个信息量太大了,包含很多数学知识,向量,矩阵,线性代数,微积分,权重,如果没有上过大学的基础学科,真的很难理解,有些内容我甚至有点头疼着理解的,数学就是这样一个数学公式就那么短短一行就可以包含很多维度的信息。

大模型基础-大模型之旅

大模型基础-应用实例

a. 自然语言对话
b. 文生图:DALL-E 2(5B)
c. 搜索引擎 AI: WebGPT

大模型基础-编程环境和 GPU 服务器介绍

总结

端午安康,多吃不胖

posted @ 2024-06-10 15:39  流雨声  阅读(24)  评论(0编辑  收藏  举报