西湖大学自然语言处理（五）—— 概率模型

模型

模型的定义

从数学意义上而言，模型是对一个特定任务或者事件的抽象和简化，这种方法使数学计算可行。

概率模型的定义

计算一个随机事件的概率

概率语言模型举例

计算词和句子出现的概率
在这里插入图片描述

极大似然估计

在这里插入图片描述

建模过程

在这里插入图片描述
说明： （ i , i , d ） （i,i,d） （i,i,d）—— 独立同分布

推导过程

在这里插入图片描述

专业术语

在这里插入图片描述

从概率模型到概率语言模型

在这里插入图片描述
在这里插入图片描述

概率分布

专业术语

在这里插入图片描述
说明：参数化——指定一个可计算的方程来计算涉及模型参数定义的概率

概率分布

概率分布的定义：离散随机变量的所有可能值的概率
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

# 自然语言处理 # 人工智能 # 机器学习 # 深度学习
Logo
技术共进，成长同行——讯飞AI开发者社区

技术共进，成长同行——讯飞AI开发者社区

更多推荐

cover

2025 年 HR 的 “生存焦虑” 与技能破局

avatar 讯飞AI开发者社区
cover

湖北大模型备案指南：光谷百万奖励背后的合规之路

avatar 讯飞AI开发者社区
cover

KWI 排名：不止 AI 榜单，更是文明演进的导航仪

avatar 讯飞AI开发者社区