面向基于内积的softmax概率分布的快速采样方法
实质审查的生效
摘要
本发明公开一种面向基于内积的softmax概率分布的快速采样方法，包括：将每一个物品向量q平均分成m段，即将所有物品的每一段向量用聚类方法聚成K个聚类中心
设第i个物品的第m段向量对应的码字索引为im，则对应的码字即为
从而第i个物品向量映射成
设m＝2，并附加一个残差向量
物品向量表示为
将上下文向量平均分成2段，表示为
将所有物品划分为K2个集合，假设k1是第1个码本中的一个码字索引，k2是第2个码本中的一个码字索引，对应的物品集合标记为
基于z和k1、k2，定义物品i被采样的概率
基于z和k1，定义码字索引k2被采样的概率
基于z，定义码字索引k1被采样的概率
原始的softmax概率分布分解成：
基本信息
专利标题 ：
面向基于内积的softmax概率分布的快速采样方法
专利标题（英）：
暂无
公开（公告）号 ：
CN114429221A
申请号 ：
CN202210054758.8
公开（公告）日 ：
2022-05-03
申请日 ：
2022-01-18
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
连德富陈恩红陈矜金斌斌黄旭
申请人 ：
中国科学技术大学
申请人地址 ：
安徽省合肥市包河区金寨路96号
代理机构 ：
北京润平知识产权代理有限公司
代理人 ：
董杰
优先权 ：
CN202210054758.8
主分类号 ：
G06N20/00
IPC分类号 ：
G06N20/00
IPC结构图谱
G
G部——物理
G06
计算；推算或计数
G06N
基于特定计算模型的计算机系统
G06N20/00
机器学习
法律状态
2022-05-20 ：
实质审查的生效
IPC(主分类) : G06N 20/00
申请日 : 20220118
申请日 : 20220118
2022-05-03 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
