首页/ 北京搜狗信息服务有限公司/ 专利详情

一种词向量的训练方法和装置

基本信息

申请号 CN201610179115.0 申请日 -
公开（公告）号 CN105786782B 公开（公告）日 2018-10-19
申请公布号 CN105786782B 申请公布日 2018-10-19
分类号 G06F17/22;G06F17/27;G06F17/30 分类 计算；推算；计数;
发明人 邢宁;刘明荣;许静芳;常晓夫;王晓伟 申请（专利权）人 北京搜狗信息服务有限公司
代理机构 北京集佳知识产权代理有限公司 代理人 北京搜狗信息服务有限公司
地址 100084 北京市海淀区中关村东路1号院9号楼搜狐网络大厦9层02房间
法律状态 -

摘要

摘要 本发明提供了一种词向量的训练方法和装置，其中，所述方法包括：抓取互联网网页，获取训练语料，保存在语料库中；对语料库中的每个训练语料分别作分词处理，得到每个训练语料对应的有序词集合；根据预先收集的用户查询日志构建词表；将所述语料库中保存的各训练语料分发至分布式词向量学习模型中的各节点；配置所述分布式词向量学习模型对所述词表中的各词进行周期性的词向量训练，得到所述词表中各词对应的词向量。本发明提供了一种词向量的训练方法和装置，使得训练得到的词向量能够很好地适用于搜索业务中，并且能够实现快速迭代的高质量词向量的训练。