发布时间:2025-02-21 14:14 已有: 人阅读
国家知识产权局信息显示,北京深势科技有限公司申请一项名为“一种引入稠密向量检索器的大语言模型的处理方法和装置”的专利,公开号CN 119398193 A,申请日期为2024年10月。 专利摘要显示,本发明实施例涉及一种引入稠密向量检索器的大语言模型的处理方法和装置,所述方法包括:将一类大语言模型作为第一大语言模型;基于第一大语言模型在对应的定向NLP任务微调中使用的定向文本语料集初始化稠密向量数据库;在第一大语言模型中增加稠密向量检索器和特征融合模块构成第二大语言模型并对其进行训练;训练结束后由第二大语言模型以稠密向量数据库为参考来处理定向NLP任务;并定期更新稠密向量数据库,并定期基于最新的稠密向量数据库对第二大语言模型进行一次评估,并在当次评估不合格时对第二大语言模型进行一次微调。通过本发明既可以保证模型的时效性、又可以降低模型的维护成本、提高模型的经济价值。 天眼查资料显示,北京深势科技有限公司,成立于2018年,位于北京市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本1100.0208万人民币,实缴资本532.3105万人民币。通过天眼查大数据分析,北京深势科技有限公司共对外投资了15家企业,参与招投标项目43次,知识产权方面有商标信息373条,专利信息70条,此外企业还拥有行政许可7个。 |