专利详情

专利名称	一种高效的关联主题模型数据处理方法及其系统
申请号	CN200810057989.4	专利类型	发明专利
公开（公告）号	CN101226557	公开（授权）日	2008.07.23
申请（专利权）人	中国科学院软件研究所	发明（设计）人	李文波;孙乐
主分类号	G06F17/30(2006.01)I	IPC主分类号	G06F17/30(2006.01)I
专利有效期	一种高效的关联主题模型数据处理方法及其系统至一种高效的关联主题模型数据处理方法及其系统	法律状态	实质审查的生效
说明书摘要	本发明公开了一种高效的关联主题模型数据处理方法及其系统，其方法为在任务初始化阶段，首先通过主控节点给出初始模型M₀并将其同步到所有的计算节点上，然后划分任务集并将其分布到多个计算节点上进行计算；在任务执行阶段，需要进行若干数据处理，每一轮中首先是每个计算节点的工作线程进行局部并行计算获得关于该节点文档子集的主题分布和模型统计量，并传送到主控节点进行汇总并判断数据处理结果是否收敛。本发明的系统包括一个主控节点和多个计算节点，构成一个集群计算机系统进行并行计算。本发明可以显著提高计算速度和扩大计算目标。