发明 一种基于BERT和独立循环神经网络的问句分类方法
文本处理 信息处理 数据分析 自然语言处理 软件算法 (文本处理 软件算法) 1人
G06F16/23 G06F16/35 G06F40/30 G06F18/214 G06N3/084 G06N3/0442
摘要:本发明属于自然语言处理领域,具体涉及一种基于BERT和独立循环神经网络(IndRNN)的问句分类方法,包括:实时获取待分类的问句数据,将待分类的问句数据输入到训练好的问句分类模型中,得到分类后的数据;问句分类模型包括BERT模型和基于注意力机制的IndRNN模型;本发明利用BERT模型,得到的向量序列能捕捉更多的内在信息,相对RNN更加高效、能捕捉更长距离的依赖,提高预测精度。