社交媒体数据多模态态度分析方法

摘要

本发明提供一种社交媒体数据多模态态度分析方法，包括以下步骤：从社交媒体数据中选取图片，采用带有注意力机制的图片描述方法将图片进行文本转化生成转化文本；对图片的原文本内容与转化文本的内容进行契合度考量；将契合度高的原文本与转化文本进行连接实现两种模态数据的融合；构建图文对数据集并采用上述步骤对其进行数据融合生成整合后文本；利用整合后文本对预训练BERT模型进行训练并优化生成文本态度分析模型，基于该模型对含有图片和文本的推文进行态度分析，本发明的社交媒体数据多模态态度分析方法增加了对社交媒体数据中的有效信息的提取，从而提高态度分析的准确率，相比传统的态度分析方法，提高了对公众态度把控的准确性。