本文源自:金融界
金融界2024年11月11日消息，国家知识产权局信息显示，传播大脑科技（浙江）股份有限公司申请一项名为“基于语义对齐的媒体信息跨模态检索方法、系统及介质”的专利，公开号CN 118916529 A，申请日期为2024年10月。
专利摘要显示，本申请实施例提供了一种基于语义对齐的媒体信息跨模态检索方法、系统及介质，该方法包括：获取查询请求，基于查询请求生成用户查询数据，对用户查询数据进行预处理，得到不同模态下的语义对齐的请求数据；从不同模态的用户请求数据中提取不同模态的特征信息；将多模态特征进行特征融合，得到融合信息，基于融合信息生成统一的特征表示；基于特征表示建立不同模态数据之间的语义关联，得到关联信息；基于自然语言处理技术对关联信息分析，生成查询意图，得到跨模态检索和语义理解的结果，将跨模态检索和语义理解的结果进行展示；通过结合文本、图像、音频和视频等多种模态信息，能够更全面地理解和表达媒体内容，从而提供准确的搜索结果。
