如何在可视化问答中使用数据集

4次浏览(最近30天)
Suheer Al-Hadhrami
Suheer Al-Hadhrami 2021年8月25日
回答: Kumar王子 2021年11月19日
我的工作是在视觉问题的回答问题,接受图像和关于它的问题。然后生成问题的答案。我构建了一个由两部分组成的网络:第一部分是CNN模型,它处理图像作为输入。第二个是处理文本的enseble模型LSTM+BiLSTM。数据集有图像路径,问题和答案的列。我为数据集做了所有的预处理步骤。我现在的问题是如何告诉模型将图像和文本分开执行,然后在它们之间进行融合。
上面是我建立的网络。在层必须接受文本,这是一个问题。Im_in必须接受image。我不知道如何处理数据集。
你能建议一种用matlab建立可视化问答问题模型的具体方法吗?
问候,

社区寻宝

在MATLAB Central中找到宝藏,并发现社区如何帮助您!

开始狩猎!