利用外界知识回答有关图像的问题

利用外界知识回答有关图像的问题

KRISP：基于开放领域知识的VQAarxiv论文摘要https://arxiv.org/abs/2012.11014arXiv PDF论文https://arxiv.org/pdf/2012.11014.pdfGitHub https://github.com/facebookresearch/mmf/tree/master/projects/krispFacebook研究https://research.fb.com/publications/krisp-integrating-implicit-and-symbolic-knowledge-for-open-domain-knowledge-based-vqa/中隐含知识与符号知识的整合https://arxiv.org/abs/2012.11014 https://arxiv.org/pdf/2012.11014.pdf https://github.com/facebookresearch/mmf/tree/master/projects/krisp https://research.fb.com/publications/krisp-integrating-implicit-and-symbolic-knowledge-for-open-domain-knowledge-based-vqa/

VQA中最具挑战性的问题类型之一是，当回答问题需要图像中没有的外部知识时。…我们利用两种类型的知识表示和推理，一是从无监督的语言预训练和有监督的训练…中有效地学习到的隐含知识第二，知识库中编码的显性、符号化知识。

…我们结合不同的知识来源，涵盖解决基于知识的问题所需的各种知识。

…KRISP(具有隐式和符号表示的知识推理)在基于开放领域知识的VQA的最大可用数据集OK-VQA上的性能明显优于最新的OK-VQA。…

随时了解最新情况。使用我的其他帖子按类别https://morrislee1234.wixsite.com/website/contactWeb订阅我的帖子https://morrislee1234.wixsite.com/website站点https://morrislee1234.wixsite.com/website/contact https://morrislee1234.wixsite.com/website

领英https://www.linkedin.com/in/morris-lee-47877b7bhttps://www.linkedin.com/in/morris-lee-47877b7b