1. 磐创AI首页
  2. Medium

利用外界知识回答有关图像的问题

利用外界知识回答有关图像的问题

KRISP:基于开放领域知识的VQAarxiv论文摘要https://arxiv.org/abs/2012.11014arXiv PDF论文https://arxiv.org/pdf/2012.11014.pdfGitHub https://github.com/facebookresearch/mmf/tree/master/projects/krispFacebook研究https://research.fb.com/publications/krisp-integrating-implicit-and-symbolic-knowledge-for-open-domain-knowledge-based-vqa/中隐含知识与符号知识的整合https://arxiv.org/abs/2012.11014 https://arxiv.org/pdf/2012.11014.pdf https://github.com/facebookresearch/mmf/tree/master/projects/krisp https://research.fb.com/publications/krisp-integrating-implicit-and-symbolic-knowledge-for-open-domain-knowledge-based-vqa/

VQA中最具挑战性的问题类型之一是,当回答问题需要图像中没有的外部知识时。…我们利用两种类型的知识表示和推理,一是从无监督的语言预训练和有监督的训练…中有效地学习到的隐含知识第二,知识库中编码的显性、符号化知识。

…我们结合不同的知识来源,涵盖解决基于知识的问题所需的各种知识。

…KRISP(具有隐式和符号表示的知识推理)在基于开放领域知识的VQA的最大可用数据集OK-VQA上的性能明显优于最新的OK-VQA。…

随时了解最新情况。使用我的其他帖子按类别https://morrislee1234.wixsite.com/website/contactWeb订阅我的帖子https://morrislee1234.wixsite.com/website站点https://morrislee1234.wixsite.com/website/contact https://morrislee1234.wixsite.com/website

领英https://www.linkedin.com/in/morris-lee-47877b7bhttps://www.linkedin.com/in/morris-lee-47877b7b

原创文章,作者:fendouai,如若转载,请注明出处:https://panchuang.net/2021/06/27/%e5%88%a9%e7%94%a8%e5%a4%96%e7%95%8c%e7%9f%a5%e8%af%86%e5%9b%9e%e7%ad%94%e6%9c%89%e5%85%b3%e5%9b%be%e5%83%8f%e7%9a%84%e9%97%ae%e9%a2%98-2/

联系我们

400-800-8888

在线咨询:点击这里给我发消息

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息