模型:
dandelin/vilt-b32-mlm-itm
Vision-and-Language Transformer (ViLT)模型已在GCC+SBU+COCO+VG上进行了预训练(20万步)。该模型由Kim等人在 ViLT: Vision-and-Language Transformer Without Convolution or Region Supervision 论文中介绍,并于 this repository 首次发布。
免责声明:发布ViLT的团队没有为这个模型撰写模型卡片,因此这个模型卡片是由Hugging Face团队编写的。
(待完成)
您可以使用原始模型进行视觉问答。
(待完成)
(待完成)
(待完成)
(待完成)
(待完成)
@misc{kim2021vilt,
title={ViLT: Vision-and-Language Transformer Without Convolution or Region Supervision},
author={Wonjae Kim and Bokyung Son and Ildoo Kim},
year={2021},
eprint={2102.03334},
archivePrefix={arXiv},
primaryClass={stat.ML}
}