このモデルは、ビジョンエンコーダーInternViT-300MとQwen2-0.5B-Instructを組み合わせ、8Kのコンテキストウィンドウを備えています。OCR、文書やグラフの分析、動画に関する質問応答などのタスクを対象としています。
情報源によると、画像は448×448ピクセルのタイルに最大12分割できます。OpenGVLabは、選定された一部の視覚タスクで、このモデルが2B~4Bの一部モデルと同等以上の性能を示すと述べています。これらはタスク固有の報告結果です。
重要な理由
コンパクトなサイズと報告されたOCRBenchのスコアにより、メモリに制約のあるローカル視覚言語アプリケーションで注目に値します。結果は独立した検証を受けたものとして提示されていません。
試してみること
仮に試すなら、自分の文書を使ってOCRとグラフ解釈の結果を、より大きな視覚言語モデルと比較してみてください。




会話を始める。