llama3-llava-next-8b-hf-2412 | 41.86 | 18.97 | 23.08 | 25.00 | nan | nan |
gpt-4o-2412 | 76.74 | 96.55 | 76.92 | 85.00 | nan | nan |
gpt-4o-mini-2412 | 62.79 | 75.86 | 53.85 | 60.00 | nan | nan |
fuyu-8b-2412 | nan | 1.72 | 0.00 | nan | nan | nan |
llava-1.5-13b-hf-2412 | 30.23 | 0.00 | 0.00 | 65.00 | nan | nan |
llava-1.5-7b-hf-2412 | 32.56 | 0.00 | 0.00 | 45.00 | nan | nan |
llava-v1.6-mistral-7b-hf-2412 | 37.21 | 15.52 | 15.38 | 55.00 | nan | nan |
llava-v1.6-vicuna-13b-hf-2412 | 41.86 | 17.24 | 15.38 | 35.00 | nan | nan |
llava-v1.6-vicuna-7b-hf-2412 | 23.26 | 6.90 | 15.38 | 20.00 | nan | nan |
MiniCPM-V-2_6-2412 | 51.16 | 15.52 | 15.38 | 40.00 | nan | nan |
llava-gemma-2b-2412 | 30.23 | 3.45 | 0.00 | 20.00 | nan | nan |
molmo-7b-d-0924-2412 | 58.14 | 12.07 | 15.38 | 15.00 | 19.00 | 3.44 |
molmo-72b-0924-2412 | 55.81 | 36.21 | 46.15 | 55.00 | nan | nan |
mc-sft-llava_next_8b-mcqa_v3_12_25_277k-2411 | 11.63 | 67.24 | 23.08 | 25.00 | nan | nan |
qwen2-vl-7b-instruct-2412 | 41.86 | 6.90 | 15.38 | 37.50 | 8.00 | 13.74 |
llama-3.2-11b-vision-instruct-2412 | 44.19 | 20.69 | 23.08 | 25.00 | nan | nan |
qwen2-vl-72b-instruct-2412 | nan | nan | nan | nan | 0.00 | 9.54 |
mc-sft-llava_next_8b-mcqa_v3_12_25_277k-2412 | 20.93 | 67.24 | 38.46 | 45.00 | nan | nan |
mc-vsft-llama3_llava_next_8b-mcvqa_v4_11_21_80k-2412 | 55.81 | 60.34 | 30.77 | 55.00 | nan | nan |
mc-vsft-llava_v1.6_vicuna_13b-mcvqa_v4_11_21_80k-2412 | 74.42 | 62.07 | 53.85 | 70.00 | nan | nan |
mc-sft-qwen2_vl_7b-mcqa_v3_12_25_277k-2412 | 46.51 | 65.52 | 38.46 | 45.00 | nan | nan |
mc-vsft-qwen2_vl_7b-2412 | 65.12 | 62.07 | 23.08 | 75.00 | nan | nan |
mc-vsft-qwen2_vl_2b-2412 | 58.14 | 17.24 | 15.38 | 70.00 | nan | nan |
mc-point-qwen2_vl_7b-2502 | 51.16 | 67.24 | 38.46 | 47.50 | 40.00 | 22.14 |
mc-bbox-qwen2_vl_7b-2502 | nan | nan | nan | nan | 38.00 | 1.53 |
mc-base-qwen2_vl_7b-2502 | 53.49 | 69.83 | 38.46 | 55.00 | 38.00 | 20.99 |
mc-base-qwen2_vl_7b-v2-ckpt2400-2502 | 76.74 | 70.69 | 46.15 | 55.00 | 79.00 | 20.99 |
mc-base-qwen2_vl_7b-v2-ckpt3200-2502 | 69.77 | 68.10 | 38.46 | 55.00 | 84.00 | 24.43 |
mc-base-qwen2_vl_2b-v2-ckpt1600-2502 | 51.16 | 31.03 | 38.46 | 40.00 | 32.00 | 8.02 |
mc-base-qwen2_vl_2b-v2-ckpt4000-2502 | nan | nan | nan | nan | 39.00 | 16.79 |
mc-base-llava_next_vicuna_13b-ckpt4000-2502 | 48.84 | 60.34 | 46.15 | 40.00 | 60.00 | 15.27 |
mc-reason-qwen2_vl_7b-ckpt2400-2502 | 60.47 | 65.52 | 52.30 | 32.50 | 0.00 | 0.00 |