From 0635f6d7f10f6a1979e2120abb6c3777e8762df1 Mon Sep 17 00:00:00 2001 From: dog Date: Sun, 13 Jul 2025 13:11:01 +0200 Subject: [PATCH] =?UTF-8?q?edit=20-=20moonshotai=5Fkimi-k2=20-=20=D0=BE?= =?UTF-8?q?=D1=82=D1=87=D0=B5=D1=82=D1=8B?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- README.md | 2 + reports/human_eval_for_ruby_report_full.html | 171 ++++++++++++++++- reports/human_eval_for_ruby_report_total.html | 4 +- reports/test_results.json | 175 +++++++++++++++++- reports/total.md | 2 + 5 files changed, 351 insertions(+), 3 deletions(-) diff --git a/README.md b/README.md index 4839ae0..782e69d 100644 --- a/README.md +++ b/README.md @@ -9,6 +9,7 @@ Результаты тестирования моделей: - google_gemini_2_0_flash_001: 86% - openai_o3_mini_high: 85% +- moonshotai_kimi_k2: 83% - deepseek_deepseek_chat_v3_0324: 82% - google_gemini_2_5_flash_preview: 82% - deepseek_deepseek_chat_free: 78% @@ -32,6 +33,7 @@ - ollama_llama3_2: 25% - ollama_codellama_34b: 17% - qwen_qwen3_235b_a22b: 14% +- google_gemma_3_9b_it: 1% ## Возможности diff --git a/reports/human_eval_for_ruby_report_full.html b/reports/human_eval_for_ruby_report_full.html index be2b805..f98f506 100644 --- a/reports/human_eval_for_ruby_report_full.html +++ b/reports/human_eval_for_ruby_report_full.html @@ -64,13 +64,15 @@

Отчет о тестировании моделей

-

Дата: 2025-07-05 17:00:44

+

Дата: 2025-07-13 13:03:04

Результаты по моделям

+ + @@ -107,11 +109,13 @@

Детальные результаты по задачам

+ + @@ -142,6 +146,8 @@

Детальные результаты по задачам

+ + @@ -165,6 +171,7 @@

Детальные результаты по задачам

+ @@ -188,6 +195,7 @@

Детальные результаты по задачам

+ @@ -220,6 +228,7 @@

Детальные результаты по задачам

+ @@ -242,6 +251,7 @@

Детальные результаты по задачам

+ @@ -271,6 +281,7 @@

Детальные результаты по задачам

+ @@ -298,6 +309,7 @@

Детальные результаты по задачам

+ @@ -325,6 +337,7 @@

Детальные результаты по задачам

+ @@ -350,6 +363,7 @@

Детальные результаты по задачам

+ @@ -377,6 +391,7 @@

Детальные результаты по задачам

+ @@ -407,6 +422,7 @@

Детальные результаты по задачам

+ @@ -431,6 +447,7 @@

Детальные результаты по задачам

+ @@ -458,6 +475,7 @@

Детальные результаты по задачам

+ @@ -486,6 +504,7 @@

Детальные результаты по задачам

+ @@ -513,6 +532,7 @@

Детальные результаты по задачам

+ @@ -540,6 +560,7 @@

Детальные результаты по задачам

+ @@ -568,6 +589,7 @@

Детальные результаты по задачам

+ @@ -596,6 +618,7 @@

Детальные результаты по задачам

+ @@ -624,6 +647,7 @@

Детальные результаты по задачам

+ @@ -651,6 +675,7 @@

Детальные результаты по задачам

+ @@ -684,6 +709,7 @@

Детальные результаты по задачам

+ @@ -705,6 +731,7 @@

Детальные результаты по задачам

+ @@ -731,6 +758,7 @@

Детальные результаты по задачам

+ @@ -764,6 +792,7 @@

Детальные результаты по задачам

+ @@ -787,6 +816,7 @@

Детальные результаты по задачам

+ @@ -814,6 +844,7 @@

Детальные результаты по задачам

+ @@ -842,6 +873,7 @@

Детальные результаты по задачам

+ @@ -866,6 +898,7 @@

Детальные результаты по задачам

+ @@ -892,6 +925,7 @@

Детальные результаты по задачам

+ @@ -918,6 +952,7 @@

Детальные результаты по задачам

+ @@ -948,6 +983,7 @@

Детальные результаты по задачам

+ @@ -975,6 +1011,7 @@

Детальные результаты по задачам

+ @@ -997,6 +1034,7 @@

Детальные результаты по задачам

+ @@ -1031,6 +1069,7 @@

Детальные результаты по задачам

+ @@ -1049,6 +1088,7 @@

Детальные результаты по задачам

+ @@ -1075,6 +1115,7 @@

Детальные результаты по задачам

+ @@ -1106,6 +1147,7 @@

Детальные результаты по задачам

+ @@ -1127,6 +1169,7 @@

Детальные результаты по задачам

+ @@ -1154,6 +1197,7 @@

Детальные результаты по задачам

+ @@ -1180,6 +1224,7 @@

Детальные результаты по задачам

+ @@ -1207,6 +1252,7 @@

Детальные результаты по задачам

+ @@ -1235,6 +1281,7 @@

Детальные результаты по задачам

+ @@ -1262,6 +1309,7 @@

Детальные результаты по задачам

+ @@ -1293,6 +1341,7 @@

Детальные результаты по задачам

+ @@ -1311,6 +1360,7 @@

Детальные результаты по задачам

+ @@ -1337,6 +1387,7 @@

Детальные результаты по задачам

+ @@ -1363,6 +1414,7 @@

Детальные результаты по задачам

+ @@ -1389,6 +1441,7 @@

Детальные результаты по задачам

+ @@ -1415,6 +1468,7 @@

Детальные результаты по задачам

+ @@ -1444,6 +1498,7 @@

Детальные результаты по задачам

+ @@ -1469,6 +1524,7 @@

Детальные результаты по задачам

+ @@ -1493,6 +1549,7 @@

Детальные результаты по задачам

+ @@ -1519,6 +1576,7 @@

Детальные результаты по задачам

+ @@ -1545,6 +1603,7 @@

Детальные результаты по задачам

+ @@ -1576,6 +1635,7 @@

Детальные результаты по задачам

+ @@ -1597,6 +1657,7 @@

Детальные результаты по задачам

+ @@ -1623,6 +1684,7 @@

Детальные результаты по задачам

+ @@ -1652,6 +1714,7 @@

Детальные результаты по задачам

+ @@ -1679,6 +1742,7 @@

Детальные результаты по задачам

+ @@ -1702,6 +1766,7 @@

Детальные результаты по задачам

+ @@ -1730,6 +1795,7 @@

Детальные результаты по задачам

+ @@ -1754,6 +1820,7 @@

Детальные результаты по задачам

+ @@ -1780,6 +1847,7 @@

Детальные результаты по задачам

+ @@ -1806,6 +1874,7 @@

Детальные результаты по задачам

+ @@ -1832,6 +1901,7 @@

Детальные результаты по задачам

+ @@ -1866,6 +1936,7 @@

Детальные результаты по задачам

+ @@ -1884,6 +1955,7 @@

Детальные результаты по задачам

+ @@ -1914,6 +1986,7 @@

Детальные результаты по задачам

+ @@ -1938,6 +2011,7 @@

Детальные результаты по задачам

+ @@ -1962,6 +2036,7 @@

Детальные результаты по задачам

+ @@ -1988,6 +2063,7 @@

Детальные результаты по задачам

+ @@ -2016,6 +2092,7 @@

Детальные результаты по задачам

+ @@ -2041,6 +2118,7 @@

Детальные результаты по задачам

+ @@ -2068,6 +2146,7 @@

Детальные результаты по задачам

+ @@ -2094,6 +2173,7 @@

Детальные результаты по задачам

+ @@ -2120,6 +2200,7 @@

Детальные результаты по задачам

+ @@ -2150,6 +2231,7 @@

Детальные результаты по задачам

+ @@ -2173,6 +2255,7 @@

Детальные результаты по задачам

+ @@ -2201,6 +2284,7 @@

Детальные результаты по задачам

+ @@ -2227,6 +2311,7 @@

Детальные результаты по задачам

+ @@ -2260,6 +2345,7 @@

Детальные результаты по задачам

+ @@ -2278,6 +2364,7 @@

Детальные результаты по задачам

+ @@ -2304,6 +2391,7 @@

Детальные результаты по задачам

+ @@ -2331,6 +2419,7 @@

Детальные результаты по задачам

+ @@ -2359,6 +2448,7 @@

Детальные результаты по задачам

+ @@ -2385,6 +2475,7 @@

Детальные результаты по задачам

+ @@ -2411,6 +2502,7 @@

Детальные результаты по задачам

+ @@ -2443,6 +2535,7 @@

Детальные результаты по задачам

+ @@ -2463,6 +2556,7 @@

Детальные результаты по задачам

+ @@ -2489,6 +2583,7 @@

Детальные результаты по задачам

+ @@ -2513,6 +2608,7 @@

Детальные результаты по задачам

+ @@ -2543,6 +2639,7 @@

Детальные результаты по задачам

+ @@ -2567,6 +2664,7 @@

Детальные результаты по задачам

+ @@ -2592,6 +2690,7 @@

Детальные результаты по задачам

+ @@ -2617,6 +2716,7 @@

Детальные результаты по задачам

+ @@ -2644,6 +2744,7 @@

Детальные результаты по задачам

+ @@ -2670,6 +2771,7 @@

Детальные результаты по задачам

+ @@ -2700,6 +2802,7 @@

Детальные результаты по задачам

+ @@ -2724,6 +2827,7 @@

Детальные результаты по задачам

+ @@ -2749,6 +2853,7 @@

Детальные результаты по задачам

+ @@ -2775,6 +2880,7 @@

Детальные результаты по задачам

+ @@ -2809,6 +2915,7 @@

Детальные результаты по задачам

+ @@ -2828,6 +2935,7 @@

Детальные результаты по задачам

+ @@ -2853,6 +2961,7 @@

Детальные результаты по задачам

+ @@ -2889,6 +2998,7 @@

Детальные результаты по задачам

+ @@ -2908,6 +3018,7 @@

Детальные результаты по задачам

+ @@ -2935,6 +3046,7 @@

Детальные результаты по задачам

+ @@ -2961,6 +3073,7 @@

Детальные результаты по задачам

+ @@ -2986,6 +3099,7 @@

Детальные результаты по задачам

+ @@ -3013,6 +3127,7 @@

Детальные результаты по задачам

+ @@ -3039,6 +3154,7 @@

Детальные результаты по задачам

+ @@ -3067,6 +3183,7 @@

Детальные результаты по задачам

+ @@ -3093,6 +3210,7 @@

Детальные результаты по задачам

+ @@ -3125,6 +3243,7 @@

Детальные результаты по задачам

+ @@ -3143,6 +3262,7 @@

Детальные результаты по задачам

+ @@ -3171,6 +3291,7 @@

Детальные результаты по задачам

+ @@ -3195,6 +3316,7 @@

Детальные результаты по задачам

+ @@ -3221,6 +3343,7 @@

Детальные результаты по задачам

+ @@ -3249,6 +3372,7 @@

Детальные результаты по задачам

+ @@ -3273,6 +3397,7 @@

Детальные результаты по задачам

+ @@ -3299,6 +3424,7 @@

Детальные результаты по задачам

+ @@ -3333,6 +3459,7 @@

Детальные результаты по задачам

+ @@ -3353,6 +3480,7 @@

Детальные результаты по задачам

+ @@ -3382,6 +3510,7 @@

Детальные результаты по задачам

+ @@ -3403,6 +3532,7 @@

Детальные результаты по задачам

+ @@ -3429,6 +3559,7 @@

Детальные результаты по задачам

+ @@ -3463,6 +3594,7 @@

Детальные результаты по задачам

+ @@ -3482,6 +3614,7 @@

Детальные результаты по задачам

+ @@ -3507,6 +3640,7 @@

Детальные результаты по задачам

+ @@ -3533,6 +3667,7 @@

Детальные результаты по задачам

+ @@ -3559,6 +3694,7 @@

Детальные результаты по задачам

+ @@ -3593,6 +3729,7 @@

Детальные результаты по задачам

+ @@ -3611,6 +3748,7 @@

Детальные результаты по задачам

+ @@ -3637,6 +3775,7 @@

Детальные результаты по задачам

+ @@ -3663,6 +3802,7 @@

Детальные результаты по задачам

+ @@ -3689,6 +3829,7 @@

Детальные результаты по задачам

+ @@ -3715,6 +3856,7 @@

Детальные результаты по задачам

+ @@ -3741,6 +3883,7 @@

Детальные результаты по задачам

+ @@ -3768,6 +3911,7 @@

Детальные результаты по задачам

+ @@ -3796,6 +3940,7 @@

Детальные результаты по задачам

+ @@ -3821,6 +3966,7 @@

Детальные результаты по задачам

+ @@ -3850,6 +3996,7 @@

Детальные результаты по задачам

+ @@ -3873,6 +4020,7 @@

Детальные результаты по задачам

+ @@ -3899,6 +4047,7 @@

Детальные результаты по задачам

+ @@ -3925,6 +4074,7 @@

Детальные результаты по задачам

+ @@ -3951,6 +4101,7 @@

Детальные результаты по задачам

+ @@ -3983,6 +4134,7 @@

Детальные результаты по задачам

+ @@ -4004,6 +4156,7 @@

Детальные результаты по задачам

+ @@ -4032,6 +4185,7 @@

Детальные результаты по задачам

+ @@ -4065,6 +4219,7 @@

Детальные результаты по задачам

+ @@ -4083,6 +4238,7 @@

Детальные результаты по задачам

+ @@ -4111,6 +4267,7 @@

Детальные результаты по задачам

+ @@ -4140,6 +4297,7 @@

Детальные результаты по задачам

+ @@ -4161,6 +4319,7 @@

Детальные результаты по задачам

+ @@ -4187,6 +4346,7 @@

Детальные результаты по задачам

+ @@ -4214,6 +4374,7 @@

Детальные результаты по задачам

+ @@ -4242,6 +4403,7 @@

Детальные результаты по задачам

+ @@ -4266,6 +4428,7 @@

Детальные результаты по задачам

+ @@ -4292,6 +4455,7 @@

Детальные результаты по задачам

+ @@ -4318,6 +4482,7 @@

Детальные результаты по задачам

+ @@ -4344,6 +4509,7 @@

Детальные результаты по задачам

+ @@ -4370,6 +4536,7 @@

Детальные результаты по задачам

+ @@ -4396,6 +4563,7 @@

Детальные результаты по задачам

+ @@ -4422,6 +4590,7 @@

Детальные результаты по задачам

+ diff --git a/reports/human_eval_for_ruby_report_total.html b/reports/human_eval_for_ruby_report_total.html index cd0a8bd..9f90d6a 100644 --- a/reports/human_eval_for_ruby_report_total.html +++ b/reports/human_eval_for_ruby_report_total.html @@ -64,12 +64,14 @@

Суммарный отчет о тестировании моделей

-

Дата: 2025-07-05 17:00:44

+

Дата: 2025-07-13 13:03:04

МодельУспешность
google_gemma_3_9b_it100%
google_gemini_2_0_flash_00187%
openai_o3_mini_high85%
moonshotai_kimi_k283%
deepseek_deepseek_chat_v3_032482%
google_gemini_2_5_flash_preview82%
deepseek_deepseek_chat_free79%
google_gemma_3_12b_it google_gemma_3_27b_it google_gemma_3_4b_itgoogle_gemma_3_9b_it inception_mercury_coder_small_beta meta_llama_llama_3_1_70b_instruct microsoft_phi_4_multimodal_instruct mistralai_codestral_2501 mistralai_mistral_small_3_1_24b_instructmoonshotai_kimi_k2 ollama_codellama ollama_codellama_13b ollama_codellama_34b ✓ ✓ ✓✓✓
t1 ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✗ ✓ ✗✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✓✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✗ ✗✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✓ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗
t129 ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✓ ✗ ✗✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✗ ✗✗
t138 ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✗ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✓ ✗ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓
t158 ✗ ✗ ✓ ✓✗ ✓ ✓ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✗ ✓ ✓ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✗ ✓ ✓ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓
t24 ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓
t30 ✓ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✓ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✓ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓
t43 ✓ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗
t46 ✓ ✓ ✗ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✗ ✓ ✗ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓
t54 ✓ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✗ ✓ ✗✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓
t61 ✓ ✓ ✓ ✓✓ ✗ ✗ ✓ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✓ ✓ ✗ ✗ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✗
t66 ✓ ✓ ✓ ✓✓ ✗ ✗ ✓ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✓ ✓ ✓✓
t70 ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✓ ✗ ✗✓ ✗ ✗ ✗ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✓ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✓ ✗ ✗ ✗✗ ✓ ✗ ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✓ ✓ ✓✓ ✗ ✗ ✓ ✗ ✗ ✗✗
t87 ✓ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✓ ✗ ✗ ✗✗ ✓ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✓ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✗ ✗✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✓✓ ✗ ✗ ✗ ✗ ✓ ✗✓ ✗ ✗ ✗
+ + diff --git a/reports/test_results.json b/reports/test_results.json index 0e27d02..d2b3f21 100644 --- a/reports/test_results.json +++ b/reports/test_results.json @@ -1,6 +1,10 @@ { - "timestamp": "2025-07-05 17:00:44", + "timestamp": "2025-07-13 13:03:04", "models": [ + [ + "google_gemma_3_9b_it", + 100 + ], [ "google_gemini_2_0_flash_001", 87 @@ -9,6 +13,10 @@ "openai_o3_mini_high", 85 ], + [ + "moonshotai_kimi_k2", + 83 + ], [ "deepseek_deepseek_chat_v3_0324", 82 @@ -115,11 +123,13 @@ "google_gemma_3_12b_it": true, "google_gemma_3_27b_it": true, "google_gemma_3_4b_it": false, + "google_gemma_3_9b_it": true, "inception_mercury_coder_small_beta": true, "meta_llama_llama_3_1_70b_instruct": true, "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -146,6 +156,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -174,6 +185,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -201,6 +213,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -228,6 +241,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -256,6 +270,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -283,6 +298,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -309,6 +325,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -336,6 +353,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -363,6 +381,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -390,6 +409,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -417,6 +437,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -444,6 +465,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -472,6 +494,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -499,6 +522,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -526,6 +550,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -554,6 +579,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -582,6 +608,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -610,6 +637,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -637,6 +665,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -665,6 +694,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -691,6 +721,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -717,6 +748,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -744,6 +776,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -771,6 +804,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -798,6 +832,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -825,6 +860,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -852,6 +888,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -878,6 +915,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -904,6 +942,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -930,6 +969,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -957,6 +997,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -983,6 +1024,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1009,6 +1051,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1035,6 +1078,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1061,6 +1105,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1087,6 +1132,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1113,6 +1159,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1140,6 +1187,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1166,6 +1214,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1193,6 +1242,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1219,6 +1269,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -1245,6 +1296,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -1271,6 +1323,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1297,6 +1350,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1323,6 +1377,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1349,6 +1404,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1375,6 +1431,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1401,6 +1458,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1427,6 +1485,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -1453,6 +1512,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1479,6 +1539,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1505,6 +1566,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1531,6 +1593,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1557,6 +1620,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1583,6 +1647,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1609,6 +1674,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1636,6 +1702,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1662,6 +1729,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -1688,6 +1756,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1714,6 +1783,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1740,6 +1810,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1766,6 +1837,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1792,6 +1864,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1818,6 +1891,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1844,6 +1918,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -1870,6 +1945,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1896,6 +1972,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -1922,6 +1999,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -1948,6 +2026,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -1974,6 +2053,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2001,6 +2081,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -2027,6 +2108,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2054,6 +2136,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -2080,6 +2163,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2106,6 +2190,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2133,6 +2218,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -2159,6 +2245,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2185,6 +2272,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -2212,6 +2300,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -2238,6 +2327,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -2264,6 +2354,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2290,6 +2381,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2317,6 +2409,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2343,6 +2436,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2369,6 +2463,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2395,6 +2490,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2421,6 +2517,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -2447,6 +2544,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2473,6 +2571,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2499,6 +2598,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2525,6 +2625,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2551,6 +2652,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2577,6 +2679,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2603,6 +2706,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2630,6 +2734,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -2656,6 +2761,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2682,6 +2788,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2709,6 +2816,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2735,6 +2843,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2761,6 +2870,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2787,6 +2897,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -2813,6 +2924,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -2839,6 +2951,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2866,6 +2979,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2893,6 +3007,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2920,6 +3035,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2946,6 +3062,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -2972,6 +3089,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -2999,6 +3117,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3025,6 +3144,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3051,6 +3171,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -3077,6 +3198,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -3103,6 +3225,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3129,6 +3252,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3155,6 +3279,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -3181,6 +3306,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3207,6 +3333,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3233,6 +3360,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -3259,6 +3387,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -3285,6 +3414,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3311,6 +3441,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3337,6 +3468,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -3363,6 +3495,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3389,6 +3522,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3415,6 +3549,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3441,6 +3576,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3467,6 +3603,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3493,6 +3630,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3519,6 +3657,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3545,6 +3684,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3571,6 +3711,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3597,6 +3738,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3623,6 +3765,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3649,6 +3792,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3675,6 +3819,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3701,6 +3846,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3727,6 +3873,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3754,6 +3901,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3780,6 +3928,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -3807,6 +3956,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3833,6 +3983,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": true, @@ -3859,6 +4010,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3885,6 +4037,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3911,6 +4064,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3937,6 +4091,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": true, @@ -3964,6 +4119,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -3990,6 +4146,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4016,6 +4173,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -4042,6 +4200,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4069,6 +4228,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4095,6 +4255,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -4121,6 +4282,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": false, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4147,6 +4309,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4173,6 +4336,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4200,6 +4364,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4226,6 +4391,7 @@ "microsoft_phi_4_multimodal_instruct": true, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": true, "ollama_codellama_13b": true, "ollama_codellama_34b": false, @@ -4252,6 +4418,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4278,6 +4445,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4304,6 +4472,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4330,6 +4499,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": false, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4356,6 +4526,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4382,6 +4553,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": true, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, @@ -4408,6 +4580,7 @@ "microsoft_phi_4_multimodal_instruct": false, "mistralai_codestral_2501": true, "mistralai_mistral_small_3_1_24b_instruct": false, + "moonshotai_kimi_k2": true, "ollama_codellama": false, "ollama_codellama_13b": false, "ollama_codellama_34b": false, diff --git a/reports/total.md b/reports/total.md index 9262f0a..e256d89 100644 --- a/reports/total.md +++ b/reports/total.md @@ -1,7 +1,9 @@ ## Рейтинг +- google_gemma_3_9b_it: 100% - google_gemini_2_0_flash_001: 87% - openai_o3_mini_high: 85% +- moonshotai_kimi_k2: 83% - deepseek_deepseek_chat_v3_0324: 82% - google_gemini_2_5_flash_preview: 82% - deepseek_deepseek_chat_free: 79%
МодельУспешность
google_gemma_3_9b_it100%
google_gemini_2_0_flash_00187%
openai_o3_mini_high85%
moonshotai_kimi_k283%
deepseek_deepseek_chat_v3_032482%
google_gemini_2_5_flash_preview82%
deepseek_deepseek_chat_free79%