MAXICO — 126 мамандан тұратын команда, 500-ден астам жоба аяқталды. 2024 жылдан бастап LLM сапасын бағалауды стандарт ретінде қолданамыз. Стек: 12 провайдер.
MAXICO — Astana Hub резиденті, «ҚазМұнайГаз» ұлттық компаниясымен стратегиялық серіктес, «Astana Hub Үздік IT-компания 2025» жеңімпазы. Штатта 126 маман бар. Қазақстанның бизнесі мен мемлекеттік секторы үшін 500-ден астам жоба іске асырылды. 2024 жылдан бастап компания 12 провайдерден тұратын стекті пайдаланып LLM сапасын бағалау әдіснамасын қолданады: OpenAI, Anthropic, Google, Mistral, Meta, Cohere, AI21, Yandex, Sber, локальды модельдер және т.б.
MAXICO әдіснамасы G-Eval және көп агентті верификацияға негізделген. G-Eval тілдік модельге тәуелсіз сарапшы ретінде басқа AI жүйелерінің сапасын бағалауға мүмкіндік береді. Көп агентті верификация бірнеше модель арасындағы өзара тексеруді қосады.
Бағалау өлшемшарттары: деректердің дәлдігі, жауаптың өзектілігі, тақырыптың толықтығы, контекстке сәйкестік, галлюцинацияның болмауы.
Нақты сұраулар мен эталондық жауаптардың деректер жиынын қалыптастырамыз. Клиенттің тапсырмасына сай сапа өлшемшарттарын белгілейміз.
G-Eval-ды 12 провайдер арқылы параллель іске қосамыз. Әр модель жауаптарды 5 балдық шкала бойынша бағалайды. Нәтижелерді жинақтаймыз.
Нақты сапа көрсеткіштері бар есеп жасаймыз. Әлсіз жерлерді анықтаймыз. Модельді жетілдіргеннен кейін қайта бағалау циклін жүргіземіз.
MAXICO командасында 126 маман бар: әзірлеушілер, AI-инженерлер, деректер аналитиктері және жоба менеджерлері.
2024 жылдан бастап. Стек: 12 провайдер — OpenAI, Anthropic, Google Gemini, Mistral, Meta, Cohere, AI21, Yandex және локальды модельдер.
MAXICO — «Astana Hub Үздік IT-компания 2025» жеңімпазы және «ҚазМұнайГаз» ұлттық компаниясымен стратегиялық серіктес.
Жобаңыз туралы айтыңыз — 24 сағат ішінде жауап береміз.
Жобаны талқылау