Alibaba Cloud udostępnia swój pierwszy model wnioskowania AI, QwQ: jego poziom wnioskowania jest porównywalny z OpenAI o1, a jego matematyka i programowanie są szczególnie wyjątkowe - Alibaba Cloud 阿里云

Zespół Alibaba Cloud Tongyi ogłosił dziś premierę i równoczesne udostępnienie kodu źródłowego nowego modelu wnioskowania AI, QwQ-32B-Preview. Ewaluacje pokazują, że QwQ (Qwen with Questions) Preview demonstruje zdolności rozumowania naukowego na poziomie studiów podyplomowych, szczególnie w zakresie matematyki i programowania. Jego ogólne możliwości rozumowania są porównywalne z o1 w OpenAI.
Podaje się, że QwQ to najnowszy eksperymentalny model badawczy wprowadzony przez Tongyi Qianwen Qwen Big Model i pierwszy model wnioskowania oparty na sztucznej inteligencji o otwartym kodzie źródłowym opracowany przez Alibaba Cloud.
Zespół Alibaba Cloud Tongyi Qianwen odkrył, że gdy model ma wystarczająco dużo czasu na myślenie, zadawanie pytań i refleksję, jego zrozumienie matematyki i programowania pogłębia się. Dzięki temu QwQ poczyniło przełomowe postępy w rozwiązywaniu złożonych problemów.
W teście GPQA mierzącym zdolność rozwiązywania problemów naukowych, QwQ osiągnął dokładność na poziomie 65,2%, co wskazuje na jego zdolności do rozumowania naukowego na poziomie studiów podyplomowych; w teście AIME QwQ wykazał się zdolnością do rozwiązywania problemów matematycznych ze skutecznością wynoszącą 50%.
W teście MATH-500 QwQ uzyskał lepsze wyniki niż o1-preview i o1-mini, osiągając wysoki wynik 90,6%. W teście LiveCodeBench, oceniającym generowanie złożonego kodu, QwQ odpowiedział poprawnie na połowę pytań i uzyskał dobry wynik w konkursie programistycznym.
Co więcej, w obliczu złożonych problemów QwQ potrafi przeprowadzić głęboką autoanalizę, kwestionować własne założenia i starannie analizować każdy etap swojego procesu rozumowania poprzez przemyślany dialog wewnętrzny.
Na przykład rozwiązując klasyczny problem IQ „Zgadnij kartę”, QwQ zrozumiał rozmowę i wyciągnął wnioski jak dobry myśliciel, aż w końcu podał prawidłową odpowiedź.
Wersja zapoznawcza QwQ-32B jest obecnie dostępna jako oprogramowanie open source na platformach takich jak MoDa Community i HuggingFace. W ciągu zaledwie kilku godzin od premiery zebrała entuzjastyczne recenzje od deweloperów z całego świata.
Niektórzy twórcy uważają, że ten model to „zupełnie nieoczekiwany i szalony krok naprzód”, „najważniejszy przełom w dziedzinie oprogramowania typu open source w tym roku” oraz „daje Chinom przewagę w dziedzinie dużych modeli open source i rozumowania w zakresie sztucznej inteligencji”.
Zespół Tongyi stwierdził jednak, że chociaż QwQ wykazał silne zdolności analityczne, to wciąż jest to eksperymentalny model badawczy. Ma on ograniczenia, takie jak mieszane użycie różnych języków, sporadyczne nieistotne uprzedzenia oraz brak zrozumienia zagadnień zawodowych. W miarę pogłębiania badań i iteracji modeli w przyszłości, problemy te będą stopniowo rozwiązywane.