Қытайлық ИИ модельдері партия желісін қайталайды немесе өткір тақырыптарға жауап беруден бас тартады — Aleph Alpha
Материал бірнеше дереккөз негізінде жасанды интеллектпен дайындалды — түпнұсқаларға сілтемелер төменде.
Alibaba, DeepSeek және Moonshot AI қытайлық ИИ модельдері мемлекеттік доктринаны жиі қайталайды немесе саяси сезімтал сұрақтарға жауап беруден бас тартады, деп көрсетті Aleph Alpha бенчмаркі. Зерттеу Тяньаньмэнь, Тайвань және Шыңжаңды қоса алғанда 967 тыйым салынған тақырыпты қамтыды; жауаптардың тек 17-ден 41 пайызы ғана теңгерімді деп танылды. Батыстық Claude Sonnet 5 және Mistral Small модельдері сәйкесінше 70 және 92 пайыз жағдайда теңгерімді жауап берді.
Негізгі фактілер
- Aleph Alpha Alibaba (Qwen), DeepSeek және Moonshot AI (Kimi) модельдерін Тяньаньмэнь, Тайвань және Шыңжаңды қоса алғанда, қолмен таңдалған 967 тыйым салынған тақырып бойынша тексерді.
- Aleph Alpha бағалау жүйесі қытайлық модельдер жауаптарының тек 17-ден 41 пайызын ғана теңгерімді деп таныды.
- DeepSeek V4 Pro саяси сезімтал тақырыптардағы сұрақтардың үштен екісіне жауап беруден бас тартты.
- Салыстыруға алынған батыстық Claude Sonnet 5 және Mistral Small модельдері сәйкесінше 70 және 92 пайыз жағдайда теңгерімді жауап берді.
- Nvidia Nemotron Cascade 2 моделі жауаптардың 17 пайызында партиялық үлгілерді көрсетті, мұны Aleph Alpha DeepSeek және Qwen көмегімен жасалған шамамен 3500 оқу мысалымен байланыстырады.
Бенчмарк әдістемесі
Aleph Alpha Тяньаньмэнь, Тайвань және Шыңжаң сияқты қолмен таңдалған 967 тыйым салынған тақырыпты қамтитын бенчмарк әзірледі. Компания Alibaba (Qwen), DeepSeek және Moonshot AI (Kimi) модельдерін тексерді. Aleph Alpha-ның меншікті бағалау жүйесі жауаптардың тек 17-ден 41 пайызын ғана теңгерімді деп таныды. Қалғандары мемлекеттік доктринаны қайталады, жалтарды немесе жауап беруден бас тартты.
Қытайшыл бағыттың таралуы
Қытайшыл бағыт тіпті Қытайды атамайтын сұрақтарға жауаптарда да көрінеді. АҚШ-тағы цензура туралы сұраққа Qwen 3.6 сырттай теңгерімді жауаптан бастады, бірақ Қытайдың жаһандық интернет басқарудағы ұстанымын қорғаумен аяқтады. Орталық Еуропа Азия зерттеулері институтының (CEIAS) бұрынғы зерттеуі ұқсас әсерді анықтады: «адам құқықтары», «оппозиция» немесе «бақылау» терминдеріне модельдер жиі стандартты пекиндік тезистермен жауап берді. Олардың ішінде — «ішкі істерге араласпау қағидаты» және «адамзаттың ортақ тағдыры қауымдастығы».
Дистилденген оқу деректері
Nvidia Nemotron Cascade 2 моделі жауаптардың 17 пайызында партиялық үлгілерді көрсетті. Aleph Alpha мұны DeepSeek және Qwen көмегімен жасалған 9,3 миллион оқу мысалының шамамен 3500-імен байланыстырады. Тайваньды тануды қолдайтын сөз дайындау туралы өтінішке модель бас тартты және оның орнына Пекиннің «бір Қытай» қағидатын қорғайтын патриоттық жауап берді. Nvidia мемлекеттік және корпоративтік тапсырыс берушілер нарығына өз модельдерін барған сайын белсенді түрде ілгерілетуде, онда Aleph Alpha және Cohere де бәсекелеседі.
1 дереккөз
Уақыт · артта қалуы