로이터, 중국 AI 기업의 산업 규모 모델 증류 확산 보도
- •로이터가 문서 300여 건을 검토해 중국 AI 기업의 산업 규모 모델 증류 확산을 확인
- •Qwen2.5-72B 학습 사례에는 이중언어 예시 10,750개와 GPT-4o가 생성한 코딩 조정 계획 포함
- •OpenAI와 Anthropic은 경쟁사 모델 학습을 금지했고, 미국 당국자는 중국에 지식재산권 침해 가능성을 경고
로이터는 중국 학술 논문, 특허, 기업 공시, 채용 공고, 정부 문서 등 300여 건을 검토해 중국 AI 개발사들이 미국의 주요 언어 모델 출력물을 이용해 자국의 소형 경쟁 모델을 학습시키는 사례가 늘고 있다고 보도했습니다. 모델 증류(대형 모델의 출력물로 소형 모델을 학습하는 방식)가 학술 실험을 넘어 중국 전역에서 산업적으로 쓰이고 있다고 전했습니다.
증류에서는 ‘교사’ 모델이 만든 답변, 코드, 문제 해결 단계를 ‘학생’ 모델의 학습 자료로 활용합니다. NVIDIA GPU 같은 연산 하드웨어 확보에 어려움을 겪는 중국 기업은 외국 모델에 질의해 재사용 가능한 학습 자료를 만들 수 있습니다. 보도에 따르면 베이징의 무역 제한 강화 속에 NVIDIA 8-GPU H200 서버는 중국 암시장에서 90만 달러에 판매되고 있었습니다.
2024년 11월 상하이교통대 연구진은 OpenAI o1의 응답 약 5,000개를 골라 GPT-4o mini로 번역하고, 이중언어 학습 예시 10,750개를 만들어 알리바바의 Qwen2.5-72B를 추가 학습시켰습니다. 연구진은 증류에 지나치게 의존하면 독창적인 돌파구가 제한될 수 있다고 경고했습니다. 2025년에는 알리바바 연구진도 중국어가 아닌 학습 데이터를 만들고 GPT-4와 GPT-4o로 응답을 평가·선별해 더 작은 Qwen 모델을 학습시켰습니다.
2026년 2월 상하이교통대 연구진과 메이퇀은 GPT-4o로 코딩 작업의 다중 에이전트 조정 계획을 생성해 중국의 소형 모델을 학습시켰습니다. 모델 증류 자체는 합법이며 전 세계에서 쓰이지만, OpenAI와 Anthropic은 서비스 약관으로 자사 모델을 경쟁사 학습에 사용하는 것을 금지합니다. 보도되지 않은 7월 청두 회의에서 미국 상무부 당국자들은 중국 규제 당국에 미국 AI 출력물 수집이 지식재산권 침해에 해당할 수 있다고 경고했습니다.
미국 당국자는 워싱턴이 산업 규모의 증류를 중국 모델과 미국 경쟁 모델 사이의 성능 격차가 좁혀지는 주된 이유로 보고 있다고 말했습니다. 로이터는 NVIDIA 칩 수출 제한 강화로 미국이 중국의 AI 발전을 늦출 선택지가 제한적이며, 워싱턴이 중국의 OpenAI 및 Anthropic 모델 사용을 금지하는 법적 틀을 마련할 수 있다고 전했습니다.
가장 빠르고 정확한 AI 소식, 이메일로 받아보세요