Mistral AI

Mistral AI는 2023년 4월 DeepMind와 Meta FAIR 출신의 Arthur Mensch, Guillaume Lample, Timothée Lacroix가 설립하여 미국 외 지역에서 가장 영향력 있는 AI 연구소 중 하나로 빠르게 성장하였습니다. 회사의 핵심 전략적 선택은 초기 모델을 오픈 웨이트 다운로드로 공개하는 것이었습니다. 2023년 9월 출시된 Mistral 7B는 대부분의 벤치마크에서 LLaMA 2 13B와 동등하거나 더 나은 성능을 보이면서 훨씬 소형이고 빠르게 실행되어 Mistral의 파라미터 효율성 명성을 확립하였습니다. 2023년 12월 출시된 Mixtral 8x7B는 오픈 웨이트 모델 분야에 희소 MoE(Mixture-of-Experts) 아키텍처를 대규모로 도입했습니다. 토큰마다 8개 전문가 서브네트워크 중 2개만 활성화함으로써 Mixtral은 극히 낮은 추론 컴퓨팅 비용으로 GPT-3.5급 성능을 달성하였으며, 이는 업계 전반의 후속 모델 설계에 영향을 미친 중요한 기술적 이정표였습니다. 2024년 4월 출시된 Mixtral 8x22B는 이 MoE 방식을 더 큰 파라미터 규모로 확장하였습니다. Microsoft는 2024년 6월 Mistral에 전략적 투자를 단행해 기업 가치를 약 60억 유로로 평가하고 Mistral 모델을 Azure AI Studio에 통합하였습니다. 이 파트너십을 통해 Mistral은 학습 및 추론 서비스에 Microsoft의 글로벌 Azure H100 GPU 클러스터 인프라에 접근할 수 있게 되었습니다. Mistral은 a16z, Nvidia, Salesforce Ventures로부터도 투자를 유치하여 총 조달액이 10억 달러를 넘었습니다. EU 주권 차원은 Mistral의 포지셔닝의 핵심입니다. 유럽 정책 입안자들은 EU 규제 프레임워크 내에서 경쟁력 있는 프런티어 AI 개발이 가능하다는 증거로 이 회사를 자주 인용합니다. 오픈 라이선싱 방식은 기술 투명성에 대한 EU의 선호와 일치합니다. 회사는 파리를 AI 허브로 자리매김하려는 프랑스 정부 이니셔티브에 참여하고 있으며, 미국 본사 AI 공급자의 대안을 원하는 유럽 기업들이 그 모델을 사용하고 있습니다. 컴퓨팅 의존 측면에서 Mistral의 학습 실행은 클라우드 파트너를 통해 접근하는 대규모 NVIDIA H100 클러스터에서 이루어집니다. 더 큰 모델 패밀리와 상업용 API 서비스(La Plateforme)로 확장함에 따라 GPU 용량에 대한 수요는 비례하여 증가하며, 유럽이라는 정체성에도 불구하고 다른 프런티어 연구소와 동일한 H100/H200 조달 파이프라인에 놓입니다. H100 특정 지역 수출을 제한하는 수출 통제 규정은 Mistral의 운영에 직접적인 영향을 미치지 않지만, 운영 환경의 경쟁 구도를 형성합니다.