주요 내용
- 오늘 Meta는 차세대 대규모 오픈소스 언어모델 Llama 2를 공개합니다.
- Llama 2는 연구와 상용(商用) 목적을 위해 무료로 제공됩니다.
- Microsoft는 Meta와 오랜 협력 관계를 유지해오고 있으며, Llama 2를 활용하는 주요 파트너로서 파트너십을 더욱 확대합니다.
- Meta는 오늘날 AI 기술 발전에 있어 개방형 혁신(오픈이노베이션)의 가치를 믿는 다양한 테크, 학계, 정책 관계자와 기업들의 지원에 힘입어, Llama 2의 액세스를 개방하고자 합니다.
- Meta는 책임감 있는 AI 개발을 위해 노력하고 있으며, Llama 2 이용자 역시 이러한 책임감을 지니고 이용할 수 있도록 여러 리소스를 제공하고 있습니다.
최근 생성형 AI를 비롯한 인공지능(AI) 분야의 혁신은 대중의 상상력을 자극하고, AI 기술이 가진 잠재력을 증명하고 있습니다. AI 기술은 새로운 경제적·사회적 기회를 창출하고, 사람들이 놀라운 일을 해낼 수 있도록 돕는 한편, 개인과 크리에이터, 기업들이 새로운 방식으로 스스로를 표현하고 서로 연결될 수 있도록 합니다.
Meta는 오늘날의 AI 모델, 특히 급속도로 발전 중인 생성 AI 분야의 개발에 보다 개방적인 접근 방식이 필요하다고 믿습니다. 개방형 AI 모델은 곧 모두의 혜택으로 이어질 수 있기 때문입니다. 개별 기업과 스타트업, 사업가 및 연구원들이 혼자서는 직접 구축하기 어려운 규모의 강력한 컴퓨팅 파워 기반 도구를 제공한다면, 새로운 실험과 혁신을 견인할 것이며, 이는 궁극적으로 경제 그리고 사회적 혜택으로 돌아올 것입니다.
또한 Meta는 개방형 접근 방식이 보다 안전하다고 믿습니다. 현존하는 AI 모델에 대한 액세스를 개방한다면, 여러 개발자와 연구원들이 하나의 커뮤니티를 형성해 함께 성능을 테스트하고, 빠르게 문제점을 찾아 해결할 수 있습니다. 다른 사람들이 AI 도구를 활용하는 방식을 지켜보는 것만으로 Meta 팀 또한 새로운 걸 배우고, 도구를 더 발전시키며, 취약한 부분을 개선해나갈 수 있습니다.
Meta는 AI 발전을 위해, 10년이 넘는 기간동안 리서치, 오픈소싱, 관련 학술 및 산업계와의 협업을 진행한 바 있습니다. 이 과정에서 개방형혁신(오픈이노베이션)이 어떻게 더 많은 사람들에게 혜택을 주는지 직접 목격할 수 있었습니다. 개발자와 연구원들의 주도로 현재 수십 개의 대규모 언어모델이 출시되었으며, 이를 기반으로한 새로운 생성형 AI 비즈니스들도 선보이고 있습니다. Meta의 Llama 1은 연구원들로부터 100,000건이 넘는 액세스 요청을 받는 등 뜨거운 관심을 받고 있으며, Llama를 기반으로 만들어진 멋진 결과물들이 탄생하고 있습니다.
이제 Meta는 차세대 대규모 언어모델인 ‘Llama 2’를 오픈소스로 공개하고, 연구와 상업적 용도(commercial use) 모두 무료로 활용할 수 있도록 할 방침입니다. 상용이 가능한 범위에는 미세조정(fine-tuning)된 대화형 버전을 비롯해 모델 가중치와 사전훈련 모델의 시작코드가 포함됩니다. 최근 사티아 나델라(Satya Nadella) Microsoft CEO가 연례 파트너 컨퍼런스 Microsoft Inspire에서 밝힌 바와 같이, Microsoft는 Llama 2의 주요한 파트너로서 Meta와 함께합니다. 이로써 우리의 파트너십을 한 단계 끌어올리고 생성형 AI에 대한 공동의 노력을 확대해나갈 것입니다. 오늘부터 Llama 2를 Microsoft Azure(마이크로소프트 애저) AI 모델 카탈로그에서 만나볼 수 있으며, Microsoft Azure 플랫폼을 사용하는 개발자들은 Llama 2를 활용해 신규 개발을 진행하거나, 콘텐츠 필터링과 안전 기능을 위한 클라우드 기반의 도구를 활용할 수 있습니다. 또한 Llama 2는 윈도우에서 로컬 운영되도록 최적화 돼, 개발자들이 다양한 플랫폼의 고객들을 위한 생성 AI 경험을 구축할 때에도 효율적으로 작업할 수 있습니다. Llama 2는 AWS(아마존웹서비스)와 Hugging Face(허깅 페이스)를 비롯한 다른 클라우드 제공업체에도 도입되었습니다.
Microsoft와 Meta의 오랜 파트너십은 많은 기업과 개인에게 혜택을 주었습니다. Meta와 Microsoft는 상호교환이 가능한 AI 프레임워크를 위한 오픈 생태계를 구축하고, 최첨단 AI 기술 개발을 위해 연구 논문을 공동 집필했습니다. Meta와 AI 커뮤니티가 함께 만든 선도적인 AI 프레임워크 ‘PyTorch(파이토치)’의 Azure 도입을 확대하기 위해 협력하고 있으며, 파이토치 재단의 창립 멤버로도 함께 활동하고 있습니다. Microsoft와 Meta는 최근 Partnership on AI의 ‘합성 미디어에 대한 단체 행동의 프레임워크(Framework for Collective Action on Synthetic Media)’ 이니셔티브의 지지자로 가입한 바 있습니다. 이러한 저희의 파트너십은 AI를 넘어 메타버스까지 확장돼, 미래형 업무와 엔터테인먼트를 위한 몰입형 경험을 제공할 계획입니다.
이번 파트너십의 확장을 통해 Microsoft와 Meta는 AI 분야에서 보다 개방적인 접근 방식을 확대하고, 원천적인 AI 기술에 대한 접근성을 높임으로써 전 세계 비즈니스 생태계가 보다 많은 혜택을 누리는데 기여하고자 합니다. 오늘날 AI 기술의 접근성 확대를 지지하는 것은 Meta와 Microsoft만이 아닙니다. 전 세계적으로 다양한 지지자들 역시 이러한 접근 방식을 지지하고 있습니다. 여기에는 초기 단계부터 피드백을 제공하고 Llama 2로 신제품을 구축하기를 기대하는 회사들과 자사 제품에 Llama 2를 포함할 계획인 클라우드 제공업체, 안전하고 책임감있는 대규모 생성형 모델의 도입을 위해 Meta와 협력하고 있는 연구기관, 테크, 학계 및 정책 관계자들이 있습니다.
책임감 있는 대규모 언어 모델
Meta의 오픈소스 공개는 투명성과 접근성을 향상합니다. Meta는 AI가 사회 발전에 크게 기여한 동시에 리스크도 동반한다는 것을 인지하고 있습니다. 따라서 Meta는 책임감 있는 AI 개발에 기여하고자 최선을 다하고 있으며, Llama 2 이용자 역시 이러한 책임감을 지니고 이용할 수 있도록 여러 리소스를 제공하고 있습니다.
- 레드팀 활동: Meta는 조직 내외부적 노력을 기울이며, 미세조정된 AI 모델들의 안전성 테스트를 위한 레드팀을 운영했습니다. 레드팀은 모델의 미세조정 과정을 용이하게 하기 위해 적대적 프롬프트(명령어)를 생성했습니다. 또한 미세조정된 모델들 사이의 성능 차이를 파악하기 위해 제3의 외부 기관을 통한 적대적 테스트도 진행했습니다. 이러한 안전성 미세조정 과정은 반복적으로 진행되며, 앞으로도 미세조정과 벤치마킹을 통해 안전성에 지속 투자할 예정입니다. 이를 바탕으로 미세조정된 모델을 업데이트 출시할 계획입니다.
- 투명성 도식: Meta는 모델 미세조정 및 평가 방식을 설명하고 모델의 결점을 공개합니다. Meta의 연구 논문에 포함되는 투명성 도식(transparency schematic)은 연구 과정에서 경험한 도전 과제와 문제점들을 공개하고, 당시에 실행했거나 앞으로 탐구할 계획인 대응 방안에 대한 정보를 제공합니다.
- 책임있는 개발 가이드: 개발자들에게 책임감 있는 개발 과정과 안전 평가를 위한 모범 사례를 공유하고자 책임있는 개발 가이드를 만들었습니다. 이 가이드는 업계와 AI 연구 커뮤니티에서 논의되는 책임감 있는 생성형 AI에 대한 최신 연구를 반영한 모범 사례들을 제시합니다.
- 올바른 사용 정책: 모델이 공정하고 책임감 있게 사용되도록 특정 행위를 금지하는 정책을 시행합니다.
Meta는 통찰력과 창의성을 겸비한 전 세계의 연구자, 개발자, 그리고 개인 이용자로부터 모델 성능 및 개선 방향에 대한 피드백을 듣고자 새로운 이니셔티브를 만들기도 했습니다.
- 개방형혁신(오픈이노베이션)에 대한 AI 연구 커뮤니티: 대규모 언어모델의 책임감 있는 개발 및 공유에 대해 보다 심도 있게 이해하고자, 연구자들을 위한 새로운 파트너십 프로그램을 시작합니다. 연구자는 실무자 커뮤니티에 가입해 대규모 언어모델에 관한 연구 결과를 공유할 수 있으며, 커뮤니티는 미래지향적인 연구 의제를 설정할 것입니다.
- Llama 임팩트 챌린지: Llama를 사용해 어려운 문제를 해결하려는 혁신가 커뮤니티를 활성화하고자 합니다. 이 챌린지를 통해 다양한 공공·비영리·영리 단체들이 Llama 2를 사용해 환경, 교육 등 중요한 도전과제에 대응할 수 있도록 할 것입니다. 챌린지 규칙은 사전에 공개될 예정입니다.
결론
Meta는 지금까지 비즈니스의 다른 영역들을 혁신할 때마다 오픈소스 접근 방식의 이점을 경험해 왔습니다. Meta 엔지니어들은 웹 및 모바일 애플리케이션 개발에 사용되는 대표적인 프레임워크인 React와 AI 프레임워크 PyTorch 등 현재 업계 표준이 된 프레임워크들을 개발하고, 널리 공유했습니다. 이들은 현재 테크 업계 전반에서 사용되는 인프라스트럭처로 자리매김 했습니다. 이와 같이, 대규모 언어모델을 오픈소스로 공유하는 것이 보다 유용하고 안전한 생성형 AI를 개발하는데 기여할 것이라고 믿습니다.
Llama 2로 변화할 세상은 어떤 모습일지 기대해주세요.