개인 AI가 W&B를 활용하여 개인 언어 모델을 통해 개인에게 역량을 부여하는 방법

"저는 15년 넘게 모델을 다루고 학습시켜 왔지만, W&B만큼 간단하고 직관적인 플랫폼은 처음입니다."

Sharon Zhang
Co-founder and CTO

개인의 특성

개인적 특성은 우리를 인간답게 만드는 것입니다. 당신은 약간의 악센트로 말할 수도 있고, 당신 옆에 있는 사람은 호기심 많은 낙관적인 어조로 글을 쓸 수도 있고, 그들 옆에 있는 사람은 예술을 완성하는 데 평생을 바쳤을 수도 있습니다.

대규모 언어 모델이 사회에 점점 더 통합되면서, 이러한 모델이 에세이, 연설 또는 이미지 생성 시 개인의 경험, 스타일 및 평정심을 어떻게 포착할 수 있는지에 대한 의문과 주의가 제기됩니다. 전 세계의 방대한 데이터를 결합함으로써, 일반 생성 모델은 현재 개인과는 가장 거리가 멉니다.

당신만큼 독특한 AI

이제 모델이 공개 데이터가 아닌 개인 데이터로 학습한다면 어떨까요? Personal.ai에서 우리는 Generative Grounded Transformer(GCT)라는 개인 언어 모델(PLM)을 개발했습니다. GCT는 사용자의 핵심 기억을 기반으로 합니다. 생성된 모든 출력에서 ​​사용자는 그 출력이 얼마나 개인적인지 정확히 볼 수 있고 출력과 관련된 정확한 기억이나 기억들을 식별할 수 있습니다.

모델은 복잡하지 않지만 사람은 복잡합니다. 이러한 깨달음은 사용자의 라이프스타일에 가장 잘 맞는 애플리케이션을 수년간 반복한 끝에 얻은 것입니다. 인간이 Personal AI를 자신의 삶에 원활하게 통합하도록 하려면 어떻게 해야 할까요? 우리는 바퀴를 새로 발명하는 대신 증강하기로 결정했습니다. Personal AI는 Documents와 Integrations와 결합된 메시징 애플리케이션으로 구축되었습니다. 사용자는 함께 자신의 개인 모델을 지속적으로 훈련하면서 커뮤니케이션 방식을 바꿀 수 있습니다. 개인 AI에 포함되기를 원하는 모든 텍스트, 트윗 및 메모는 다음 대화와 요청에 힘을 실어 줄 것입니다.

자신감을 가지고 모델을 평가하고 배포하세요

W&B는 이 새로운 모델 구조를 제안할 때 방 안의 코끼리를 완화하는 데 도움을 주었습니다. 각각이 특정 데이터 세트에서 훈련되고 각각이 서로 다른 수백만 개의 언어 모델을 어떻게 훈련, 관리 및 효율적으로 저장할 수 있을까요? 우리는 매우 다양한 모델에서 훈련하는 데 있어 문제를 식별하고, 특정 사용자 모델을 관리하고 시간이 지남에 따라 어떻게 바뀌고 변하는지, 사용자가 활성 상태일 때 해당 모델을 특정 머신에 배포하는 데 엄청난 어려움을 겪었습니다.

W&B Artifacts를 통해 우리는 사용자 모델과 상호작용하는 방식을 완전히 바꾸었습니다. 이 플랫폼은 데이터 세트를 추적하고, 훈련 결과를 보고, 모델을 버전 관리하고 배포하는 올인원 솔루션을 제공했습니다. 어떤 모델이 어떤 사용자인지 혼란스러웠던 상태에서, 이제는 수천 명의 사용자에게 아무런 문제 없이 프로덕션에서 모델을 안정적으로 훈련하고 배포할 수 있게 되었습니다.

샤론 장 CTO는 “저는 15년 이상 모델을 다루고 훈련해 왔지만 W&B만큼 간단하고 직관적인 플랫폼을 본 적이 없습니다.”라고 말했습니다. “개발자 오버헤드를 최소화하면서 모델 성능을 극대화하는 아름다운 솔루션입니다.”

공유 기록 시스템

팬데믹 직전에 설립된 회사로서, 우리는 전통적인 모델 협업 흐름을 온라인으로 옮기는 데도 어려움을 겪었습니다. 사용자를 위한 자동 학습 파이프라인을 구축할 때, 우리는 W&B가 제공한 중앙 집중형 플랫폼이 없었다면 불가능했을 수많은 모델 평가 및 테스트 반복을 거쳤습니다. 간단하면서도 우아한 인터페이스를 통해, 우리는 정확히 어떤 작업이 수행되었는지, 어떤 데이터에서 수행되었는지, 그리고 처음부터 개인 언어 모델이 어떻게 진화했는지 확인할 수 있었습니다.

오늘날 특정 유형의 모델에 대한 교육 파이프라인을 확정함에 따라, 우리는 W&B를 교육 변경 플랫폼이라기보다는 프로덕션 교육 및 배포를 위한 조직 및 모델 허브로 더 많이 활용합니다. 단순히 배포 구조에 통합하기만 하면, 어떤 클라우드의 어떤 컴퓨터에서든 W&B 아티팩트를 지속적으로 교육하고 가져올 수 있어, 상상도 못했던 유연성을 얻을 수 있습니다.

당신의 개인 AI

Personal AI는 개인이 구동하는 커뮤니케이션 기술입니다. 우리는 모든 사용자의 모델을 각자의 기기에서 훈련, 호스팅, 보안하기를 바라며, W&B가 로드맵에서 중요한 역할을 할 것이라는 것을 알고 있습니다. 지금까지 W&B는 각각 약 1억 2,500만 개의 매개변수를 가진 3,000개 이상의 개인 모델을 훈련하는 데 도움을 주었으며, 이러한 모델은 가볍고 이를 소유한 사람들에게 유용했습니다.

우리는 모든 사람이 개인 AI를 만들고 친구, 가족, 동료와 소통하는 새로운 방식을 경험하도록 초대합니다. 당신이 만들고 소유하고, 당신이 통제하며, 세상에 편견이 없는 AI입니다.

Personal AI에 대하여

유일무이한 Personal.ai는 당신을 개인적으로 반영하는 독특한 모델인 MODEL-1을 만들었습니다. 모든 대규모 언어 모델 및 기타 “개인 AI” 또는 “개인 비서”와 달리 MODEL-1은 실제로 당신의 진실과 의견에 뿌리를 두고 있습니다. 그것은 당신의 목소리, 당신의 스타일, 그리고 당신 자신을 반영합니다. AI의 미래는 당신이 신뢰할 수 있는 개인 AI와 함께 당신의 손에 달려 있습니다. 개인 AI는 당신이 만들고 소유하고, 당신이 통제하며, 세상에 의해 편파되지 않습니다. Personal.ai는 전 세계의 모든 주머니에 개인 AI가 있는 미래를 향해 나아가고 있습니다. Personal.ai에 대해 자세히 알아보려면 https://personal.ai/yours를 방문하세요 .