애플, 개인용 인공 지능 시스템 Apple Intelligence 공개
(apple.com)- iPhone, iPad, Mac 에서 통합적으로 사용가능
- 언어와 이미지를 이해 및 생성, 다수 앱에 걸쳐 액션 수행, 사용자 경험을 바탕으로 맥락을 파악하여 일상적인 업무를 간소화 및 가속화
- 새로운 쓰기 도구 : Mail, 메모, Pages, 서드파티 앱 등 글을 쓸 수 있는 대부분의 앱에서 사용자가 쓴 글을 재작성하고, 교정하고, 요약
- 메일을 종류별로 구분하고, 이메일 첫줄 대신 요약본을 표시. 빠른 스마트 답장 작성
- 메모 앱과 전화 앱에서 오디오를 녹음, 전사 및 요약 가능
- 통화 중에 녹음을 시작하면 당사자 모두에게 자동으로 녹음 사실이 알려지고, 통화를 마치면 Apple Intelligence가 요약본을 생성해 요점을 되짚어볼 수 있음
- Image Playground : 이미지 생성기능을 자유롭게 테스트 가능. 애니메이션/일러스트/스케치 세가지 스타일
- 메일/메시지/메모등에서 바로 활용 가능하며, 별도 앱으로 제공되고, API로 개발자가 자신의 앱내에서 활용 가능
- Genmoji : 순간에 딱 맞는 이모지를 생성하여 바로 사용
- 사진과 동영상 검색도 향상
- 자연어를 이용하여 구체적으로 검색 : 얼굴에 스티커를 붙인 케이티
- 동영상 클립 중간에 나오는 특정 장면을 검색하는 것도 가능
- Siri가 더욱 자연스러워지고, 맥락을 더욱 잘 파악하는 데다 사용자를 더 잘 이해할 수 있게 됨
- 대화의 맥락을 이해하기 때문에 앞 내용과 이어지는 요청 가능
- 새로운 디자인: 활성화중에는 화면 전체 가장자리가 빛남
- 기기 사용에 관한 다양한 도움을 어디서든 제공하고, iPhone, iPad, Mac 사용법에 관한 수천 가지 질문에도 대답
- 화면을 인지하기 때문에 점점 더 많은 앱에서 화면 속 정보를 이해하고 사용자의 동의에 따라 필요한 동작을 수행
- Apple 앱과 서드파티 앱을 넘나들며 수백 가지 동작을 새롭게 수행 가능
- Apple Intelligence는 개인적인 상황 및 맥락에 대한 깊은 이해와 사용자의 개인정보 보호를 근간으로 함
- 기본적으로 온디바이스에서 모든걸 처리
- 필요할 경우 비공개 클라우드 컴퓨팅을 이용해서 별도 구축된 애플 실리콘 서버에서 누구에게도 노출되지 않고 더 복잡한 요청도 처리 가능
- Apple 플랫폼에 ChatGPT를 긴밀하게 통합 (다른 LLM도 가능하게 할 예정)
- 사용자가 다수의 앱 사이를 오갈 필요 없이 ChatGPT의 전문 지식과 이미지 및 문서 이해 역량을 활용할 수 있도록 구현할 예정
- Siri도 필요하다고 판단하는 경우 ChatGPT의 전문 지식을 활용
- 시스템 전반에 적용되는 쓰기 도구에 ChatGPT가 통합되어 사용자가 어떤 주제로 글을 쓸 때에도 ChatGPT로 내용을 구상할 수 있음
- ChatGPT 이미지 도구에도 접근 가능
- ChatGPT에 액세스하는 사용자를 위한 개인정보 보호 기능이 기본 탑재되어 있어 사용자의 IP 주소는 가려지고, OpenAI조차도 사용자의 요청을 저장할 수 없음
- ChatGPT는 올 하반기 iOS18, iPadOS 18, macOS Sequoia에 적용되며, GPT-4o로 구동
- 사용자는 계정을 생성하지 않고도 ChatGPT에 무료로 액세스할 수 있고, ChatGPT 구독자라면 계정을 연결해 Apple 기기에서 바로 유료 기능들을 이용할 수 있음
아이클라우드 모습이 조금 떠오르네요. 사용자가 직접 접하는 인프라들을직접 만들지 않지만 사용자와 접점이 있는 부분들은 자기들이 (제일잘하는) 담당하고. ChatGTP 앱이 너무 노멀해서 아쉬움이 많아요.
결국 자연어와 이미지에 대한 인식/생성 모델을 직접 소규모로 만들어서 온디바이스로 다 처리하는 거네요.
LLM들이 보여주는 방대한 지식은 써드파티인 ChatGPT 같은 것을 그냥 활용하고요.
아주 애플스러운 접근 방식이라고 생각됩니다. 사용자 입장에서도 사실 나쁠거 없고요.
다만 한국어에 대한 지원이 얼마나 빠르게 될 지는 두고 봐야할듯
동감합니다. 정말 애플스럽게, 자기들의 리소스를 적극 활용한 온디바이스 AI를 자신들만의 형태로 제공하네요. 대단하게 새로울 것도 없지만, 새로운 경험이 될 것 같다는 기대는 듭니다.
최근 애플의 논문들이 온디바이스에서 트랜스포머 모델들을 잘 돌리는 것들이 유독 많았는데, 이런 걸 보여줄려는 연구의 일환이지 않았을까 싶군요.