6P by xguru 6달전 | favorite | 댓글 8개
  • iPhone, iPad, Mac 에서 통합적으로 사용가능
  • 언어와 이미지를 이해 및 생성, 다수 앱에 걸쳐 액션 수행, 사용자 경험을 바탕으로 맥락을 파악하여 일상적인 업무를 간소화 및 가속화
  • 새로운 쓰기 도구 : Mail, 메모, Pages, 서드파티 앱 등 글을 쓸 수 있는 대부분의 앱에서 사용자가 쓴 글을 재작성하고, 교정하고, 요약
  • 메일을 종류별로 구분하고, 이메일 첫줄 대신 요약본을 표시. 빠른 스마트 답장 작성
  • 메모 앱과 전화 앱에서 오디오를 녹음, 전사 및 요약 가능
    • 통화 중에 녹음을 시작하면 당사자 모두에게 자동으로 녹음 사실이 알려지고, 통화를 마치면 Apple Intelligence가 요약본을 생성해 요점을 되짚어볼 수 있음
  • Image Playground : 이미지 생성기능을 자유롭게 테스트 가능. 애니메이션/일러스트/스케치 세가지 스타일
    • 메일/메시지/메모등에서 바로 활용 가능하며, 별도 앱으로 제공되고, API로 개발자가 자신의 앱내에서 활용 가능
  • Genmoji : 순간에 딱 맞는 이모지를 생성하여 바로 사용
  • 사진과 동영상 검색도 향상
    • 자연어를 이용하여 구체적으로 검색 : 얼굴에 스티커를 붙인 케이티
    • 동영상 클립 중간에 나오는 특정 장면을 검색하는 것도 가능
  • Siri가 더욱 자연스러워지고, 맥락을 더욱 잘 파악하는 데다 사용자를 더 잘 이해할 수 있게 됨
    • 대화의 맥락을 이해하기 때문에 앞 내용과 이어지는 요청 가능
    • 새로운 디자인: 활성화중에는 화면 전체 가장자리가 빛남
    • 기기 사용에 관한 다양한 도움을 어디서든 제공하고, iPhone, iPad, Mac 사용법에 관한 수천 가지 질문에도 대답
    • 화면을 인지하기 때문에 점점 더 많은 앱에서 화면 속 정보를 이해하고 사용자의 동의에 따라 필요한 동작을 수행
    • Apple 앱과 서드파티 앱을 넘나들며 수백 가지 동작을 새롭게 수행 가능
  • Apple Intelligence는 개인적인 상황 및 맥락에 대한 깊은 이해와 사용자의 개인정보 보호를 근간으로 함
    • 기본적으로 온디바이스에서 모든걸 처리
    • 필요할 경우 비공개 클라우드 컴퓨팅을 이용해서 별도 구축된 애플 실리콘 서버에서 누구에게도 노출되지 않고 더 복잡한 요청도 처리 가능
  • Apple 플랫폼에 ChatGPT를 긴밀하게 통합 (다른 LLM도 가능하게 할 예정)
    • 사용자가 다수의 앱 사이를 오갈 필요 없이 ChatGPT의 전문 지식과 이미지 및 문서 이해 역량을 활용할 수 있도록 구현할 예정
    • Siri도 필요하다고 판단하는 경우 ChatGPT의 전문 지식을 활용
    • 시스템 전반에 적용되는 쓰기 도구에 ChatGPT가 통합되어 사용자가 어떤 주제로 글을 쓸 때에도 ChatGPT로 내용을 구상할 수 있음
    • ChatGPT 이미지 도구에도 접근 가능
    • ChatGPT에 액세스하는 사용자를 위한 개인정보 보호 기능이 기본 탑재되어 있어 사용자의 IP 주소는 가려지고, OpenAI조차도 사용자의 요청을 저장할 수 없음
    • ChatGPT는 올 하반기 iOS18, iPadOS 18, macOS Sequoia에 적용되며, GPT-4o로 구동
    • 사용자는 계정을 생성하지 않고도 ChatGPT에 무료로 액세스할 수 있고, ChatGPT 구독자라면 계정을 연결해 Apple 기기에서 바로 유료 기능들을 이용할 수 있음

아이폰 15프로부터 적용된다고 하던데. 적용모델이 궁금하네요. ios 18지원하곤 별개인걸로 봤거든요

최근 애플의 논문들이 온디바이스에서 트랜스포머 모델들을 잘 돌리는 것들이 유독 많았는데, 이런 걸 보여줄려는 연구의 일환이지 않았을까 싶군요.

음... 시리 같은 보이스 어시스턴트에 들어가는건 너무 좋은 판단인거같은데
막상 뭔가 활용하긴 조금 힘든거같네요
개인적으로 맥 / 갤탭 / 윈도우 데스크탑을 사용하고있는데
갤럭시 쪽은 인터넷, 동영상 요약
윈도우는 바로 ai챗봇실행
이런거 사파리와 맥os에 추가되었으면 좋겠습니다
챗지피티와의 협업은 애플 이용자에게 너무 좋은 소식이네요

아이클라우드 모습이 조금 떠오르네요. 사용자가 직접 접하는 인프라들을직접 만들지 않지만 사용자와 접점이 있는 부분들은 자기들이 (제일잘하는) 담당하고. ChatGTP 앱이 너무 노멀해서 아쉬움이 많아요.

결국 자연어와 이미지에 대한 인식/생성 모델을 직접 소규모로 만들어서 온디바이스로 다 처리하는 거네요.
LLM들이 보여주는 방대한 지식은 써드파티인 ChatGPT 같은 것을 그냥 활용하고요.
아주 애플스러운 접근 방식이라고 생각됩니다. 사용자 입장에서도 사실 나쁠거 없고요.
다만 한국어에 대한 지원이 얼마나 빠르게 될 지는 두고 봐야할듯

시리 한국어 지원 급으로 오래 걸릴 겁니다. 애초에 애플이 한국 시장을 중점적으로 신경 써줄 이유가 없고요.

저도 공감합니다.
한국어 지원 기다리다가 숨넘어갈 거 같다는 거까지요..ㅎㅎ

동감합니다. 정말 애플스럽게, 자기들의 리소스를 적극 활용한 온디바이스 AI를 자신들만의 형태로 제공하네요. 대단하게 새로울 것도 없지만, 새로운 경험이 될 것 같다는 기대는 듭니다.