19P by xguru 2023-05-11 | favorite | 댓글 2개
  • 키노트 내용 정리

생성형 AI 도입

  • Gmail "Help me write": 자동으로 메일 작성하고, 원하는 대로 Refine(Formalize, Elaborate, Shorten,..)
  • Maps "Immersive View for Route": 경로 전체를 이머시브 뷰로 보기 가능. 15개 도시(런던,뉴욕,도쿄,SF,..)
  • Photo "Magic Editor": 필요없는 부분을 지우고, 물체를 이동하고, 사진에 없는 부분을 생성해서 채우기 등

Making AI helpful for everyone

  • Improve knowledge and learning
  • Boost creativity and productivity
  • Enable others to innovate
  • Build and deploy responsibly

PaLM 2 프리뷰 공개

  • 25개 이상의 제품과 기능에 PaLM2를 도입
  • 4개의 모델 사이즈 : Gecko(모바일 기기와 오프라인), Otter, Bison, Unicorn
  • 100개 이상의 언어로 학습하여 이해하고 생성 가능
  • 코드의 버그를 수정하고, 설명하며 주석을 한글로 다는 것을 시연
  • PaLM2 에 보안 지식을 파인튜닝한 Sec-PaLM 로 보안 위협을 감지
  • 의학 지식으로 튜닝한 Med-PaLM 2 는 잘못된 진단이 9배 감소했으며, 전문가 수준에 도달한 첫번째 LLM임
    • Xray 및 Mammogram 에서 정보를 분석하는 것도 추가할 것
  • Google Brain 과 DeepMind를 합친 Google DeepMind 팀에서 차세대 파운데이션 모델인 Gemini를 훈련중
    • 멀티 모달 모델이며, PaLM 2처럼 다양한 모델 사이즈로 제공 예정

AI Responsibility

  • Watermarking 과 Metadata 를 이용하여 생성된 콘텐츠인지 인식

구글 Bard

  • 현재 PaLM 2 기반으로 동작중
  • 20개 이상의 언어로 코드 생성 및 디버깅 가능
  • 다음주부터는 생성된 코드에 Citation 정보 포함될 것
  • 생성된 코드를 Colab/Replit 으로 바로 Export 가능
  • 오늘부터 다크 테마 지원
  • 바드의 답변을 Google Docs로 보내거나, Gmail의 Draft로 보내기 버튼 추가

Bard + Tools

  • 몇주내로 답변 및 프롬프트에서 이미지를 지원할 것
    • 구글 검색과 Knowledge Graph를 통해서 결과에 가장 가까운 이미지를 보여줌
    • 구글 렌즈의 기능을 바드에 도입할 것 : 강아지 2마리(골든 리트리버와 셰퍼드) 사진에 대해서 웃기는 캡션을 만들어줘
  • 찾은 결과들을 구글 지도에서 보여주기
  • 테이블로 표시하고, 구글 Sheet로 내보내기
  • Instacart, Indeed, Khan Academy 등 다양한 서비스들과 연동 예정
  • Adobe Firefly로 이미지 생성하기 지원
  • 오늘부터 Waitlist 없이 180+개 국에서 영어로 이용가능하며, 한국어/일본어도 지원
  • 40+개 언어 지원 예정
  • Gemini 모델로 이전하면 더 많은 발전이 있을 것

AI in Google Workspace

  • Docs 의 "Help me write"
  • Sheets 의 "Help me organize" : 상황을 설명하면 알맞은 데이터 형식을 생성
  • Slides 의 "Help me visualize" : 기존 텍스트 기반으로 알맞는 슬라이드를 생성하고 스타일을 변경
  • Duet AI for Workspace
    • AI가 proactive 하게 프롬프트를 제시하고, 자신이 일하는 내용에 따라서 알아서 변화
    • Docs Sidekick(가칭) 기능을 통해서 작성중인 문서를 인식하고 다양한 프롬프트를 제안
    • Gmail Sidekick은 이메일 쓰레드를 요약해서 보여줌 (캘린더 초청, 또는 이메일용 이미지를 제안)
    • Slides Sidekick은 전체 발표의 요약을 보여줌(FAQ 슬라이드 및 발표자 노트를 추가하는 프롬프트를 제안)

Labs

  • g.co/labs 에서 다양한 AI 실험들을 보고 참여 가능

Google Search

  • 검색 결과에 생성형 AI 섹션을 추가하고 다양한 추천 및 Refining 옵션을 제공하고 추가 질문 가능
  • 대화형으로 기존 컨텍스트 인식
  • Google Shopping Graph와 연동
  • Labs 의 Search Labs 에서 SGE(Search Generative Experience) 활성화 하여 사용 가능(waitlist)

AI in Google Cloud

  • Vertex AI 플랫폼에서 AI 어플리케이션 개발을 지원
  • Enterprise Search 제공
  • PaLM 2 와 세가지 새로운 모델 제공
    • Imagen : 이미지 생성
    • Codey : 코드 자동 완성
    • Chirp : Speech to Text. 300개 이상의 언어
  • RLHF 기능을 Vertex 플랫폼에 추가하여 자신의 모델 파인튜닝 가능
  • Duet AI for Google Cloud
    • AI Expert가 개발자를 지원
  • A3 Virtual Machines 추가
    • NVIDIA H100 GPU 기반

PaLM API

Project Tailwind

  • AI First 노트북
  • g.co/labs 에서 waitlist 조인 가능

Responsible AI

  • 구글이 생성한 이미지는 모두 metadata에 AI가 생성했다고 넣을 것
  • Lip matching / Speech generation / intonation / translation 을 활용한 Universal Translator
  • Automated adversarial testing 도입

Pixel

  • Google Tensor G2 칩으로 Personal AI 제공
  • Pixel Call Assist 로 오래 대기해야 하는 전화를 처리
  • Pixel Speech로 대화를 Transcript하기
  • Generative AI Wallpaper
  • Pixel 7a 공개 ($499)

Pixel Tablet

  • Google Tensor G2
  • 충전가능한 스피커 Dock 공개
    • 도킹시 Hub 모드로 동작하여 디지털 사진 액자가 됨
  • 멀티 유저 지원
  • Chromecast 내장
  • $499에 스피커 Dock 포함

Google Pixel Fold

  • Google Tensor G2
  • 전면 디스플레이 와 폴더블 디스플레이를 가진 폴더블 기기
  • 일반 폰의 3배 화면 (7.6인치)
  • Corning Gorilla Glass Victus
  • IPX8 방수
  • 삼각대 없이 촬영 가능
  • 양면 디스플레이를 동시에 사용 가능
    • Dual Screen Interpreter Mode 로 번역문만 앞쪽 디스플레이로 표시
  • Continuity 기능으로 앞면 디스플레이서 보다가 펼치면 전체 디스플레이로 그대로 재생
  • 분할 화면으로 멀티태스킹 지원
  • 유튜브 시청중 살짝 접으면 테이블탑 모드로 전환하여 위쪽 화면에서만 재생. 하단엔 제어버튼 표시
  • $1799 사전 주문 가능(다음달 배송)
    • 사전주문자 Pixel Watch 제공
    • Google One 6개월및 유튜브 프리미엄 3개월

정리 감사합니다.^^