▲GN⁺ 2024-05-18 | parent | ★ favorite | on: Toon3D: 새로운 시각에서 보는 만화(toon3d.studio)Hacker News 의견 해커뉴스 댓글 모음 요약 Futurama의 Planet Express 건물 예시 Futurama의 Planet Express 건물이 3D 불일치 예시로 사용된 것이 흥미로움. 실제로는 3D 모델로 생성된 것 같음. 그래픽 아티스트가 아니지만, 일러스트레이터의 예술이 복잡한 의미를 전달하는 창의적인 표현 기법을 사용한다는 점을 높이 평가함. 최근 LLMs(대형 언어 모델) 과대광고와 유사한 '혼란스러운' 3D 공간 재구성을 떠올리게 함. 3D 공간 생성의 재미 일관성 없는 소스 이미지로 3D 공간을 만드는 것이 매우 재미있는 아이디어임. 몇 년 전 추상적인 비공간 이미지를 가상 현실 공간으로 변환하는 시도를 해봤음. 예를 들어, 칸딘스키나 폴록의 추상화 그림을 탐험 가능한 가상 현실 공간으로 변환하는 것. 워크플로우는 추상화 이미지에서 시작해 SinGan을 사용하여 '장면'의 대체 '뷰포인트'를 생성하고, 3D 사진 인페인팅을 통해 깊이 맵핑을 수행한 후 포토그래메트리 앱에 프레임을 넣는 것임. 미래의 3D 모델 생성 가능성 상상한 장면의 그림을 바탕으로 (품질이 낮은) 3D 모델을 생성할 수 있다는 것이 놀라움. 미래에는 아티스트가 몇 장의 이미지만으로 정확한 3D 모델을 얻을 수 있을지도 모름. AI와 유사한 도구가 아티스트에게 미칠 영향에 대한 우려가 있음. 그러나 기계 학습 기반 시스템이 아티스트와 더 직접적으로 협력하는 미래를 상상할 수 있음. 예술가가 예술을 창작하는 것의 가치를 생각할 때, AI가 예술가를 대체하는 것은 문명 전체에 나쁜 결과를 초래할 수 있음. 2D 아트워크의 3D 변환 문제 2D 아트워크는 일관된 3D 공간을 가지지 않음. 이 문제를 유용하게 해결하지 못한 것 같음. 원래의 카메라 위치에서 벗어나면 장면이 거의 일관성이 없음. 포토그래메트리와 VR Quest 2를 사용해 포토그래메트리에 대해 연구한 경험이 있음. 여러 각도에서 찍은 사진을 사용해 3D 모델을 만드는 파이프라인을 탐구함. VR로 포팅할 때 중요한 것은 깨끗한 메쉬를 만드는 것임. 현재 도구들은 3D 메쉬를 생성하지 않음. Matterport와 같은 모델을 만들고 부동산 회사에 판매하려는 동기가 있었음. 그러나 깨끗한 메쉬를 자동으로 생성하는 단계가 가장 노동 집약적임. 알고리즘의 개선 필요성 특정 이미지의 관점에서 외관을 재현하는 데 있어 성능이 좋지 않음. 예를 들어, 매직 스쿨버스 예시가 있음. 알고리즘이 이미지를 더 신뢰하도록 조정될 필요가 있음. 사이트의 비디오 자동 재생 문제 모든 비디오가 자동 재생되고 반복되는 사이트가 불편함. 두 번째 화면에서 비디오를 볼 때 사이트 방문 시 끊김 현상이 발생함. 미야자키의 반응 Spirited Away 예시를 미야자키에게 보여주면 생명 자체에 대한 모욕이라고 할 것 같음. 기대에 못 미치는 결과 모든 예시가 매우 나쁘게 보임. 중간 프레임의 노이즈와 흐릿함 때문에 원본과 함께 사용할 수 없음. 각 요소의 시작과 끝 지점이 거의 연결되지 않음. 벽, 문 등이 목적지로 날아가지만 최종 위치에서 몇 피트 떨어진 곳에서 사라짐. 아이디어는 훌륭하지만 실제로 작동하는 버전을 보고 싶음.
Hacker News 의견
해커뉴스 댓글 모음 요약
Futurama의 Planet Express 건물 예시
3D 공간 생성의 재미
미래의 3D 모델 생성 가능성
2D 아트워크의 3D 변환 문제
포토그래메트리와 VR
알고리즘의 개선 필요성
사이트의 비디오 자동 재생 문제
미야자키의 반응
기대에 못 미치는 결과