Meshy 7에는 새 모델보다 더 보기 드문 것이 함께 나왔다: 검증 방법
Meshy는 8월 10일 Meshy 7을 출시하고 8월 12일 공식 발표했다. 새로운 이미지-3D 파운데이션 모델로, 회사는 단 하나의 특성에 초점을 맞춰 이를 튜닝했다. 바로 지오메트리 정합성, 즉 생성된 형상이 입력한 이미지와 얼마나 정확히 일치하는가다.
일반적인 신제품 발표보다 초점이 좁지만, 그만큼 더 유용한 설명이다. 대부분의 이미지-3D 발표는 대표 에셋의 턴테이블 렌더로 채워진다. 모델이 인상적인 무언가를 만들 수 있다는 점은 보여주지만, 사용자가 요청한 바로 그것을 만들었는지는 전혀 알려주지 않는다. 콘셉트 아트를 3D 생성기에 넣어본 사람이라면 실제로 시간을 잡아먹는 실패가 무엇인지 안다. 메시는 보기 좋다. 하지만 내가 원한 디자인이 아니다.
벤치마크가 더 흥미로운 절반이다
Meshy는 모델과 함께 지오메트리 벤치마크의 방법론과 최초 결과도 공개했다. Meshy 7은 전체 비율에서 81.0%, 공간 분포에서 79.7%, 표면 디테일에서 59.8%를 기록해 세 항목 모두에서 경쟁 이미지-3D 모델 4종을 앞섰다. 가장 큰 격차는 단일 뷰 조건의 표면 디테일로, 차순위 모델보다 5.3포인트 높았다. 테스트에는 정면 뷰, 위쪽에서 내려다보는 4분의 1 각도 뷰, 그리고 4개 뷰 조합이 포함됐다. 모델 간 격차는 단일 뷰에서 벌어졌다. 멀티 뷰 입력에서는 차이가 약 2포인트까지 좁혀지기 때문이다.
테스트된 모델 중 단일 이미지의 표면 디테일 점수가 60%를 넘은 것은 하나도 없다. 이 수치야말로 이번 발표의 솔직한 핵심이며, 현재 이 기술이 어디까지 왔는지를 잘 보여준다. 전체 비율은 대부분 해결됐지만, 미세한 표면 지오메트리는 아직 그렇지 않다.
Meshy가 공개한 지오메트리 벤치마크로, Meshy 7과 이름을 밝히지 않은 경쟁 모델 4종을 비교 평가했다. 차트: Meshy.
주목할 만한 것은 방법론이다. Meshy는 사람의 선호도 투표를 진행하거나 비전-언어 모델에 판단을 맡기는 대신, 생성된 지오메트리를 학습에서 제외한 참조 모델과 직접 비교해 평가했다. 지오메트리끼리 비교하면 원본 카메라를 추정할 필요가 없으며, 실루엣이 일치할 때까지 한 축을 따라 크기를 조정해 비율 오류를 숨기는 것도 방지할 수 있다. 모델 측면에서는 이제 이미지 인코더가 입력을 여러 스케일로 읽고 더 높은 해상도를 처리한다. 그 결과 미세한 형상이 평균화되어 사라지지 않고 생성 단계까지 유지된다. 또한 각 샘플이 목표 지오메트리와 정확히 대응하도록 학습 데이터를 재구축했으며, 스타일과 조명, 배경은 제거했다.
물론 명백한 단서는 그대로 적용된다. 이 수치는 공급사가 직접 설계한 벤치마크에서 얻은 공급사 자체 결과이며, 비교 대상인 경쟁 모델 4종의 이름도 공개하지 않았다. Unite.AI는 기사에서 이를 잘 요약했다. 평소와 같은 할인율을 적용해 받아들여야 한다는 것이다. Meshy는 벤치마크 자체를 출시 후 별도로 공개할 예정이라고 밝혔다. 그때가 되어야 주장을 검증할 수 있다. 중요한 질문은 Meshy가 직접 선택한 참조 데이터에서 Meshy 7이 이겼는지가 아니기 때문이다. 텍스처는 별도의 정합성 문제가 있는 또 다른 과제이며, Meshy는 텍스처 벤치마크도 추후 공개할 예정이라고 밝혔다.
프롭을 생성한다면 이것이 의미하는 것
우리는 이미지-3D를 실제 프로덕션에서 사용하므로, 이는 리더보드 논쟁이 아니라 실무적인 문제다. Tencent의 Hunyuan3D 제품군과 Tripo 모두 우리 기술 스택에 포함돼 있으며, 이전에는 Meshy가 에셋을 넘어 무엇을 만들고 있는지도 다룬 바 있다.
표정, 하드서피스 기계 구조, 부조 조각에 대해 참조 이미지, 원본 지오메트리, 텍스처 적용 결과를 차례로 보여준다. 이미지: Meshy.
정합성은 게임 콘텐츠에서 가장 중요한 지표지만, 화려하지 않다는 이유로 과소평가된다. 아무리 아름다운 프롭이라도 너비가 20% 더 넓으면, 이미 만들어진 문틀 옆 장면에 배치하는 순간 문제가 드러난다. 캐릭터의 비율이 콘셉트 아트에서 벗어나면 리깅을 다시 해야 한다. 하나의 레벨에 사용할 프롭 12개를 생성할 때, 아슬아슬하게 빗나간 결과의 비용은 렌더링 자체가 아니다. 그 차이를 발견하고 다시 생성해야 한다는 데 있다. 비율 정확도가 1포인트씩 올라갈 때마다 누군가는 재시도를 한 번 덜 해도 된다.
이 발표를 지켜볼 또 다른 이유가 있다. 학습에서 제외한 참조 모델을 기준으로 지오메트리를 평가하는 방식은 누구나 도입할 수 있는 측정법이다. 벤치마크가 설명대로 공개되고 다른 연구소들도 이를 실행한다면, 이미지-3D 분야에는 최상의 결과만 모아놓은 갤러리 대신 공동의 평가 기준이 생긴다. 이는 이번 모델을 포함한 어떤 단일 모델 출시보다 실제로 게임을 만드는 사람들에게 더 큰 가치가 있을 것이다.
Meshy 7은 모든 구독 등급에서 사용할 수 있지만, 모델 다운로드는 Pro 이상 등급에서만 제공된다. Ultra Mode는 현재 단일 뷰만 지원하며, 멀티 뷰 지원도 곧 추가될 예정이다. 이 회사는 기업가치 15억 달러로 시리즈 B에서 약 4억 달러를 조달했다. 파운데이션 모델과 벤치마크를 같은 주에 공개한 배경에는 이런 자금력이 있다.