World Labs releases Frameboy, a browser demo that streams its Atlas world model in real timeWorld Labs, 월드 모델 Atlas를 실시간으로 둘러보는 브라우저 데모 Frameboy 공개
Frameboy streams frames from cloud GPUs to the browser at up to 15 fps while people control the camera. It is a research preview, and the same real-time mode is built into Viewfinder, where people build their own scenes.클라우드 GPU에서 만든 화면을 초당 최대 15프레임으로 브라우저에 보내고, 사용자가 카메라를 움직이며 세계를 둘러봅니다. 연구 프리뷰이고, 직접 장면을 쌓는 Viewfinder에도 같은 실시간 기능을 넣었습니다.
- Source published원문 게시일
- Checked확인일
World Labs released Frameboy on November 5, a research preview demo for exploring worlds in real time with its Atlas world model. Frameboy streams frames from cloud GPUs to the browser at up to 15 fps as people control the camera. Atlas, introduced two months earlier, is an autoregressive world model that generates frames one at a time with pixel-perfect camera control, and Frameboy serves a highly optimized variant of it.World Labs는 월드 모델 Atlas로 만든 세계를 실시간으로 둘러보는 연구 프리뷰 데모 Frameboy를 11월 5일 공개했습니다. Frameboy는 사용자가 카메라를 움직이는 동안 클라우드 GPU에서 만든 화면을 브라우저로 초당 최대 15프레임 보내 줍니다. Atlas는 두 달 전 공개한 자기회귀 월드 모델로, 화면을 한 장씩 만들며 카메라를 픽셀 단위로 정확히 제어하고, Frameboy에는 빠르고 효율적으로 돌도록 크게 최적화한 Atlas 변형이 들어갑니다.

Atlas can explore an imaginary 3D world defined by a single image or navigate a real place captured from a handful of viewpoints. World Labs lists uses such as exploring a famous landmark, scouting virtual viewpoints for a film shoot, inspecting progress on a construction site, fleshing out a 3D videogame level and simulating an environment for a robot. The reason for the speed work: if people wait tens of seconds or minutes for a video, they must plan scenes and camera paths cautiously, which limits their iteration cycles. The demo's scenes were each seeded from a single input image, with Atlas generating the remaining viewpoints, and other scenes revisit real landmarks from multiview captures. World Labs says that once latency and cost drop low enough, there is no discrete wait for generation, and the model streams frames back continuously as people move.Atlas는 그림 한 장으로 정한 상상의 3D 세계를 둘러보거나, 몇 군데 시점에서 찍은 실제 장소를 돌아다니는 데 쓸 수 있습니다. World Labs는 쓰임새로 유명한 명소 둘러보기, 영화 촬영용 시점 미리 찾기, 건설 현장 진행 점검, 3D 게임 레벨 구상, 로봇이 다닐 환경 시뮬레이션을 들었습니다. 결과 영상을 수십 초에서 몇 분씩 기다려야 하면 장면과 카메라 경로를 조심스럽게 짜야 해 고쳐 보는 횟수가 줄어든다는 것이 속도를 높인 까닭입니다. 데모 속 장면들은 입력 그림 한 장에서 시작해 Atlas가 나머지 시점을 만들어 낸 것이고, 실제 명소를 여러 시점에서 찍은 자료로 다시 둘러보는 장면도 있습니다. World Labs는 생성이 충분히 빠르고 싸지면 결과를 기다리는 단계가 사라지고, 사용자가 움직이는 대로 화면이 이어서 나온다고 설명했습니다.
The same real-time mode is built into the Viewfinder web app, where people build a scene frame by frame from their own inputs and then explore it live with a Frameboy overlay. Each new Viewfinder frame comes with both color and depth to show the 3D space being created.같은 실시간 기능을 웹 앱 Viewfinder에도 넣어, 자기 입력으로 장면을 한 프레임씩 쌓은 뒤 Frameboy 화면을 겹쳐 실시간으로 둘러볼 수 있게 했습니다. Viewfinder가 만드는 새 프레임마다 색과 깊이가 함께 나와, 만들어지는 3D 공간을 보여 줍니다.
Frameboy lets people explore a curated list of scenes. Viewfinder is in closed beta, and people join a waitlist to try it. The post does not give a price or a list of countries.Frameboy는 World Labs가 고른 장면 목록을 둘러보는 방식입니다. Viewfinder는 지금 비공개 베타로 시험 중이고, 쓰려면 대기 명단에 등록해야 합니다. 가격과 제공 나라는 이 글에 나와 있지 않습니다.
World Labs says Frameboy currently must run on a powerful GPU server in the cloud and is not cheap compared to local rendering methods.World Labs는 Frameboy가 지금은 클라우드의 고성능 GPU 서버에서 돌아야 하고, 로컬 렌더링 방식보다 비용이 많이 든다고 밝혔습니다.
Atlas scales up concepts from RTFM, a lightweight frame generation model released the year before, as a much larger model trained on orders of magnitude more data. Where RTFM was mainly designed to interpolate between existing viewpoints, Atlas can generate scenes from scratch from as little as a single image or text caption. World Labs announced on September 28 that it is joining AMD.Atlas는 지난해 공개한 가벼운 프레임 생성 모델 RTFM의 개념을 키운 것으로, 훨씬 큰 모델을 훨씬 많은 데이터로 학습했습니다. RTFM이 주로 이미 있는 시점 사이를 메우는 데 쓰였다면, Atlas는 그림 한 장이나 글 설명만으로도 장면을 처음부터 만듭니다. World Labs는 9월 28일 AMD 합류를 발표했습니다.
HREN


