Trúc Hà Nhân✔
Intern Writer
Thử tưởng tượng xem, sẽ thế nào nếu chỉ với vài chiếc iPhone bạn đang dùng hàng ngày, chúng ta có thể làm ra những thước phim hoạt hình hay trò chơi điện tử với chuyển động nhân vật mượt mà, chân thực không kém gì phim bom tấn Hollywood? Nghe có vẻ điên rồ đúng không, nhưng các nhà nghiên cứu tại Viện Hệ thống Thông minh Max Planck và Đại học Carnegie Mellon vừa cho chúng ta thấy điều đó hoàn toàn có thể đấy.
Họ đã phát triển một hệ thống mới tên là MAMMA, cho phép ghi lại chuyển động của con người chỉ bằng bốn chiếc iPhone. Điều đặc biệt là chúng ta không cần dùng đến những chiếc camera chuyên dụng đắt đỏ, không cần gắn các điểm đánh dấu lên người diễn viên, và cũng chẳng cần một không gian trường quay được thiết kế riêng. MAMMA có thể phân tích cảnh quay từ nhiều góc độ khác nhau, theo dõi tới 512 điểm mốc trên cơ thể mỗi người. Nhờ đó, hệ thống này đủ thông tin để ước tính tư thế và hình dạng ngay cả khi ai đó quay lưng lại với camera hoặc bị che khuất một phần.
Một điểm cộng lớn của MAMMA là khả năng xử lý các tương tác phức tạp giữa hai người, ví dụ như ôm hay nhảy múa, nơi các chi bị chồng chéo lên nhau. Hệ thống còn có thể nhận diện được cả những vị trí cơ thể chạm vào nhau hay chạm xuống sàn, giúp việc ghi lại chuyển động không cần điểm đánh dấu trở nên chính xác hơn. Từ những dữ liệu này, MAMMA sẽ dựng mô hình cơ thể 3D chỉ với video RGB thông thường mà không cần bất kỳ điểm đánh dấu vật lý nào.
Mức độ chính xác của MAMMA thực sự đáng nể. Khi so sánh với Vicon, một hệ thống ghi lại chuyển động chuyên nghiệp dựa trên điểm đánh dấu, MAMMA cho thấy sự khác biệt trong lỗi tái tạo chỉ dưới 1 milimet. Con số này không phải là độ chính xác trực tiếp của thiết lập bốn chiếc iPhone, nhưng nó cho thấy tiềm năng to lớn của công nghệ này. Các nhà nghiên cứu đã thử nghiệm việc ghi hình bằng bốn chiếc iPhone trong cả môi trường trong nhà và ngoài trời, chứng minh rằng hệ thống có thể hoạt động hiệu quả với phần cứng camera tối giản.
Có thể nói, phần cứng tiêu dùng hiện tại đã đủ mạnh để hỗ trợ việc chụp và theo dõi không gian. MAMMA đang đẩy ý tưởng này lên một tầm cao mới, cho phép ghi lại chuyển động toàn thân mà không cần đến giàn thiết bị mocap (motion capture) truyền thống.
Mặc dù MAMMA hiện tại vẫn chỉ là một phần mềm nghiên cứu và chưa phải là sản phẩm thương mại hoàn chỉnh, nhưng mã nguồn của nó đã được công khai cho mục đích nghiên cứu khoa học phi thương mại. Điều này có nghĩa là các studio hay nhà phát triển game chưa thể trực tiếp đưa nó vào sản xuất. Tuy nhiên, những màn trình diễn với bốn chiếc iPhone đã cho thấy lý do tại sao phương pháp này lại thú vị đến vậy. Các nhóm làm việc nhỏ hơn trong tương lai có thể có thêm một lựa chọn để ghi lại chuyển động mà không cần phải đầu tư vào một trường quay mocap truyền thống.
Thách thức tiếp theo không còn là chứng minh khả năng của camera smartphone, mà là biến nghiên cứu này thành một công cụ mà các nhà sáng tạo có thể sử dụng một cách đáng tin cậy, hợp pháp và không cần thiết lập cấp độ nghiên cứu phức tạp. Hy vọng rằng trong tương lai không xa, chúng ta sẽ được chứng kiến những bước đột phá mạnh mẽ hơn từ MAMMA, mở ra kỷ nguyên mới cho ngành công nghiệp giải trí và sáng tạo nội dung.
Họ đã phát triển một hệ thống mới tên là MAMMA, cho phép ghi lại chuyển động của con người chỉ bằng bốn chiếc iPhone. Điều đặc biệt là chúng ta không cần dùng đến những chiếc camera chuyên dụng đắt đỏ, không cần gắn các điểm đánh dấu lên người diễn viên, và cũng chẳng cần một không gian trường quay được thiết kế riêng. MAMMA có thể phân tích cảnh quay từ nhiều góc độ khác nhau, theo dõi tới 512 điểm mốc trên cơ thể mỗi người. Nhờ đó, hệ thống này đủ thông tin để ước tính tư thế và hình dạng ngay cả khi ai đó quay lưng lại với camera hoặc bị che khuất một phần.
Một điểm cộng lớn của MAMMA là khả năng xử lý các tương tác phức tạp giữa hai người, ví dụ như ôm hay nhảy múa, nơi các chi bị chồng chéo lên nhau. Hệ thống còn có thể nhận diện được cả những vị trí cơ thể chạm vào nhau hay chạm xuống sàn, giúp việc ghi lại chuyển động không cần điểm đánh dấu trở nên chính xác hơn. Từ những dữ liệu này, MAMMA sẽ dựng mô hình cơ thể 3D chỉ với video RGB thông thường mà không cần bất kỳ điểm đánh dấu vật lý nào.
Mức độ chính xác của MAMMA thực sự đáng nể. Khi so sánh với Vicon, một hệ thống ghi lại chuyển động chuyên nghiệp dựa trên điểm đánh dấu, MAMMA cho thấy sự khác biệt trong lỗi tái tạo chỉ dưới 1 milimet. Con số này không phải là độ chính xác trực tiếp của thiết lập bốn chiếc iPhone, nhưng nó cho thấy tiềm năng to lớn của công nghệ này. Các nhà nghiên cứu đã thử nghiệm việc ghi hình bằng bốn chiếc iPhone trong cả môi trường trong nhà và ngoài trời, chứng minh rằng hệ thống có thể hoạt động hiệu quả với phần cứng camera tối giản.
Có thể nói, phần cứng tiêu dùng hiện tại đã đủ mạnh để hỗ trợ việc chụp và theo dõi không gian. MAMMA đang đẩy ý tưởng này lên một tầm cao mới, cho phép ghi lại chuyển động toàn thân mà không cần đến giàn thiết bị mocap (motion capture) truyền thống.
Mặc dù MAMMA hiện tại vẫn chỉ là một phần mềm nghiên cứu và chưa phải là sản phẩm thương mại hoàn chỉnh, nhưng mã nguồn của nó đã được công khai cho mục đích nghiên cứu khoa học phi thương mại. Điều này có nghĩa là các studio hay nhà phát triển game chưa thể trực tiếp đưa nó vào sản xuất. Tuy nhiên, những màn trình diễn với bốn chiếc iPhone đã cho thấy lý do tại sao phương pháp này lại thú vị đến vậy. Các nhóm làm việc nhỏ hơn trong tương lai có thể có thêm một lựa chọn để ghi lại chuyển động mà không cần phải đầu tư vào một trường quay mocap truyền thống.
Thách thức tiếp theo không còn là chứng minh khả năng của camera smartphone, mà là biến nghiên cứu này thành một công cụ mà các nhà sáng tạo có thể sử dụng một cách đáng tin cậy, hợp pháp và không cần thiết lập cấp độ nghiên cứu phức tạp. Hy vọng rằng trong tương lai không xa, chúng ta sẽ được chứng kiến những bước đột phá mạnh mẽ hơn từ MAMMA, mở ra kỷ nguyên mới cho ngành công nghiệp giải trí và sáng tạo nội dung.
