Công nghệ này (scarily) cho phép thay đổi thực tế video

Học lập trình viên quốc tế

Các nhà nghiên cứu tại Đại học Carnegie Mellonđã tạo một phương pháp để biến một video thành phong cách của một video khác. Mặc dù điều này có thể hơi không rõ ràng lúc đầu, hãy xem video bên dưới. Trong đó, các nhà nghiên cứu đã lấy toàn bộ clip từ John Oliver và làm cho nó trông giống như Stephen Colbertđa noi rôi. Hơn nữa, họ có thể bắt chước chuyển động của việc mở hoa bằng bông hoa khác.

Trong ngắn hạn, họ có thể làm cho bất cứ ai (hoặc bất cứ điều gì) trông giống như họ đang làm một cái gì đó họ không bao giờ làm.

"Tôi nghĩ rằng có rất nhiều câu chuyện để được kể," CMU Ph.D. sinh viên Aayush Bansal. Ông và nhóm nghiên cứu đã tạo ra công cụ để làm cho việc quay phim phức tạp trở nên dễ dàng hơn, có lẽ bằng cách thay thế chuyển động trong những cảnh đơn giản, đủ ánh sáng và sao chép nó thành một phong cách hoặc môi trường hoàn toàn khác.

"Đó là một công cụ cho các nghệ sĩ cung cấp cho họ một mô hình ban đầu mà họ có thể cải thiện," ông nói.

Hệ thống này sử dụng một cái gì đó được gọi là mạng lưới đối thủ sinh sản (GAN) để di chuyển một kiểu hình ảnh sang một hình ảnh khác mà không có nhiều dữ liệu phù hợp. GAN, tuy nhiên, tạo ra nhiều hiện vật có thể làm hỏng video khi nó được phát.

Trong một GAN, hai mô hình được tạo ra: một người phân biệt học cách phát hiện những gì phù hợp với phong cách của một hình ảnh hoặc video, và một máy phát điện học cách tạo ra hình ảnh hoặc video phù hợp với một phong cách nhất định. Khi hai công trình cạnh tranh - người phát điện cố gắng lừa người phân biệt và người phân biệt đánh dấu hiệu quả của máy phát điện - cuối cùng hệ thống sẽ tìm hiểu cách thức nội dung có thể được chuyển đổi thành một phong cách nhất định.

Các nhà nghiên cứu đã tạo ra một thứ gọi là Recycle-GAN làm giảm sự không hoàn hảo bằng cách “không chỉ là thông tin không gian, mà là thời gian”.

"Các thông tin bổ sung này, kế toán cho những thay đổi theo thời gian, tiếp tục hạn chế quá trình và tạo ra kết quả tốt hơn", các nhà nghiên cứu viết.

Recycle-GAN rõ ràng có thể được sử dụng để tạo ra cái gọi là Deepfakes, cho phép các folks bất chính để mô phỏng một người nào đó nói hay làm điều họ chưa bao giờ làm. Bansal và nhóm của anh ta nhận thức được vấn đề.

“Đó là một cái mở mắt cho tất cả chúng ta trong lĩnh vực mà những hàng giả đó sẽ được tạo ra và có một tác động như vậy. Tìm cách phát hiện chúng sẽ rất quan trọng trong tương lai, ”Bansal nói.