Alibaba ra mắt EMO, AI tạo video hát từ ảnh chân dung, hy vọng có thể chiến đấu

[Sắt của]

Alibaba ra mắt EMO, AI tạo video hát từ ảnh chân dung, hy vọng có thể chiến đấu trong cuộc chiến GenAI.

Chiến trường tướng AI tiếp tục khốc liệt. Sau sự ra mắt của Sora của OpenAI, nhiều công ty công nghệ có kế hoạch tạo ra những người sáng tạo AI của riêng họ. Một trong số đó là Alibaba, gã khổng lồ công nghệ đến từ Trung Quốc.

Đơn vị nghiên cứu Máy tính Thông minh của Alibaba tiết lộ rằng Chuẩn bị tạo video AI “EMO” Chỉ sử dụng một bức chân dung, bạn có thể tạo ra các nhân vật biết hát, nói chuyện, cử động khuôn mặt và thể hiện nhiều nét mặt khác nhau.

Quá trình hiển thị video của EMO sử dụng ảnh chân dung cùng với các tệp âm thanh yêu cầu nhân vật phải nói chuyện. có thể tạo ra độ dài tối đa là 1 phút 30 giây. Biểu cảm nét mặt của một người đi kèm với cảm xúc và âm thanh phát ra. Nó không chỉ là việc di chuyển miệng của bạn.

Về chức năng cho nhân vật hát Có thể điều chỉnh theo ngôn ngữ của bài hát Ngoài việc di chuyển nhanh theo nhịp điệu của âm nhạc, AI còn có thể phân biệt âm thanh tiếng Anh và tiếng Hàn.

EMO được cho là viết tắt của Emotive Portrait Alive, nhưng trong trường hợp này, tại sao không phải là EPO? Trò chơi chữ “EMO (emo)” là một tính năng độc đáo của AI: các nhân vật trong video do EMO tạo ra sẽ có thể nói chuyện. và có thể hát Nhưng đối thủ Sora không thể nói được.



     “Thay vì chỉ tạo hình nhân vật - các diễn viên nhìn nhau. Tại sao không tạo một nơi để họ có thể nói chuyện với nhau? Do đó, EMO là tương lai của AI có thể tạo ra thế giới ảo. với các nhân vật có thể tương tác với nhau một cách sống động,” những người sáng tạo EMO cho biết.

EMO cung cấp một ví dụ video nâng cao hơn: Đoạn clip quay một người phụ nữ Nhật Bản đi dạo trên phố được làm dựa trên Sora, nhưng EMO khiến người phụ nữ đó hát bài Don't Start Now của Dua Lipa.

Tuy nhiên, mô hình EMO vẫn đang trong giai đoạn phát triển. Và phải trải qua quá trình đạo đức giống như Sora, trong các clip mẫu mà EMO thực hiện, hầu hết các nhân vật đều không thể hiện cảm xúc mạnh mẽ như rất tức giận hay khóc nhiều.

Alibaba cam kết trở thành công ty hàng đầu thế giới về công nghệ AI. Mục tiêu là sử dụng AI để thúc đẩy tăng trưởng kinh doanh. Tạo ra những cải tiến mới và cải thiện chất lượng cuộc sống của người dân Sự đổi mới trong quá khứ là Phát triển mô hình ngôn ngữ quy mô lớn WuDao 2.0 tương đương GPT-3 của OpenAI, ra mắt Học viện AI Alibaba, viện đào tạo AI; và liên doanh đầu tư với các trường đại học hàng đầu trên thế giới để phát triển công nghệ AI.