Animate Anyone – Khung công tác chuyển đổi hình ảnh thành video hoạt hình nhân vật do Alibaba phát triển.
Animate Anyone – Khung công tác chuyển đổi hình ảnh thành video hoạt hình nhân vật do Alibaba phát triển. logo

Animate Anyone – Khung công tác chuyển đổi hình ảnh thành video hoạt hình nhân vật do Alibaba phát triển.

Animate Anyone là một framework mã nguồn mở được Viện Nghiên cứu Tính toán Thông minh Alibaba phát triển, cho phép biến các nhân vật hoặc hình ảnh tĩnh thành động. Nó đã nhận được gần 13,000 sao trên GitHub và thu hút nhiều cuộc thảo luận sôi nổi trong và ngoài nước. Framework này dựa trên mô hình khuếch tán, kết hợp các công nghệ như ReferenceNet, Pose Guider và mô-đun sinh thời gian để đảm bảo tính nhất quán, khả năng kiểm soát và ổn định khi biến ảnh thành video động, xuất ra video động chất lượng cao. Chức năng “Vũ công thông minh” trong trợ lý trò chuyện AI Tongyi Qianwen của Alibaba được xây dựng dựa trên công nghệ này, cho phép nhân vật trong ảnh nhảy các điệu như bài thi số 3, nhảy vai, nhảy ma quái, v.v.

Ứng dụng của Animate Anyone

  • Động hóa nhân vật: Dù là người thật, nhân vật anime hay hình ảnh hoạt hình, Animate Anyone đều có thể làm cho chúng chuyển động, mang lại niềm vui cho các dự án sáng tạo.
  • Tổng hợp video thời trang: Trong lĩnh vực thời trang, Animate Anyone có thể biến người mẫu tĩnh thành trình diễn động, thể hiện các góc độ và hiệu ứng trang phục khác nhau, mang đến trải nghiệm thị giác mới cho việc trình diễn trang phục.
  • Tạo video nhảy múa: Animate Anyone kết hợp hình ảnh tham khảo và hoạt hình khung xương tư thế, có thể tạo ra video nhảy múa chân thực, cho phép nhân vật trong ảnh cũng có thể nhảy múa.

Cách sử dụng Animate Anyone

Trang chủ dự án Animate Anyone là https://humanaigc.github.io/animate-anyone/, địa chỉ kho mã GitHub là https://github.com/HumanAIGC/AnimateAnyone, bạn có thể trải nghiệm nhanh trực tuyến qua ứng dụng Tongyi Qianwen hoặc Hugging Face:

  1. Demo cộng đồng Hugging Face: Truy cập https://huggingface.co/spaces/xunsong/Moore-AnimateAnyone, tải lên hoặc kéo thả hình ảnh, thêm hình ảnh tư thế động và điều chỉnh tham số, sau đó nhấn Animate để làm cho nhân vật trong ảnh chuyển động.
  2. Tongyi Qianwen: Cài đặt ứng dụng Tongyi Qianwen trên điện thoại, sau đó chọn “Một bức ảnh để nhảy múa” trong trung tâm lệnh hoặc nhập trực tiếp “Vũ công thông minh”, chọn mẫu nhảy mà bạn quan tâm, tải lên ảnh tĩnh và bạn sẽ có video động.