Meta ra mắt Muse Spark Open hỗ trợ chạy cục bộ trên Mac

Meta ra mắt Muse Spark Open với 816 tỷ tham số, hỗ trợ chạy cục bộ trên máy tính Mac nhưng đòi hỏi cấu hình phần cứng tối thiểu lên tới 1TB RAM.

Meta vừa chính thức phát hành mô hình AI mang tên Muse Spark Open, cung cấp khả năng vận hành trực tiếp trên các dòng máy tính Mac của Apple. Đây là bước đi tiếp theo của tập đoàn công nghệ này nhằm mở rộng hệ sinh thái mô hình mở dành cho cộng đồng phát triển phần mềm toàn cầu.

Quy mô tham số và khả năng xử lý đa phương thức

Theo công bố từ Meta, Muse Spark Open là mô hình open-weight model (mô hình trọng số mở, tức mô hình công khai các tham số huấn luyện để người dùng tùy biến) có năng lực xử lý mạnh mẽ nhất hiện nay tại Mỹ. Hệ thống được xây dựng với quy mô 816 tỷ tham số cùng context window (cửa sổ ngữ cảnh, lượng dữ liệu tiếp nhận trong một phiên xử lý) lên tới 1 triệu token.

Mô hình sở hữu kiến trúc natively multimodal (đa phương thức nguyên bản, xử lý đồng thời văn bản, hình ảnh và mã nguồn). Công nghệ này được thiết kế để tối ưu hóa cho các tác vụ lập trình phức tạp, cho phép hệ thống phân tích khối lượng mã nguồn đồ sộ trong một phiên làm việc duy nhất.

Quy trình tự động hóa lập trình và tích hợp công cụ

Meta đã tiến hành kết hợp mô hình mới này cùng Muse Code, nền tảng terminal lập trình thông minh do hãng tự phát triển. Mục tiêu của sự kết hợp này là hiện thực hóa các agentic workflows (quy trình làm việc dạng agent, nơi AI tự thực hiện chuỗi thao tác đa bước mà không cần can thiệp liên tục).

Trong các thử nghiệm nội bộ, Meta cho biết mô hình đã tự động phát hiện lỗi và bổ sung tính năng mới cho ứng dụng Mastodon. Ngoài ra, công cụ này cũng hỗ trợ duyệt dữ liệu và cắt ghép video trực tiếp trên phần mềm DaVinci Resolve mà không cần con người chỉ định từng lệnh riêng lẻ.

Rào cản phần cứng khi triển khai cục bộ

Mặc dù được giới thiệu với tính năng chạy trực tiếp trên thiết bị cá nhân, yêu cầu kỹ thuật để vận hành mô hình này lại là bài toán nan giải. Theo báo cáo từ trang tin công nghệ Engadget, hệ thống đòi hỏi dung lượng bộ nhớ tối thiểu lên tới 1 terabyte RAM để có thể tải và chạy mô hình.

Mức cấu hình này khiến thiết bị duy nhất hiện nay đáp ứng tốt trải nghiệm là Mac Studio trang bị vi xử lý M5 Ultra. Đối với phần lớn cá nhân và doanh nghiệp vừa và nhỏ, việc đầu tư cỗ máy sở hữu thông số này đòi hỏi mức ngân sách rất lớn so với thông lệ.

Khả năng tiếp cận thông qua giao diện lập trình

Để giải quyết bài toán hạ tầng cho số đông lập trình viên, Meta đã đưa mô hình lên các nền tảng API (giao diện lập trình ứng dụng) phổ biến. Người dùng có thể tích hợp sức mạnh tính toán của hệ thống vào sản phẩm phần mềm thông qua mạng đám mây thay vì tự dựng máy chủ riêng.

Các kết quả đánh giá do Meta tự công bố cho thấy mô hình vượt trội hơn nhiều giải pháp trọng số mở hiện hành. Tuy nhiên, mức chi phí dịch vụ cụ thể trên từng nền tảng API cũng như các bài kiểm tra hiệu năng độc lập từ bên thứ ba hiện vẫn chưa được công bố đầy đủ.

Góc nhìn của tôi

Việc Meta đòi hỏi cấu hình lên tới 1TB RAM để chạy một mô hình cục bộ đi ngược lại hoàn toàn xu hướng thu nhỏ tham số mà ngành công nghiệp AI đang theo đuổi. Khi đối chiếu với nỗ lực mà PrismML nén mô hình AI 27B xuống 5.9 GB nhằm tối ưu cho phần cứng phổ thông, nước đi của Meta cho thấy hai triết lý phát triển hoàn toàn trái ngược nhau.

Một bên tìm cách tinh gọn kiến trúc để đưa trí tuệ nhân tạo vào thiết bị cá nhân với chi phí thấp nhất có thể. Phía Meta lại chọn cách dồn ép toàn bộ sức mạnh khổng lồ của trung tâm dữ liệu vào một cỗ máy bàn chuyên dụng, bất chấp việc phần cứng đó nằm ngoài tầm với của hầu hết mọi người.

Sự tương phản này chứng minh rằng định nghĩa về xử lý tại biên (on-device AI) đang bị phân hóa sâu sắc. Nếu các phương pháp lượng tử hóa và nén mô hình không theo kịp đà tăng tham số, khái niệm mô hình mở chạy trên máy cá nhân sẽ sớm trở thành đặc quyền riêng của các phòng thí nghiệm có ngân sách dồi dào.

Điều này có ý nghĩa gì với bạn?

  • Đánh giá nhu cầu thực tế trước khi đầu tư hạ tầng: Bạn không nên vội vã mua sắm các dòng máy trạm đắt tiền chỉ để thử nghiệm mô hình, trừ khi dự án thực sự bắt buộc dữ liệu nhạy cảm không được rời khỏi thiết bị cục bộ.
  • Ưu tiên trải nghiệm thông qua cổng kết nối API: Tận dụng các nền tảng API thương mại sẵn có để đánh giá độ chính xác của Muse Spark Open trên tập dữ liệu của bạn trước khi tính đến phương án tự lưu trữ.
  • Tập trung khai thác năng lực tự động hóa: Lập trình viên có thể ứng dụng các tính năng dạng agent của mô hình để tự động hóa khâu rà soát mã nguồn lỗi hoặc xử lý các tác vụ biên tập tệp đa phương tiện phức tạp.

Nguồn tham khảo: TechCrunch

Meta ra mắt Muse Spark Open hỗ trợ chạy cục bộ trên Mac
Nguồn ảnh: TechCrunch

← Về tất cả bài viết Về trang chủ