Meta mới ra mắt mô hình AI thế hệ mới Avocado đã hoàn thành tiền huấn luyện, được gọi nội bộ là "mô hình nền mạnh nhất"

Meta đã thông báo cho một số nhân viên rằng mô hình mới, có tên mã nội bộ là Avocado, đã trở thành “mô hình nền tảng được đào tạo trước mạnh mẽ nhất của công ty cho đến nay”.

Vào ngày 4 tháng 2, Megan Fu, giám đốc sản phẩm tại Phòng thí nghiệm Siêu trí tuệ của Meta, đã tiết lộ những phát triển mới trong mô hình Avocado trong một bản ghi nhớ nội bộ vào ngày 20 tháng 1, theo The Information.

Bản ghi nhớ cho thấy Avicado đã hoàn thành giai đoạn tiền đào tạo, đây là giai đoạn đầu của quá trình phát triển mô hình AI, trong đó mô hình học kiến thức chung, các mẫu và mối quan hệ bằng cách tiếp xúc với các bộ dữ liệu lớn.

Bản ghi nhớ cho biết hiệu suất của Avocado trong thử nghiệm vượt trội so với các mô hình nền tảng được đào tạo trước mã nguồn mở hàng đầu. Mặc dù chưa được tối ưu hóa cho các khóa đào tạo tiếp theo nhưng mô hình đã có thể “cạnh tranh” với các mô hình sau đào tạo hàng đầu về kiến thức, cảm nhận thị giác và hiệu suất đa ngôn ngữ.

Sự phát triển này có ý nghĩa quan trọng đối với vị thế cạnh tranh của Meta trong lĩnh vực AI, nhưng hiệu suất thực tế của mô hình vẫn cần được xác minh độc lập bởi thế giới bên ngoài sau khi phát hành công khai. Cổ phiếu Meta đóng cửa giảm 3,28% vào thứ Tư.

Phòng thí nghiệm siêu trí tuệ dẫn dắt nghiên cứu và phát triển

Mô hình Avocado được phát triển bởi Phòng thí nghiệm Siêu trí tuệ của Meta, một nhóm trong Meta chuyên nghiên cứu và phát triển AI. Phòng thí nghiệm đại diện cho quá trình tái cấu trúc tổ chức mới nhất của Meta trong lĩnh vực trí tuệ nhân tạo.

Đào tạo trước là giai đoạn ban đầu quan trọng trong quá trình phát triển mô hình AI, trong đó mô hình có được kiến thức và mẫu chung bằng cách hiển thị nó với các bộ dữ liệu quy mô lớn trước khi tinh chỉnh nó cho các nhiệm vụ cụ thể. Quả bơ hiện đã hoàn thành giai đoạn này.

Theo một bản ghi nhớ nội bộ, khả năng cạnh tranh của Avocado đã đạt được ở nhiều khía cạnh mà không cần mô hình được đào tạo và tối ưu hóa. Sau đào tạo là giai đoạn tiếp theo của quá trình phát triển mô hình và thường được sử dụng để điều chỉnh và tinh chỉnh cho các tình huống ứng dụng cụ thể.

Bất chấp sự lạc quan nội bộ của Meta về khả năng của Avocado, hiệu suất thực tế của mô hình này không thể được xác minh độc lập vào thời điểm này. Chỉ khi mô hình được phát hành công khai, các nhà nghiên cứu và nhà phát triển bên ngoài mới có thể đánh giá khách quan khả năng của nó.

Theo báo cáo, Meta vẫn chưa công bố mốc thời gian phát hành hay kế hoạch thương mại hóa cho mẫu Bơ. Công ty cũng không cho biết liệu mô hình sẽ được phát hành dưới dạng mã nguồn mở hay chỉ để sử dụng nội bộ.

Cảnh báo rủi ro và tuyên bố từ chối trách nhiệm

        Thị trường có nhiều rủi ro và đầu tư cần thận trọng. Bài viết này không cấu thành lời khuyên đầu tư cá nhân và không tính đến các mục tiêu đầu tư cụ thể, tình hình tài chính hoặc nhu cầu của người dùng cá nhân. Người dùng nên xem xét liệu có bất kỳ ý kiến, ý kiến hoặc kết luận nào trong bài viết này phù hợp với hoàn cảnh cụ thể của họ hay không. Đầu tư phù hợp với rủi ro của riêng bạn.