Công ty AI của Musk, xAI, đã chính thức phát hành mã nguồn cho Grok-1

PANews đưa tin hôm 18/3 rằng công ty trí tuệ nhân tạo xAI của Musk thông báo rằng họ sẽ mở ra trọng lượng và kiến trúc của mô hình chuyên gia lai tham số Grok-1 trị giá 314 tỷ của mình. Grok-1 là một mô hình ngôn ngữ lớn được đào tạo từ đầu bởi xAI với kiến trúc mô hình chuyên gia lai, trong đó 25% trọng lượng được kích hoạt trên một mã thông báo nhất định. Trọng số mô hình cơ sở và kiến trúc mạng của mô hình hiện đang mở theo giấy phép Apache 2.0. Giai đoạn tiền đào tạo của Grok-1 đã kết thúc vào tháng 10/2023 và hiện đang được phát hành với các điểm kiểm tra mô hình cơ sở thô và không tinh chỉnh cho bất kỳ ứng dụng cụ thể nào. Người dùng quan tâm đến việc sử dụng mô hình có thể làm theo hướng dẫn trên github.com/xai-org/grok.