DeepSeek-R1 phát hành tròn 1 năm, tiết lộ mô hình mới 「MODEL1」

BlockBeats tin tức, ngày 21 tháng 1, theo báo cáo của lượng tử vị, nhân dịp kỷ niệm 1 năm ra mắt của DeepSeek-R1, đã tiết lộ về mô hình mới 「MODEL1」. DeepSeek đã cập nhật mã FlashMLA trên GitHub, trong đó có 28 lần đề cập đến MODEL1 trong tổng số 114 tệp, xuất hiện cùng với V32 như các mô hình khác nhau. Được biết V32 là DeepSeek-V3.2, rất có thể MODEL1 là kiến trúc mới. Các khác biệt cụ thể trong mã nằm ở cách bố trí bộ đệm KV, xử lý thưa thớt và giải mã FP8, đồng thời có nhiều điểm khác biệt trong tối ưu hóa bộ nhớ.
Tuyên bố miễn trừ trách nhiệm: Thông tin trên trang này có thể đến từ các nguồn bên thứ ba và chỉ mang tính chất tham khảo. Thông tin này không phản ánh quan điểm hoặc ý kiến của Gate và không cấu thành bất kỳ lời khuyên tài chính, đầu tư hoặc pháp lý nào. Giao dịch tài sản ảo tiềm ẩn rủi ro cao. Vui lòng không chỉ dựa vào thông tin trên trang này khi đưa ra quyết định. Để biết thêm chi tiết, vui lòng xem Tuyên bố miễn trừ trách nhiệm.
Bình luận
0/400
Không có bình luận