Kimi K4 được cho là nhắm tới 5,4 nghìn tỷ tham số, ra mắt năm 2027

Đọc trong 13 phút
Kimi K4 Reportedly Targets 5.4 Trillion Parameters and a 2027 Launch

Mẫu flagship tiếp theo của Moonshot có thể gần gấp đôi quy mô

Moonshot AI được cho là đang nhắm tới 5,4 nghìn tỷ tham số cho Kimi K4, dự kiến ra mắt trong quý II hoặc quý III năm 2027. Mô hình đề xuất này sẽ lớn gần gấp đôi Kimi K3 và K3.1 Pro, cả hai được cho là có 2,8 nghìn tỷ tham số.

Nội dung
  1. Mẫu flagship tiếp theo của Moonshot có thể gần gấp đôi quy mô
  2. Con số 5,4 nghìn tỷ có ý nghĩa gì
  3. Lịch phát hành được đưa tin sẽ diễn ra như thế nào
  4. Vì sao K3.5 khiến dữ liệu huấn luyện được chú ý
  5. Năng lực tính toán hiện đủ dùng, nhưng áp lực tăng khi mô hình lớn hơn
  6. Moonshot muốn khai thác phần cứng hiệu quả hơn ra sao
  7. K3 Flash sẽ giải quyết bài toán tốc độ và chi phí
  8. So sánh quốc tế hiện ở mức nào
  9. Điểm chính

Lịch trình được đưa tin cho thấy một bản nâng cấp nhỏ hơn, Kimi K3.5, sẽ ra mắt trước K4, có thể vào khoảng Tết Nguyên đán năm 2027. Một sản phẩm nhanh hơn mang tên Kimi K3 Flash dự kiến xuất hiện trước cuối năm 2026, thay thế Kimi K2.8.

Moonshot chưa công bố chính thức số lượng tham số hay ngày phát hành K4. Con số 5,4 nghìn tỷ và khung thời gian ra mắt từ tháng 4 đến tháng 9 năm 2027 xuất phát từ các thông tin về kế hoạch phát triển của công ty. Những ước tính trước đó đặt K4 ở mức 5 nghìn tỷ đến 6 nghìn tỷ tham số.

Do đó, diễn biến chính là kế hoạch được đưa tin nhằm mở rộng cả quy mô mô hình lẫn danh mục sản phẩm. Moonshot cũng được cho là đang đầu tư vào các kỹ thuật nén, tự chưng cất và hậu huấn luyện, nhằm cải thiện khả năng của các mô hình trong giới hạn tài nguyên tính toán hiện có.

Với người dùng, hai hướng phát triển song song này có ý nghĩa khác nhau. Mẫu flagship lớn hơn có thể xử lý những công việc đòi hỏi cao hơn, trong khi mô hình nhẹ hơn có thể giúp các yêu cầu thường ngày được xử lý nhanh và ít tốn kém hơn. Lộ trình được đưa tin nêu các mục tiêu về quy mô và thời điểm, nhưng chưa xác định giá trong tương lai, hiệu năng đo được hay cách thức tiếp cận.

Con số 5,4 nghìn tỷ có ý nghĩa gì

Tham số là các giá trị số mà mô hình học được trong quá trình huấn luyện. Chúng giúp quyết định cách mô hình nhận diện mẫu và tạo câu trả lời. Mô hình có nhiều tham số hơn có năng lực học lớn hơn, dù tính hữu ích còn phụ thuộc vào dữ liệu huấn luyện, thiết kế và quá trình tinh chỉnh.

Con số 5,4 nghìn tỷ tham số được đưa tin của K4 sẽ tăng 2,6 nghìn tỷ so với mức 2,8 nghìn tỷ được cho là của K3. Dựa trên các số liệu này, mức tăng sẽ vào khoảng 93%, tức K4 lớn gấp khoảng 1,93 lần.

Quảng cáo

K3.5 sẽ chỉ tăng quy mô ở mức nhỏ hơn nhiều. Với 3 nghìn tỷ tham số theo thông tin được đưa tin, mô hình này sẽ cao hơn K3 khoảng 7%. Sự tương phản đó cho thấy hai hướng phát triển khác nhau: tinh chỉnh thế hệ hiện tại với K3.5, sau đó mở rộng quy mô đáng kể với K4.

Mục tiêu chính xác 5,4 nghìn tỷ nằm trong khoảng ước tính trước đó là 5 nghìn tỷ đến 6 nghìn tỷ. Một nguồn tin cho biết khoảng này do Nomura Securities đưa ra. Việc con số mới nhất phù hợp với ước tính trước đó giúp thu hẹp mục tiêu được đưa tin, nhưng Moonshot vẫn chưa xác nhận.

Lịch phát hành được đưa tin sẽ diễn ra như thế nào

Lịch trình được đưa tin của Moonshot kéo dài từ khi giới thiệu K3 vào tháng 7 năm 2026 đến thời điểm K4 có thể ra mắt trong năm 2027. Các sản phẩm ra mắt trong giai đoạn giữa sẽ đáp ứng cả nhu cầu về năng lực flagship lẫn nhu cầu đối với một sản phẩm nhẹ hơn.

  • Ngày 10 tháng 1 năm 2026: Nhà sáng lập Dương Trí Lâm được cho là đã thảo luận về kế hoạch cho K4 trong một bài phát biểu công khai.
  • Ngày 17 tháng 7 năm 2026: Kimi K3 được cho là ra mắt với 2,8 nghìn tỷ tham số và cửa sổ ngữ cảnh 1 triệu token.
  • Cuối tháng 7 năm 2026: Công tác chuẩn bị huấn luyện K4 được cho là đã bắt đầu, cùng với nỗ lực 확보 thêm năng lực tính toán.
  • Trước cuối năm 2026: Kimi K3 Flash dự kiến thay thế Kimi K2.8.
  • Đầu năm 2027: Kimi K3.5 dự kiến ra mắt, có thể vào dịp Tết Nguyên đán, với 3 nghìn tỷ tham số.
  • Quý II hoặc quý III năm 2027: Kimi K4 được cho là sẽ ra mắt với 5,4 nghìn tỷ tham số.

Khung thời gian rộng hơn của K4 kéo dài từ tháng 4 đến tháng 9 năm 2027. Thời điểm K3.5 dự kiến xuất hiện vào khoảng Tết Nguyên đán cũng chỉ là ước tính, nên khoảng cách giữa hai lần ra mắt mẫu flagship vẫn chưa rõ.

Vì sao K3.5 khiến dữ liệu huấn luyện được chú ý

Kimi K3.5 được cho là sẽ sử dụng 10 nghìn tỷ token dữ liệu hậu huấn luyện. Token là các đơn vị thông tin mà mô hình xử lý, thường là từ hoặc phần của từ. Số lượng token đo khối lượng dữ liệu được xử lý, chứ không phải số tài liệu hay sự kiện riêng biệt.

Hậu huấn luyện diễn ra sau khi mô hình hoàn tất giai đoạn huấn luyện ban đầu chính. Quá trình này có thể giúp mô hình làm theo chỉ dẫn, cải thiện câu trả lời và xử lý một số tác vụ nhất định đáng tin cậy hơn. Ví dụ, phản hồi và thực hành lặp lại đều có thể đóng vai trò quan trọng.

Quy mô 10 nghìn tỷ token được đề xuất khiến K3.5 không chỉ là câu chuyện về mức tăng tham số khiêm tốn. Có vẻ Moonshot muốn tập trung đáng kể vào cách mô hình vận hành, bên cạnh việc mở rộng nhỏ hơn về quy mô nền tảng.

Quảng cáo

Các thông tin hiện có không nêu chi tiết về số token này, chẳng hạn bao nhiêu dữ liệu sẽ được thu thập mới, do mô hình tạo ra hay được sử dụng lặp lại. Thiếu chi tiết này rất đáng lưu ý, bởi chất lượng và sự đa dạng của dữ liệu huấn luyện định hình những gì mô hình học được.

Năng lực tính toán hiện đủ dùng, nhưng áp lực tăng khi mô hình lớn hơn

Moonshot được cho là có đủ năng lực tính toán cho chương trình phát triển hiện tại. Tuy nhiên, cùng các nguồn tin đó cũng nói rằng việc mở rộng thêm gặp hạn chế, đặc biệt là khả năng tiếp cận phần cứng mạnh và nguồn dữ liệu chất lượng cao dồi dào.

Hai điều kiện này có thể đồng thời tồn tại. Một công ty có thể có đủ thiết bị cho công việc đang triển khai, nhưng vẫn cần thêm chip, điện năng và hạ tầng hỗ trợ để phát triển phiên bản kế nhiệm lớn hơn.

Công tác chuẩn bị cho K4 được cho là bắt đầu vào cuối tháng 7 năm 2026, chưa đầy hai tuần sau ngày K3 được cho là ra mắt. Moonshot cũng được cho là đang tìm mua thêm bộ xử lý đồ họa Nvidia dựa trên kiến trúc Blackwell. Các chip này được thiết kế để thực hiện nhiều phép tính cần thiết cho việc huấn luyện và vận hành AI.

Việc ra mắt K3 được cho là đã bộc lộ áp lực trong khâu phục vụ người dùng, một nhiệm vụ riêng biệt. Ngày 19 tháng 7, Moonshot được cho là đã tạm dừng đăng ký thuê bao mới dành cho người dùng cá nhân do thiếu năng lực tính toán. Vận hành mô hình cho khách hàng và huấn luyện phiên bản kế nhiệm đều đòi hỏi nguồn lực đáng kể.

Nhà nghiên cứu Ryan Fedasiuk thuộc Viện Doanh nghiệp Mỹ được dẫn lời ước tính rằng chip và hạ tầng năng lượng liên quan cần thiết để hỗ trợ các dịch vụ K3 sẽ đòi hỏi khoản đầu tư lên tới hàng tỷ USD. Ước tính này liên quan đến nguồn lực cần thiết để vận hành ở quy mô lớn, một khoản chi phí cần cân nhắc thường xuyên khi Moonshot lên kế hoạch cho mô hình lớn hơn.

Moonshot muốn khai thác phần cứng hiệu quả hơn ra sao

Các ưu tiên kỹ thuật được đưa tin của Moonshot bao gồm nén mô hình, tự chưng cất và hậu huấn luyện. Mỗi phương pháp đều có thể cải thiện năng lực hoặc hiệu suất, song song với nhiệm vụ tốn kém hơn là tăng quy mô mô hình.

Nén nhằm giảm tài nguyên mà mô hình cần dùng nhưng vẫn giữ được nhiều nhất có thể hiệu năng hữu ích. Tùy phương pháp, kỹ thuật này có thể giảm nhu cầu bộ nhớ, tăng tốc độ phản hồi hoặc giảm chi phí triển khai.

Tự chưng cất sử dụng đầu ra hoặc hành vi đã học của chính mô hình làm tài liệu hướng dẫn cho quá trình huấn luyện tiếp theo. Nói đơn giản, một mô hình có thể tạo ví dụ để giúp tinh chỉnh một phiên bản khác của chính nó. Việc chọn lọc và kiểm tra dữ liệu đó rất quan trọng, vì câu trả lời do mô hình tạo ra có thể chứa sai sót.

Quảng cáo

Hậu huấn luyện tập trung vào cách mô hình áp dụng năng lực của mình. Với người dùng, cải thiện có thể thể hiện ở khả năng làm theo chỉ dẫn tốt hơn hoặc hoàn thành tác vụ đáng tin cậy hơn. Với Moonshot, lợi ích là cải thiện hiệu năng thực tế mà không cần mọi bước tiến đều phụ thuộc vào việc mua một hệ thống tính toán lớn hơn nhiều.

Việc những phương pháp này được cho là ưu tiên hàng đầu giúp lý giải vì sao K3.5 và K4 có thể phục vụ những mục đích khác nhau. Một mẫu tập trung vào tinh chỉnh trong phạm vi quy mô tham số tương tự; mẫu còn lại nhắm tới mức tăng năng lực đáng kể.

K3 Flash sẽ giải quyết bài toán tốc độ và chi phí

Kimi K3 Flash được cho là dự kiến ra mắt trước cuối năm 2026 để thay thế Kimi K2.8. Sản phẩm này sẽ mở rộng danh mục mô hình nhẹ hơn của Moonshot trong khi các mẫu flagship lớn hơn vẫn đang được phát triển.

Mô hình nhẹ hơn có thể hữu ích cho các công việc thường ngày lặp đi lặp lại, chẳng hạn trả lời yêu cầu thông thường hoặc xử lý nhiều tác vụ ngắn. Trong những tình huống đó, thời gian chờ và chi phí mỗi yêu cầu có thể quan trọng không kém hiệu năng khi xử lý vấn đề khó.

Các thông tin đề cập đến khả năng cạnh tranh từ dòng Flash của DeepSeek, bao gồm V4.1 Flash và các phiên bản V4.2 hoặc V5.0 Flash dự kiến. Tuy nhiên, đây vẫn chỉ là so sánh trước thời điểm ra mắt: số lượng tham số, giá và hiệu năng đo được của K3 Flash chưa được tiết lộ trong lộ trình được đưa tin.

Moonshot cũng được cho là đã ngừng cung cấp dịch vụ API Kimi K2.5 và moonshot-v1 vào ngày 31 tháng 8 năm 2026, đồng thời hướng các nhà phát triển sang K3. API là giao diện để phần mềm gửi yêu cầu đến mô hình. Vì vậy, thay đổi sản phẩm ảnh hưởng cả đến người dùng chọn chatbot lẫn nhà phát triển duy trì các ứng dụng phụ thuộc vào một mô hình cụ thể.

So sánh quốc tế hiện ở mức nào

Quy mô được đưa tin của K4 đang được so sánh với Mythos và Fable, hai mô hình được cho là có hơn 5 nghìn tỷ tham số. Với 5,4 nghìn tỷ tham số, K4 sẽ nằm trong cùng khoảng quy mô rộng được mô tả cho các mô hình đó.

Để so sánh năng lực thực tế cần thêm thông tin: các mô hình hoạt động ra sao trên cùng tác vụ, phản hồi nhanh thế nào, chi phí vận hành bao nhiêu và mức độ tin cậy khi hoàn thành công việc. Kiến trúc cũng rất quan trọng, bao gồm tỷ lệ mô hình được sử dụng để trả lời mỗi yêu cầu.

Các thông tin này cho rằng lịch phát triển của Moonshot chậm hơn khoảng một năm so với những nỗ lực hàng đầu quốc tế, và quy nguyên nhân cho những hạn chế về tài nguyên tính toán tiên tiến cũng như quá trình tích lũy dữ liệu huấn luyện chất lượng cao. Đây là đánh giá ước lượng, không nêu chuẩn đánh giá chung hay phiên bản phát hành cụ thể làm mốc so sánh.

Quảng cáo

Cửa sổ ngữ cảnh 1 triệu token được cho là của K3 cũng là một yếu tố hữu ích khi so sánh. Cửa sổ ngữ cảnh là lượng thông tin mô hình có thể xem xét trong một lần tương tác, bao gồm chỉ dẫn và tài liệu. Đây là một năng lực khác với số lượng tham số, đồng thời có ý nghĩa với những người làm việc với các tệp dài.

Các cột mốc cụ thể tiếp theo của Moonshot có thể là K3 Flash như dự kiến, tiếp đó là K3.5 vào đầu năm 2027 và K4 vào cuối năm đó. Thông số kỹ thuật chính thức, điều khoản tiếp cận và kết quả hiệu năng có thể so sánh sẽ cung cấp cho người dùng và nhà phát triển thông tin cần thiết để đánh giá từng sản phẩm.

Điểm chính

  • Kimi K4 được cho là nhắm tới 5,4 nghìn tỷ tham số và ra mắt trong khoảng từ tháng 4 đến tháng 9 năm 2027.
  • Quy mô này sẽ lớn hơn khoảng 93% so với mức 2,8 nghìn tỷ tham số được cho là của K3 và K3.1 Pro.
  • K3.5 được cho là dự kiến ra mắt đầu năm 2027, với 3 nghìn tỷ tham số và 10 nghìn tỷ token dữ liệu hậu huấn luyện.
  • K3 Flash dự kiến ra mắt trước cuối năm 2026 để thay thế K2.8.
  • Moonshot được cho là có đủ năng lực tính toán cho quá trình phát triển hiện tại, nhưng việc mở rộng thêm bị hạn chế bởi nhu cầu phần cứng và dữ liệu.
  • Moonshot chưa công bố chính thức số lượng tham số hay ngày phát hành K4.
Chia sẻ bài viết này

Có thể bạn cũng thích