Tin tức Cổng, ngày 24 tháng 4 — Trưởng nhóm mô hình ngôn ngữ lớn của Xiaomi, Luo Fuli, đã tiết lộ trong một cuộc phỏng vấn chuyên sâu rằng mô hình MiMo-V2-Pro có tổng cộng 1 nghìn tỷ tham số và để huấn luyện cần hàng nghìn GPU. Cô cho biết quy mô 1T là ngưỡng tối thiểu để đạt hiệu năng tiến gần tới Claude Opus 4.6 và giành vé vào cửa cạnh tranh cho giai đoạn tiếp theo của các tác nhân AI.
Về mặt kỹ thuật, phiên bản Pro sử dụng cơ chế chú ý thưa cực đoan với tỷ lệ 7:1 giữa chú ý toàn cục và chú ý theo cửa sổ trượt, nhằm kiểm soát chi phí suy luận cho xử lý ngữ cảnh dài. Mô hình cũng giữ lại kiến trúc MTP (Dự đoán Nhiều Token) để tận dụng phần năng lực tính toán dư thừa cho suy luận nhanh hơn.
Về phía quản lý, đội MiMo gồm 100 người chỉ có 30-40 người trực tiếp tham gia vào các vòng lặp cốt lõi. Nhóm hoạt động mà không có phân cấp chính thức hay chia tách nhóm con rõ ràng, cũng như không có hạn chót giao hàng. Khi gặp các vấn đề số học không ổn định như việc tăng vọt loss trong huấn luyện, nhóm ưu tiên dừng huấn luyện để điều tra, ngay cả khi điều đó đồng nghĩa với việc dừng hoạt động trong một hoặc hai tuần và phát sinh chi phí tính toán lên tới hàng triệu đô la.
Tuyên bố miễn trừ trách nhiệm: Thông tin trên trang này có thể đến từ bên thứ ba và không đại diện cho quan điểm hoặc ý kiến của Gate. Nội dung hiển thị trên trang này chỉ mang tính chất tham khảo và không cấu thành bất kỳ lời khuyên tài chính, đầu tư hoặc pháp lý nào. Gate không đảm bảo tính chính xác hoặc đầy đủ của thông tin và sẽ không chịu trách nhiệm cho bất kỳ tổn thất nào phát sinh từ việc sử dụng thông tin này. Đầu tư vào tài sản ảo tiềm ẩn rủi ro cao và chịu biến động giá đáng kể. Bạn có thể mất toàn bộ vốn đầu tư. Vui lòng hiểu rõ các rủi ro liên quan và đưa ra quyết định thận trọng dựa trên tình hình tài chính và khả năng chấp nhận rủi ro của riêng bạn. Để biết thêm chi tiết, vui lòng tham khảo
Tuyên bố miễn trừ trách nhiệm.
Bài viết liên quan
Amazon và OpenAI mở rộng hợp tác: đưa mô hình lên Bedrock, kết thúc độc quyền với Microsoft
OpenAI ngày 3 tháng 5 công bố mở rộng hợp tác với dịch vụ đám mây của Amazon (AWS), theo đó các mô hình OpenAI và tác nhân mã hóa Codex sẽ được cung cấp cho khách hàng AWS thông qua Amazon Bedrock. Theo tường thuật của CNBC, việc mở rộng này là bước đi tiếp theo then chốt sau khi OpenAI và Microsoft chấm dứt hợp đồng độc quyền đám mây vào cuối tháng 4—OpenAI chuyển từ triển khai “duy nhất trên đám mây Microsoft” sang triển khai đa đám mây. AWS đồng thời đã hoàn tất bước tích hợp ban đầu các sản phẩm OpenAI trên nền tảng Bedrock.
Bối cảnh: Kết thúc hợp đồng độc quyền OpenAI–Microsoft, gia hạn IP đến năm 2032
Cuối tháng 4, OpenAI và Microsoft đạt thỏa thuận mới: cấu trúc “Microsoft độc quyền truy cập vào sản phẩm và IP của OpenAI” chấm dứt, Op
ChainNewsAbmedia2giờ trước
Các nhà nghiên cứu triển khai công nghệ DPN-LE để chỉnh sửa các đặc điểm tính cách của AI, chỉ chỉnh sửa 0,5% số nơ-ron
Theo BlockBeats, vào ngày 3/5, nhà nghiên cứu AI Brian Roemmele đã tiết lộ rằng công ty Zero-Human của ông đã triển khai công nghệ DPN-LE (Dual Personality Neuron Localization and Editing) để điều chỉnh chính xác
GateNews2giờ trước
Claude kiểm tra đồng hồ mỗi 15 phút sau khi giành được quyền truy cập công cụ
Theo nhà phát triển Om Patel, Claude AI bắt đầu thường xuyên kiểm tra đồng hồ sau khi giành quyền truy cập một công cụ thời gian vào ngày 3/5, với việc mô hình kiểm tra mỗi 15 phút. Quan sát này cho thấy các mô hình ngôn ngữ lớn trước đây thiếu nhận thức về thời gian một cách tự nhiên và không biết về thời gian hiện tại hoặc
GateNews4giờ trước
Founders Fund Đóng Quỹ Trọng Điểm 6 tỷ USD, Lớn Nhất Kể Từ Khi Ra Mắt, Vào Ngày 3 Tháng 5
Theo Bloomberg, Founders Fund đã hoàn tất huy động vốn cho quỹ chủ lực (flagship) mới nhất của mình với quy mô 6 tỷ USD vào ngày 3 tháng 5, vượt xa đáng kể so với quỹ trước đó khoảng 3,4 tỷ USD. Quỹ này, đồng sáng lập bởi tỷ phú Peter Thiel, sẽ tập trung vào các lĩnh vực tăng trưởng cao bao gồm trí tuệ nhân tạo
GateNews4giờ trước
Khảo sát POLITICO mới nhất: 45% người Mỹ cho rằng đầu tư tiền mã hóa quá rủi ro, 44% lo ngại AI tiến triển quá nhanh
Theo một cuộc thăm dò của POLITICO, mặc dù các ngành công nghiệp AI và crypto đã bơm một lượng tài trợ chính trị đáng kể vào cuộc bầu cử giữa kỳ Hoa Kỳ năm 2026, công chúng Mỹ vẫn phần lớn tỏ ra hoài nghi đối với cả hai lĩnh vực. Khảo sát cho thấy 45% người Mỹ tin rằng việc đầu tư vào tiền mã hóa là không đáng
GateNews5giờ trước
OpenAI Fleyler ủng hộ IPO vào năm 2027, Altman hỗ trợ niêm yết vào Q4 2026
Giám đốc tài chính của OpenAI, Sarah Freier, tỏ thái độ thận trọng về lộ trình IPO năm 2026, cho biết năng lực tính toán và các hợp đồng trung tâm dữ liệu trong gần 1 nghìn tỷ USD cao hơn đáng kể so với doanh thu hằng năm hiện tại là 25 tỷ USD; nếu tăng trưởng không thể bù đắp được các cam kết, rủi ro sẽ bị thị trường chiết khấu. Điều này thể hiện sự bất đồng với tuyên bố công khai của CEO Sam Altman về kế hoạch niêm yết vào Q4 năm 2026; Freier nghiêng về việc lùi đến năm 2027 để xây dựng kỷ luật tài chính. Công ty nhiều lần ra tuyên bố phủ nhận có bất đồng nội bộ.
ChainNewsAbmedia7giờ trước