Mô hình AI 1 nghìn tỷ tham số, chạy trên siêu máy tính mạnh nhất thế giới

Con người thua trí tuệ nhân tạo, khi bạn thay lốp, trí tuệ nhân tạo đã thay cả 2 bánh xe rồi!

Làm thế nào để ngăn trí tuệ nhân tạo đánh cắp việc làm?

Làm cách nào để quản lý một công nghệ trí tuệ nhân tạo như ChatGPT?

Intel giới thiệu “mô hình AI sinh học” Aurora genAI cho khoa học, siêu máy tính Aurora 2 Exaflops với thông số lên tới 1 nghìn tỷ là một con quái vật và hệ thống này sẽ được sử dụng để cung cấp năng lượng cho mô hình AI Aurora genAI. Được công bố trong bài phát biểu quan trọng của ISC23 ngày hôm nay, các mô hình genAI của Aurora sẽ được đào tạo về văn bản chung, văn bản khoa học, dữ liệu khoa học và mã liên quan đến miền. Đây sẽ là một mô hình AI sinh học hoàn toàn tập trung vào khoa học, với các ứng dụng tiềm năng bao gồm:

– Sinh học hệ thống

– nghiên cứu ung thư

– khoa học khí hậu

– vũ trụ

– Hóa chất và vật liệu polyme

– khoa học

Mô hình genAI Intel Aurora dựa trên Megatron và DeepSpeed. Quan trọng nhất, kích thước mục tiêu của mô hình mới là 1 nghìn tỷ tham số. Trong khi đó, kích thước mục tiêu của ChatGPT phiên bản miễn phí và phiên bản công khai chỉ là 175 triệu lượt so sánh. Số lượng tham số đã tăng theo hệ số 5,7.

Các mô hình AI sinh học cho khoa học này sẽ được đào tạo về văn bản chung, mã, văn bản khoa học và dữ liệu khoa học có cấu trúc từ sinh học, hóa học, khoa học vật liệu, vật lý, y học và các nguồn khác.

Các mô hình kết quả (với tối đa 1 nghìn tỷ tham số) sẽ được sử dụng trong nhiều ứng dụng khoa học, từ thiết kế phân tử và vật liệu đến tổng hợp kiến ​​thức từ hàng triệu nguồn để đề xuất các hệ thống sinh học, polyme và hóa học vật liệu năng lượng, Khoa học thực nghiệm mới thú vị trong các lĩnh vực như khí hậu và vũ trụ học. Mô hình này cũng sẽ được sử dụng để đẩy nhanh việc xác định các quá trình sinh học liên quan đến bệnh ung thư và các bệnh khác, đồng thời đưa ra các khuyến nghị mục tiêu cho việc thiết kế thuốc.

bài gốc đây.