ChatGPT hoạt động nhờ hàng chục nghìn GPU Nvidia mà Microsoft đang nâng cấp

Một báo cáo mới đã tiết lộ số lượng lớn GPU Nvidia được Microsoft sử dụng và những đổi mới mà hãng đã thực hiện trong việc sắp xếp chúng để giúp OpenAI đào tạo ChatGPT. Tin tức được đưa ra khi Microsoft công bố một bản nâng cấp đáng kể cho siêu máy tính AI của mình để tiếp tục sáng kiến AI sáng tạo trong nước.

Theo Bloomberg, OpenAI đã đào tạo ChatGPT trên một siêu máy tính được Microsoft xây dựng từ hàng chục nghìn GPU Nvidia A100. Microsoft đã công bố một mảng mới sử dụng GPU H100 mới hơn của Nvidia trong tuần này.

Thách thức mà các công ty phải đối mặt bắt đầu vào năm 2019 sau khi Microsoft đầu tư 1 tỷ USD vào OpenAI đồng thời đồng ý xây dựng một siêu máy tính AI cho công ty khởi nghiệp. Tuy nhiên, Microsoft không có phần cứng nội bộ cho những gì OpenAI cần.

Sau khi mua lại chip của Nvidia, Microsoft đã phải suy nghĩ lại về cách sắp xếp số lượng GPU khổng lồ như vậy để tránh tình trạng quá nóng và mất điện. Công ty sẽ không nói chính xác chi phí nỗ lực là bao nhiêu, nhưng phó chủ tịch điều hành Scott Guthrie đưa ra con số trên vài trăm triệu đô la.

Việc chạy đồng thời tất cả các A100 buộc Redmond phải xem xét cách đặt chúng và nguồn điện của chúng. Nó cũng phải phát triển phần mềm mới để tăng hiệu quả, đảm bảo thiết bị mạng có thể chịu được lượng dữ liệu khổng lồ, thiết kế các khay cáp mới mà nó có thể sản xuất độc lập và sử dụng nhiều phương pháp làm mát. Tùy thuộc vào sự thay đổi của khí hậu, các kỹ thuật làm mát bao gồm bay hơi, làm mát đầm lầy và không khí bên ngoài.

Xem thêm: ChatGPT chuẩn bị update, phiên bản sẽ làm đảo lộn cả thế giới

Kể từ thành công ban đầu của ChatGPT, Microsoft và một số đối thủ của nó đã bắt đầu làm việc trên các mô hình AI song song cho các công cụ tìm kiếm và các ứng dụng khác. Để tăng tốc độ AI tổng quát của mình, công ty đã giới thiệu máy ảo ND H100 v5, một máy ảo có thể sử dụng từ tám đến hàng nghìn GPU Nvidia H100.

H100s kết nối thông qua NVSwitch và NVLink 4.0 với băng thông chia đôi 3,6TB/giây giữa mỗi trong số 8 GPU cục bộ trong mỗi máy ảo. Mỗi GPU tự hào có băng thông 400 Gb/giây thông qua các kết nối Nvidia Quantum-2 CX7 InfiniBand và 64GB/giây PCIe5. Mỗi máy ảo quản lý 3,2Tb/giây thông qua mạng lưới cây mỡ không chặn. Hệ thống mới của Microsoft cũng có bộ xử lý Intel Xeon thế hệ thứ 4 và RAM DDR5 16 kênh 4800 MHz.

Microsoft có kế hoạch sử dụng máy ảo ND H100 v5 cho công cụ tìm kiếm Bing mới do AI hỗ trợ, trình duyệt web Edge và Microsoft Dynamics 365. Máy ảo hiện có sẵn để xem trước và sẽ đạt tiêu chuẩn với danh mục đầu tư Azure. Người dùng tiềm năng có thể yêu cầu quyền truy cập .

Từ khoá : GPU Nvidia, ChatGPT, Microsoft

TIN LIÊN QUAN

Sự kiện AI lớn của NVIDIA đã đến

Khi người sáng lập và CEO của NVIDIA, Jensen Huang, ca ngợi về trí thông minh nhân tạo trong quá khứ, hầu hết chúng ta đều cảm thấy đó chỉ là lời quảng cáo phô trương - loại ngôn từ cao sang mà chúng ta thường thấy từ một nhà điều hành với nguồn

ChatGPT chuẩn bị update, phiên bản sẽ làm đảo lộn cả thế giới

Các tính năng nâng cao của ChatGPT, chẳng hạn như gỡ lỗi mã lệnh, viết bài luận hoặc kể một câu chuyện cười, khiến chatbot AI này nhanh chóng gây tiếng vang trên toàn cầu. Chưa dừng lại ở đó, OpenAI sẽ tiếp tục nâng cấp sản phẩm nổi tiếng nhất của

ChatGPT bị sập cùng hàng loạt công cụ OpenAI, người dùng không thể truy cập

Hàng loạt sản phẩm của OpenAI, trong đó có ChatGPT, không thể sử dụng từ chiều 21/2.

Nóng: Microsoft vừa đuổi việc nhóm đạo đức AI - Đâu là nguyên nhân?

Dù đang đầu tư mạnh mẽ vào việc phát triển các sản phẩm trí tuệ nhân tạo (AI) nhưng nhóm đạo đức và xã hội cho AI của Microsoft lại vừa bị sa thải. Hãy cùng Trangcongnghe.vn đi tìm hiểu sự việc này ngay nhé!

Kỹ sư Google tiết lộ bí mật gây sốc: Google “học lỏm” ChatGPT

Sau khi rời Google, kỹ sư này đã chuyển sang làm việc tại ChatGPT. Lý do sẽ được Trangcongnghe.vn tiết lộ chi tiết trong phần nội dung dưới đây.

[CỰC NÓNG] Bản update ChatGPT sắp được “tung” ra - Hứa hẹn là “cơn địa chấn” với giới công nghệ

Phiên bản update ChatGPT mới nhất sắp được ra mắt với những tính năng đa dạng và độc đáo, hứa hẹn mang đến trải nghiệm tuyệt vời cho người dùng. ChatGPT có khả năng tạo ra video, hình ảnh và âm nhạc dựa trên các từ khóa gợi ý, giúp người dùng tạo

OpenAI được định giá khoảng 29 tỷ USD khi đầu tư vào trí thông minh nhân tạo

trangcongnghe.vn - Cơn sốt đầu tư vào trí thông minh nhân tạo rộng rãi đang nóng lên, kể từ khi Chat GPT của OpenAI tạo ra sự bùng nổ công nghệ chatbot vào cuối năm ngoái. Với OpenAI do Microsoft hậu thuẫn và các công ty khởi nghiệp khác huy động

GPT-4 vượt mặt “đàn anh” ChatGPT chỉ với 5 yếu tố

Mô hình AI GPT-4 mới của OpenAI đã được ra mắt một cách hoành tráng với khả năng cung cấp năng lượng cho nhiều ứng dụng, từ tình nguyện viên ảo cho người khiếm thị đến bot học ngôn ngữ được cải tiến trong Duolingo. Tuy nhiên, GPT-4 khác biệt với

THỦ THUẬT HAY

Cách copy nhạc vào iPhone không cần iTunes

Nhiều người sử dụng sản phẩm di động của Apple cảm thấy khá bực mình vì phải phụ thuộc vào iTunes để quản lý nhạc trong iPhone, mặc dù iTunes là một cách hay để quản lý thư viện nhạc của bạn. Vì vậy, bài viết sau sẽ

Đem ứng dụng camera của Pixel 2 lên các máy Android khác

Mình có cài và dùng thử, kết quả vô cùng ấn tượng với khả năng bóc tách hiệu quả như trên Pixel 2. Đối với chế độ chụp tự động, ứng dụng camera này cho ra ảnh mang tính chất đặc trưng trên Pixel 2 với ton màu ấm và độ

Các tính năng hấp dẫn của ứng dụng ghi chú trên iPhone

Đặc biệt từ iOS 11 chúng ta thấy ứng dụng ghi chú trên iPhone càng trở nên lợi hại hơn rất nhiều. Dưới đây sẽ là một số tính năng hữu ích mà bạn cần phải biết với ứng dụng ghi chú trên iPhone để biến nó thành công cụ

Top 5 phần mềm tăng tốc máy tính siêu nhanh không phải ai cũng biết

Sau một thời gian sử dụng máy tính thường xuyên, nhiều người phàn nàn rằng máy tính của mình bị chạy chậm hơn. Để khắc phục lỗi này người dùng có thể tham khảo một số phần mềm tăng tốc máy tính hiệu quả dưới đây. Top 5

Cách tạo, xóa khung viền word 2007,2010, 2013, 2016

Bạn đang làm luận văn và muốn tạo khung viền Word cho tệp tài liệu của bạn trông đẹp mắt người xem hơn nhưng chưa biết phải làm như thế nào? Vậy thì đừng bỏ lỡ bài viết dưới đây với cách tạo, xóa khung viền Word

ĐÁNH GIÁ NHANH

Đánh giá những ưu nhược điểm của xe máy điện PEGA Xmen Trans

Xmen Trans là chiếc xe máy điện hội tụ những công nghệ hiện đại và tốt nhất của hãng PEGA. Xe nổi có thiết kế cá tính và trẻ trung nên đã thu hút được đối tượng học sinh sử dụng là học sinh, sinh viên.

Đánh giá Galaxy C9 Pro: Màn hình đẹp, chơi game ổn định

Ấn tượng đầu tiên khi cầm Samsung Galaxy C9 Pro trên tay là cảm giác gọn gàng, vừa tay. Mặc dù trang bị màn hình lên đến 6 inch nhưng chiều dài của C9 Pro chỉ tương đương iPhone 7 Plus, chiều ngang được mở rộng.

Đánh giá nhanh máy lọc nước Mitsubishi Cleansui Z9E: dễ lắp ráp, công suất lọc 8,000L

Thực tế cảm quan của mình thì nước lọc xong không còn bất cứ mùi gì của nước máy, vị nó giống nước đun sôi để nguội vậy, màng lọc có thể lọc các chất rắn lẫn trong nước kích thước từ 0.01 đến 0.1 micromet.