ChatGPT hoạt động nhờ hàng chục nghìn GPU Nvidia mà Microsoft đang nâng cấp

Một báo cáo mới đã tiết lộ số lượng lớn GPU Nvidia được Microsoft sử dụng và những đổi mới mà hãng đã thực hiện trong việc sắp xếp chúng để giúp OpenAI đào tạo ChatGPT. Tin tức được đưa ra khi Microsoft công bố một bản nâng cấp đáng kể cho siêu máy tính AI của mình để tiếp tục sáng kiến AI sáng tạo trong nước.

Theo Bloomberg, OpenAI đã đào tạo ChatGPT trên một siêu máy tính được Microsoft xây dựng từ hàng chục nghìn GPU Nvidia A100. Microsoft đã công bố một mảng mới sử dụng GPU H100 mới hơn của Nvidia trong tuần này.

Thách thức mà các công ty phải đối mặt bắt đầu vào năm 2019 sau khi Microsoft đầu tư 1 tỷ USD vào OpenAI đồng thời đồng ý xây dựng một siêu máy tính AI cho công ty khởi nghiệp. Tuy nhiên, Microsoft không có phần cứng nội bộ cho những gì OpenAI cần.

Sau khi mua lại chip của Nvidia, Microsoft đã phải suy nghĩ lại về cách sắp xếp số lượng GPU khổng lồ như vậy để tránh tình trạng quá nóng và mất điện. Công ty sẽ không nói chính xác chi phí nỗ lực là bao nhiêu, nhưng phó chủ tịch điều hành Scott Guthrie đưa ra con số trên vài trăm triệu đô la.

Việc chạy đồng thời tất cả các A100 buộc Redmond phải xem xét cách đặt chúng và nguồn điện của chúng. Nó cũng phải phát triển phần mềm mới để tăng hiệu quả, đảm bảo thiết bị mạng có thể chịu được lượng dữ liệu khổng lồ, thiết kế các khay cáp mới mà nó có thể sản xuất độc lập và sử dụng nhiều phương pháp làm mát. Tùy thuộc vào sự thay đổi của khí hậu, các kỹ thuật làm mát bao gồm bay hơi, làm mát đầm lầy và không khí bên ngoài.

Xem thêm: ChatGPT chuẩn bị update, phiên bản sẽ làm đảo lộn cả thế giới

Kể từ thành công ban đầu của ChatGPT, Microsoft và một số đối thủ của nó đã bắt đầu làm việc trên các mô hình AI song song cho các công cụ tìm kiếm và các ứng dụng khác. Để tăng tốc độ AI tổng quát của mình, công ty đã giới thiệu máy ảo ND H100 v5, một máy ảo có thể sử dụng từ tám đến hàng nghìn GPU Nvidia H100.

H100s kết nối thông qua NVSwitch và NVLink 4.0 với băng thông chia đôi 3,6TB/giây giữa mỗi trong số 8 GPU cục bộ trong mỗi máy ảo. Mỗi GPU tự hào có băng thông 400 Gb/giây thông qua các kết nối Nvidia Quantum-2 CX7 InfiniBand và 64GB/giây PCIe5. Mỗi máy ảo quản lý 3,2Tb/giây thông qua mạng lưới cây mỡ không chặn. Hệ thống mới của Microsoft cũng có bộ xử lý Intel Xeon thế hệ thứ 4 và RAM DDR5 16 kênh 4800 MHz.

Microsoft có kế hoạch sử dụng máy ảo ND H100 v5 cho công cụ tìm kiếm Bing mới do AI hỗ trợ, trình duyệt web Edge và Microsoft Dynamics 365. Máy ảo hiện có sẵn để xem trước và sẽ đạt tiêu chuẩn với danh mục đầu tư Azure. Người dùng tiềm năng có thể yêu cầu quyền truy cập .

Cập nhật ngày:
14-03-2023, 15:12

TIN LIÊN QUAN

Sự kiện AI lớn của NVIDIA đã đến

Khi người sáng lập và CEO của NVIDIA, Jensen Huang, ca ngợi về trí thông minh nhân tạo trong quá khứ, hầu hết chúng ta đều cảm thấy đó chỉ là lời quảng cáo phô trương - loại ngôn từ cao sang mà chúng ta thường thấy từ một nhà điều hành với nguồn

ChatGPT chuẩn bị update, phiên bản sẽ làm đảo lộn cả thế giới

Các tính năng nâng cao của ChatGPT, chẳng hạn như gỡ lỗi mã lệnh, viết bài luận hoặc kể một câu chuyện cười, khiến chatbot AI này nhanh chóng gây tiếng vang trên toàn cầu. Chưa dừng lại ở đó, OpenAI sẽ tiếp tục nâng cấp sản phẩm nổi tiếng nhất của

ChatGPT bị sập cùng hàng loạt công cụ OpenAI, người dùng không thể truy cập

Hàng loạt sản phẩm của OpenAI, trong đó có ChatGPT, không thể sử dụng từ chiều 21/2.

Nóng: Microsoft vừa đuổi việc nhóm đạo đức AI - Đâu là nguyên nhân?

Dù đang đầu tư mạnh mẽ vào việc phát triển các sản phẩm trí tuệ nhân tạo (AI) nhưng nhóm đạo đức và xã hội cho AI của Microsoft lại vừa bị sa thải. Hãy cùng Trangcongnghe.vn đi tìm hiểu sự việc này ngay nhé!

Kỹ sư Google tiết lộ bí mật gây sốc: Google “học lỏm” ChatGPT

Sau khi rời Google, kỹ sư này đã chuyển sang làm việc tại ChatGPT. Lý do sẽ được Trangcongnghe.vn tiết lộ chi tiết trong phần nội dung dưới đây.

[CỰC NÓNG] Bản update ChatGPT sắp được “tung” ra - Hứa hẹn là “cơn địa chấn” với giới công nghệ

Phiên bản update ChatGPT mới nhất sắp được ra mắt với những tính năng đa dạng và độc đáo, hứa hẹn mang đến trải nghiệm tuyệt vời cho người dùng. ChatGPT có khả năng tạo ra video, hình ảnh và âm nhạc dựa trên các từ khóa gợi ý, giúp người dùng tạo

OpenAI được định giá khoảng 29 tỷ USD khi đầu tư vào trí thông minh nhân tạo

trangcongnghe.vn - Cơn sốt đầu tư vào trí thông minh nhân tạo rộng rãi đang nóng lên, kể từ khi Chat GPT của OpenAI tạo ra sự bùng nổ công nghệ chatbot vào cuối năm ngoái. Với OpenAI do Microsoft hậu thuẫn và các công ty khởi nghiệp khác huy động

GPT-4 vượt mặt “đàn anh” ChatGPT chỉ với 5 yếu tố

Mô hình AI GPT-4 mới của OpenAI đã được ra mắt một cách hoành tráng với khả năng cung cấp năng lượng cho nhiều ứng dụng, từ tình nguyện viên ảo cho người khiếm thị đến bot học ngôn ngữ được cải tiến trong Duolingo. Tuy nhiên, GPT-4 khác biệt với

THỦ THUẬT HAY

Thủ thuật

Có nên nâng cấp lên RAM DDR5 lúc này?

Với nhiều ưu điểm vượt trội sẽ đặc biệt hấp dẫn để nâng cấp RAM của hệ thống lên DDR5. Nhưng có một số lý do mà bạn xem xem lại trước khi quyết định làm điều đó.

Thủ thuật

Hướng dẫn cách tải và tạo tài khoản Steam trên máy tính để mua game bản quyền

Steam là phần mềm không thể thiếu trong máy tính của hầu hết các game thủ kỳ cựu đang chơi game trên PC. Với nền tảng toàn năng và tiện lợi này, bạn có thể có trong tay tất cả các tựa game nổi tiếng và phổ biến nhất

Thủ thuật

Cách tính tuổi trong Excel

Để tính tuổi trên Excel, chúng ta có thể sử dụng 2 hàm đó là hàm YEAR hoặc DATEDIF.

Thủ thuật

Cách kiểm tra tình trạng pin siêu nhanh trên iPhone, iPad và MacBook

Sau một thời gian sử dụng, các thiết bị điện tử chắc chắn sẽ bị chai pin. Điều này xảy ra khi Pin lithium-ion - loại pin thường được dùng trong các thiết bị như điện thoại, máy tính bảng hay laptop ngày nay, bị mất pin

Tiện ích Internet

Tính năng Timeline đã dần xuất hiện trong các bản build Windows 10 Redstone 4(insider preview )

Mặc dù đã không thể 'chung bước' cùng Windows 10 Fall Creators Update như những gì hãng đã vạch ra từ đầu, tính năng này đã dần xuất hiện trên các bản build Insider Preview của Windows 10 Redstone 4.

ĐÁNH GIÁ NHANH

Thiết bị số / Đánh giá

So sánh cấu hình, hiệu năng Snapdragon 625 và Exynos 7872: Lựa chọn nào tốt hơn?

Mới đây, Samsung vừa chính thức ra mắt bộ vi xử lý mới thuộc phân khúc tầm trung của hãng là Exynos 7872 và nó đã được trang bị trên chiếc smartphone vừa mới ra mắt của Meizu là M6s.

Thiết bị số / Đánh giá

Đánh giá Samsung Gear 360: Thiết kế đẹp, ảnh 360 độ ấn tượng

Là thiết bị về nước muộn nhất trong hệ sinh thái di động được Samsung giới thiệu tại MWC 2016, máy ảnh Gear 360 nhận được sự quan tâm đặc biệt từ giới công nghệ....

Xe cộ / Đánh giá

Đánh giá Kawasaki Bajaj Pulsar 200NS: Môtô giá rẻ cho giới trẻ

Mẫu môtô giá rẻ Kawasaki Bajaj Pulsar 200NS 2016 được nhập khẩu nguyên chiếc về Việt Nam nổi bật với thiết kế mạnh mẽ, tay lái rộng cùng giá bán khá mềm chỉ 78 triệu đồng.