Tại sao Làm mát bằng Không khí Đạt đến Giới hạn: Tính chất Vật lý đằng sau sự Chuyển đổi của Trung tâm Dữ liệu sang Chất lỏng

Hãy hỏi năm nhà cung cấp xem làm mát bằng không khí đạt giới hạn ở mức nào và bạn sẽ nhận được năm con số khác nhau: 15, 20, 40, 50, thậm chí 80 kW cho mỗi tủ rack. Mỗi con số đều có thể được bảo vệ, bởi vì mỗi con số mô tả một ranh giới khác nhau: trung bình của một phòng máy cũ, một lối đi được cô lập, một sản phẩm gắn sát tủ (close-coupled), hoặc một cửa sau chủ động. Sự nhầm lẫn sẽ biến mất một khi các nguyên tắc vật lý được trình bày rõ ràng, bởi vì giới hạn này là một ngưỡng biến đổi được xác định bởi ba cơ chế có thể đo lường được, và cả ba đều bắt nguồn từ một phương trình duy nhất. Hướng dẫn này sẽ phân tích các nguyên lý vật lý đằng sau giới hạn của làm mát bằng không khí (air wall): tại sao truyền nhiệt đối lưu lại giới hạn làm mát bằng không khí, ngưỡng thực tế cho từng kiến trúc không khí nằm ở đâu, những thay đổi nào về mặt vi mạch (chip) đã khiến vấn đề trở nên cấp bách, và công nghệ kỹ thuật nào thực sự vượt qua được giới hạn đó. Câu trả lời này rất quan trọng đối với bất kỳ ai đang thiết kế hệ thống làm mát cho phần cứng AI, bởi vì chọn một kiến trúc có nghĩa là chọn một phía của ngưỡng giới hạn.

Phương trình duy nhất đằng sau mọi quyết định làm mát

Mọi hệ thống làm mát đối lưu, dù bằng không khí hay chất lỏng, đều tuân theo định luật làm mát của Newton: Q = h × A × ΔT. Nhiệt lượng được loại bỏ bằng hệ số truyền nhiệt đối lưu nhân với diện tích bề mặt nhân với chênh lệch nhiệt độ giữa bề mặt và chất lỏng. Trong ba đại lượng này, diện tích bề mặt của một gói chip được cố định bởi kích thước của nó, và chênh lệch nhiệt độ cho phép bị giới hạn bởi ngưỡng nhiệt của silicon, chỉ còn lại hệ số h là đại lượng duy nhất mà kỹ thuật có thể thay đổi theo nhiều cấp độ. Làm mát bằng không khí cưỡng bức mang lại giá trị h khoảng từ 50 đến 250 W/m²·K. Chất lỏng chuyển động mang lại từ 1.000 đến 10.000 W/m²·K. Việc chuyển đổi chất làm mát từ không khí sang nước giúp tăng khả năng đối lưu lên gần 100 lần trước khi có bất kỳ thay đổi thiết kế nào khác.

Biểu đồ so sánh hệ số truyền nhiệt đối lưu giữa làm mát bằng không khí và làm mát bằng chất lỏng

Về phương diện vận chuyển nhiệt lượng cũng cho thấy sự chênh lệch tương tự. Tính trên một đơn vị thể tích, nước có khả năng mang theo lượng nhiệt lớn gấp khoảng 3.500 lần so với không khí với cùng một mức tăng nhiệt độ. Để tản một lượng nhiệt 40 kW ra khỏi một tủ máy (rack) bằng không khí với mức tăng nhiệt độ là 15°C, đòi hỏi một lưu lượng khoảng 2,5 mét khối không khí mỗi giây, tương đương với 8.000 CFM, thổi qua một tủ máy rộng 600 mm. Ngược lại, để tản cùng một lượng nhiệt đó bằng nước, chỉ cần vài lít nước mỗi phút chảy qua một ống dẫn có kích thước bằng ngón tay. Kỹ thuật làm mát bằng không khí thực chất là nghệ thuật tối ưu hóa hai con số này đến giới hạn tối đa; và làm mát bằng chất lỏng bắt đầu tại chính điểm mà việc cố gắng tối ưu hóa thêm nữa không còn mang lại hiệu quả kinh tế.

Giới hạn của làm mát bằng không khí thực sự nằm ở đâu

Giới hạn thực tế phụ thuộc vào cấu trúc của hệ thống thông gió, đây là lý do tại sao các mức giới hạn được công bố lại có sự khác biệt:

Kiến trúcMức trần thực tếYếu tố quyết định giới hạn
Làm mát phòng thông thường (CRAC/CRAH)15 đến 20 kW mỗi rackLuồng khí dùng chung kéo dài, tổn thất do pha trộn không khí, thiết kế dựa trên mức trung bình của phòng
Hành lang nóng/lạnh cách ly30 đến 40 kW mỗi rackKhối lượng luồng gió, năng lượng quạt, giới hạn tiếng ồn
Thiết kế kết nối gần (close-coupled) và tường quạt (fan-wall)41 đến 50 kW mỗi rackLuồng khí ngắn, CFM mạnh, kiểm soát nhiệt độ cung cấp
Bộ trao đổi nhiệt cửa sau (cuộn dây chất lỏng)40 đến 80 kW mỗi tủ rackTruyền nhiệt đã bằng chất lỏng; không khí chỉ luân chuyển bên trong tủ rack
Trực tiếp đến chip và ngâm100 đến 250+ kW mỗi tủ rackHệ số đối lưu chuyển sang giá trị của chất lỏng


Ví dụ về cửa sau (rear-door) giải thích phần lớn sự nhầm lẫn: một tủ rack được trang bị cửa làm mát bằng chất lỏng chủ động vẫn sử dụng các máy chủ tản nhiệt bằng không khí, tuy nhiên, nó đã thực sự chuyển sang sử dụng chất lỏng cho quá trình luân chuyển nhiệt lượng. Nhận định trung thực về giới hạn của hệ thống làm mát bằng không khí là: việc luân chuyển không khí tự nhiên (unassisted air transport) sẽ đạt đến ngưỡng bão hòa ở mức khoảng 35 đến 40 kW cho mỗi tủ rack trong một hệ thống đóng kín được thiết kế tối ưu, và bất kỳ kiến trúc nào vượt quá con số này đều bắt buộc phải có sự hiện diện của chất lỏng tại một điểm nào đó trong quy trình truyền nhiệt.

Biểu đồ thanh thể hiện giới hạn mật độ công suất tủ rack thực tế phân theo từng kiến trúc làm mát bằng không khí

Ba Cơ Chế Tạo Nên Giới Hạn Của Hệ Thống

Lưu lượng không khí trở nên bất khả thi về mặt vật lý

Lưu lượng không khí yêu cầu tăng theo tỷ lệ thuận với tải nhiệt ở mức tăng nhiệt độ cố định. Mức 8.000 CFM mà một tủ rack 40 kW cần đã gây quá tải cho các khu vực hút gió của máy chủ vốn chỉ có diện tích vài inch vuông; ở mức 100 kW, con số này tiến gần tới 20.000 CFM, vận tốc không khí đi qua thùng máy vượt quá mức mà bất kỳ không gian kín nào có thể chịu đựng, và các trường hợp hỏng hóc được ghi nhận cho thấy biên độ an toàn mong manh đến mức nào: một sự cố đã được ghi nhận khi 250 tủ rack với công suất chỉ 6 kW mỗi tủ đã tăng từ 72°F lên hơn 90°F chỉ trong vòng 75 giây sau khi quá trình làm mát bị gián đoạn.

Năng lượng quạt tuân theo quy luật lập phương

Công suất quạt tăng theo lập phương của lưu lượng không khí. Việc tăng 10 phần trăm thể tích không khí đòi hỏi thêm khoảng 33 phần trăm công suất quạt, và quạt của chính các máy chủ sẽ cùng với quạt của cơ sở làm tăng hóa đơn tiền điện. Các phòng máy được làm mát bằng không khí với mật độ cao chứng kiến chi phí làm mát tăng lên gần một phần ba tổng năng lượng của cơ sở, với chỉ số PUE (Hiệu quả sử dụng điện năng) giảm xuống dưới mức 1.5, trong khi môi trường tiếng ồn ở các hành lang nóng đạt từ 85 đến 95 dBA, mức cần phải có thiết bị bảo vệ thính giác.

Chênh lệch nhiệt độ làm mất đi tính đồng nhất

Ngay cả khi tổng lưu lượng khí đủ đáp ứng, sự chênh lệch nhiệt độ theo chiều dọc (vertical gradient) bên trong một tủ rack mật độ cao lại là một vấn đề: các máy chủ ở đỉnh của tủ rack 40 kW hút vào luồng không khí nóng hơn rõ rệt so với các máy chủ ở dưới cùng, và tốc độ lão hóa của linh kiện tỷ lệ thuận với nhiệt độ. Độ tin cậy của chất bán dẫn tuân theo quy tắc mười độ (ten-degree rule), theo đó mỗi khi nhiệt độ tăng 10°C, tuổi thọ của linh kiện sẽ giảm đi xấp xỉ một nửa. Thống kê thực tế cũng cho thấy khoảng 55% các trường hợp hỏng hóc thiết bị điện tử có nguyên nhân trực tiếp từ tình trạng nhiệt độ quá cao hoặc phân bổ nhiệt không đồng đều. Do vậy, giới hạn này không chỉ đơn thuần là rào cản về công suất làm mát, mà còn là một giới hạn nghiêm ngặt về độ tin cậy của hệ thống.

Phía Chip Đã Bỏ Lại Hệ Thống Làm Mát Bằng Không Khí Từ Nhiều Năm Trước

Cách nhìn nhận từ góc độ tủ rack đã đánh giá thấp mức độ nghiêm trọng của vấn đề, bởi vì giới hạn thực sự lại nằm ở chính các vi mạch silicon. Công nghệ làm mát bằng không khí cưỡng bức chỉ đạt hiệu quả tối đa ở mức xấp xỉ 1.6 W/cm² thông lượng nhiệt trên bề mặt thiết bị. Thế nhưng, các thiết bị gia tốc hiện tại đã vượt qua ngưỡng này từ nhiều thế hệ trước: dòng H100 vận hành ở mức gần 86 W/cm² với công suất 700 W mỗi vi mạch (package), dòng B200 tăng gấp đôi công suất lên tới 1,000 W, và theo lộ trình, dòng B300 sẽ vươn tới mức 1,400 W, trong đó lượng nhiệt được tập trung tại các vùng chiplet nhỏ hơn rất nhiều so với toàn bộ vi mạch. Không một hệ thống tản nhiệt và quạt thông thường nào có thể khỏa lấp được một khoảng cách lớn như vậy; do đó, hệ số đối lưu buộc phải thay đổi, đồng nghĩa với việc phải đưa chất lỏng tiếp xúc trực tiếp với bề mặt chip. Các tấm làm mát bằng chất lỏng (Cold plates) giải quyết vấn đề này bằng cách dẫn dòng chất lỏng qua các vi kênh cách silicon chỉ vài milimet, mang lại mức điện trở nhiệt từ 0.02 đến 0.10°C/W — vượt trội hơn hẳn so với những gì hệ thống làm mát bằng không khí có thể đạt được.

Sổ Kế toán Hiệu quả Trông Như Thế Nào Sau Khi Chuyển Đổi

Thực tế vận hành củng cố thêm cho lý thuyết vật lý. Các cơ sở làm mát bằng không khí thường chạy với mức PUE từ 1,4 đến 1,8, với hệ thống ngăn vùng được tối ưu hóa tốt đạt mức 1,2 đến 1,3; các sảnh làm mát bằng chất lỏng duy trì mức 1,05 đến 1,15 gần như độc lập với khí hậu. Độ tin cậy thay đổi theo nhiệt độ: loại bỏ quạt máy chủ đồng nghĩa với việc loại bỏ một loại linh kiện chịu trách nhiệm cho một phần lớn các lỗi tại hiện trường, và các triển khai được ghi nhận báo cáo thời gian trung bình giữa các lần hỏng hóc (MTBF) kéo dài từ khoảng 40.000 đến 65.000 giờ, với ổ cứng tăng khoảng 20 phần trăm tuổi thọ dịch vụ ở nhiệt độ thấp hơn, ổn định hơn mà chất lỏng duy trì. Tiếng ồn tuân theo cùng một hướng, từ 85 đến 95 dBA ở hành lang nóng xuống mức có thể trò chuyện được. Mỗi dòng của sổ kế toán đều truy nguyên về cùng một nguồn gốc: hệ số đối lưu đã thay đổi, và mọi thứ sau khi loại bỏ nhiệt trở nên dễ dàng hơn.

Vượt qua Giới hạn: Những gì Thay đổi và Những gì Giữ nguyên

Con đường chuyển đổi diễn ra qua các giai đoạn dễ nhận biết. Bộ trao đổi nhiệt cửa sau (Rear-door heat exchangers) giúp chuyển đổi phòng máy sử dụng làm mát bằng không khí hiện có sang sử dụng chất lỏng truyền nhiệt mà không cần chạm vào các máy chủ, đáp ứng mức tải từ 40 đến 80 kW cho mỗi tủ rack trong khi tải trọng thực tế còn đòi hỏi cao hơn. Tấm làm lạnh trực tiếp đến chip (Direct-to-chip cold plates) tiếp quản từ mức 35 kW trở lên và thống trị các đợt triển khai AI hiện tại, giữ nguyên khung máy chủ tiêu chuẩn và quy trình dịch vụ trong khi thiết bị phân phối chất làm mát (CDU) quản lý vòng lặp; kiến trúc và các thành phần của nó được trình bày chi tiết trong phần thiết bị phân phối dung dịch làm mát là gì và cách thức hoạt động của nó. Hệ thống làm mát ngâm loại bỏ hoàn toàn không khí khỏi quá trình truyền nhiệt, phục vụ cho các hệ thống có mật độ cao nhất. Điều không thay đổi ở cả ba công nghệ này là yêu cầu về một hệ thống tuần hoàn chất lỏng ổn định, và đó là lúc câu chuyện kỹ thuật chuyển hướng sang các máy bơm.

Sau Khi Vượt Qua Giới Hạn, Máy Bơm Sẽ Chịu Mọi Rủi Ro

Công nghệ làm mát bằng chất lỏng thay thế các giới hạn về luồng không khí bằng các yêu cầu khắt khe về thủy lực: duy trì áp suất ổn định để vượt qua lực cản của vi kênh trên tấm làm mát, vận hành liên tục với tốc độ biến thiên, tương thích với thành phần hóa học của chất làm mát glycol, và đảm bảo tuyệt đối không rò rỉ ngay phía trên các thiết bị đang hoạt động. Máy bơm trở thành linh kiện quyết định việc chuyển hóa lợi thế vật lý thành độ tin cậy trong vận hành hàng ngày. Các máy bơm tuần hoàn truyền động từ không phớt với đường dẫn ướt bằng thép không gỉ, chẳng hạn như dòng MDW, đáp ứng trực tiếp yêu cầu về độ ổn định lưu lượng thấp và không rò rỉ (zero-leakage), và toàn bộ khuôn khổ lựa chọn được trình bày trong hướng dẫn lựa chọn máy bơm làm mát bằng chất lỏng cho trung tâm dữ liệu AI.

Aulank Pump là nhà sản xuất máy bơm truyền động từ xoáy không phớt (seal-less vortex magnetic drive pumps) chuyên dụng cho các vòng lặp làm mát bằng chất lỏng trong trung tâm dữ liệu. Các sản phẩm này được thiết kế để vận hành với dung môi nước-glycol trong dải nhiệt độ từ −196°C đến +400°C, đi kèm với hệ thống bảo vệ đã được kiểm tra rò rỉ bằng khí helium. Nếu dự án của bạn đang trong giai đoạn chuyển đổi từ làm mát bằng không khí sang làm mát bằng chất lỏng, hãy gửi cho chúng tôi dữ liệu về lưu lượng vòng lặp và mức sụt áp. Đội ngũ kỹ sư của chúng tôi sẽ tư vấn một dòng máy bơm phù hợp cùng với bảng tính toán thông số chi tiết. Hãy Liên hệ với chúng tôi để thảo luận sâu hơn về dự án làm mát bằng chất lỏng của bạn.

FAQ

Ở mức mật độ tủ rack nào thì hệ thống làm mát bằng không khí ngừng hoạt động hiệu quả?

Việc vận chuyển bằng không khí không có hỗ trợ sẽ đạt đến mức bão hòa ở khoảng 35 đến 40 kW cho mỗi tủ rack trong hệ thống cách ly (containment) được thiết kế tốt, với khả năng làm mát phòng thông thường bị giới hạn ở mức 15 đến 20 kW và các thiết kế kết nối gần (close-coupled) tích cực có thể đạt 41 đến 50 kW. Bất kỳ kiến trúc nào được đánh giá trên các con số đó, bao gồm cả các bộ trao đổi nhiệt gắn cửa sau, đều đã sử dụng chất lỏng ở một khâu nào đó trong quá trình truyền nhiệt.

Tại sao chất lỏng lại hiệu quả hơn không khí trong việc làm mát đến vậy?

Sự khác biệt này được lý giải bằng hai con số. Hệ số truyền nhiệt đối lưu của chất lỏng chuyển động dao động từ 1.000 đến 10.000 W/m²·K, trong khi đó đối với không khí cưỡng bức chỉ là 50 đến 250. Hơn nữa, trên cùng một đơn vị thể tích, nước mang theo nhiệt lượng lớn gấp 3.500 lần không khí với cùng một mức tăng nhiệt độ. Việc thay đổi môi chất làm mát đã giúp gia tăng công suất làm mát lên tới khoảng hai bậc độ lớn (two orders of magnitude).

Thông lượng nhiệt tối đa mà hệ thống làm mát bằng không khí cưỡng bức có thể xử lý là bao nhiêu?

Hệ thống làm mát bằng không khí cưỡng bức sẽ đạt đỉnh ở mức gần 1.6 W/cm² trên bề mặt thiết bị. Các bộ tăng tốc AI hiện nay đã vượt xa mức đó: dòng H100 tiến gần đến 86 W/cm² với công suất 700 W mỗi vi mạch (package), với các thế hệ mới hơn đạt từ 1,000 đến 1,400 W. Khoảng cách đó chính là lý do tại sao đường truyền nhiệt tới silicon bắt buộc phải dùng chất lỏng.

Tại sao năng lượng tiêu thụ của quạt lại tăng vọt khi mật độ tủ rack tăng lên?

Công suất của quạt tăng theo lập phương của lưu lượng không khí, do đó, khi tăng 10 phần trăm thể tích không khí, năng lượng tiêu thụ của quạt sẽ tăng thêm khoảng 33 phần trăm. Ở các hệ thống có mật độ cao, quạt máy chủ và quạt của cơ sở kết hợp lại đẩy chi phí làm mát lên tới gần một phần ba tổng công suất của cơ sở, làm giảm PUE xuống mức trên 1.5 và tạo ra tiếng ồn ở mức 85 đến 95 dBA tại các lối đi có không khí nóng.

Quy tắc mười độ (ten-degree rule) trong độ tin cậy của thiết bị điện tử là gì?

Tuổi thọ của các linh kiện bán dẫn sẽ giảm đi xấp xỉ một nửa cho mỗi mức tăng 10°C trong nhiệt độ vận hành, và các số liệu thống kê thực tế chỉ ra rằng khoảng 55% các lỗi thiết bị điện tử có nguyên nhân trực tiếp từ mức nhiệt độ quá cao hoặc phân bổ không đồng đều. Sự chênh lệch nhiệt độ theo chiều dọc (vertical thermal gradients) bên trong các tủ rack mật độ cao sử dụng làm mát bằng không khí đã biến quy tắc này thành một rào cản thiết kế ưu tiên hàng đầu.

Những lựa chọn nào khả thi khi một tủ rack vượt quá giới hạn của hệ thống làm mát bằng không khí?

Ba công nghệ sau đây có thể đáp ứng phạm vi công suất này: bộ trao đổi nhiệt gắn cửa sau mang đến khả năng truyền nhiệt bằng chất lỏng cho các phòng làm mát bằng không khí hiện tại với công suất từ 40 đến 80 kW mỗi rack; tấm làm mát trực tiếp trên chip (direct-to-chip cold plates) phục vụ cho mức công suất từ 35 kW trở lên và đang thống trị các dự án triển khai AI hiện nay; trong khi đó, công nghệ làm mát ngâm loại bỏ hoàn toàn không khí khỏi quá trình truyền nhiệt, chuyên dành cho các hệ thống có mật độ cực cao.

Liệu một trung tâm dữ liệu làm mát bằng không khí hiện hữu có thể hỗ trợ các tủ rack AI hay không?

Có, thông qua quá trình chuyển đổi theo từng giai đoạn. Các bộ trao đổi nhiệt ở cửa sau (Rear-door heat exchangers) có thể được nâng cấp để hỗ trợ truyền nhiệt bằng chất lỏng mà không cần can thiệp vào máy chủ, và các dãy làm mát trực tiếp trên chip (direct-to-chip) có thể được bổ sung thêm từng tủ rack một bằng cách sử dụng các thiết bị phân phối chất làm mát (CDU). Tòa nhà cần được trang bị một vòng tuần hoàn nước của cơ sở và năng lực tản nhiệt, sau đó không gian phòng máy có thể đáp ứng được các mật độ tỏa nhiệt mà hệ thống làm mát bằng không khí đơn thuần không bao giờ có thể phục vụ được.

Noi dung