Proyek Pemantauan Klaster Pendinginan Cair di Pusat Superkomputer

Fasilitas superkomputer menggabungkan kinerja komputasi yang sangat tinggi dengan beban termal yang tinggi. Oleh karena itu, menjaga suhu operasi yang sesuai merupakan bagian penting untuk menjaga ketersediaan node komputasi.

Pusat superkomputer dalam proyek ini menyediakan daya komputasi 10 EFLOPS dan mengoperasikan 300 node komputasi berpendingin cairan. Alih-alih hanya mengandalkan pendinginan udara konvensional, fasilitas ini menggunakan teknologi pendinginan cairan imersif penuh dengan pendingin PG25 yang disesuaikan.

Dalam lingkungan perendaman, persyaratan yang dikenakan pada peralatan pemantauan dapat sangat menuntut. Komponen mungkin tetap terpapar cairan pendingin secara terus menerus, sehingga perlindungan terhadap masuknya cairan dan pengoperasian jangka panjang yang andal menjadi pertimbangan penting. Pada saat yang sama, kondisi cairan pendingin perlu dipantau.

A sensor kualitas air pendingin cairDapat memberikan informasi tentang parameter pendingin yang dipilih dan membantu operator mengidentifikasi perubahan yang mungkin memerlukan perhatian. Pemantauan pH, misalnya, dapat digunakan untuk mengamati perubahan keasaman atau alkalinitas pendingin.

Namun, untuk fasilitas yang berisi ratusan lokasi pemantauan, mengumpulkan pengukuran individual saja tidak cukup. Data juga perlu mencapai platform pusat tempat operator dapat mengamati kondisi di seluruh infrastruktur pendingin. Oleh karena itu, proyek ini membutuhkan solusi pemantauan yang menggabungkan daya tahan fisik, kemampuan komunikasi, dan pemantauan prediktif.

Masalah utama pertama berkaitan dengan peringkat perlindungan peralatan pemantauan sebelumnya. Lingkungan pendinginan imersif mengharuskan sensor untuk tetap terendam terus-menerus dalam cairan pendingin. Namun, sensor yang ada hanya menawarkan perlindungan IP67.

Setelah beroperasi selama lebih dari enam bulan, 17 sensor mengalami kebocoran air dan kerusakan.

Kegagalan sensor yang berulang dapat menciptakan celah dalam pemantauan cairan pendingin dan meningkatkan jumlah perawatan yang dibutuhkan di seluruh fasilitas besar. Dengan ratusan lokasi pemantauan yang tersebar di seluruh infrastruktur, penggantian perangkat yang rusak juga dapat meningkatkan beban kerja personel operasional.

Yang barusensor kualitas air pendinginOleh karena itu, larutan tersebut membutuhkan perlindungan yang lebih kuat untuk perendaman terus menerus.

Kualitas daya menghadirkan tantangan kedua. Pusat superkomputer mengalami fluktuasi tegangan yang signifikan. Perangkat pemantauan konvensional hanya mendukung rentang input 12–24 VDC. Ketika tegangan suplai menjadi tidak stabil, pengoperasian sensor dapat terganggu dan data pemantauan dapat hilang. Kesenjangan data yang dihasilkan mempersulit operator untuk mempertahankan pandangan berkelanjutan tentang kondisi pendingin.

Untuk sistem pemantauan yang diharapkan dapat mendukung analisis tren, kontinuitas sangat penting. Pengukuran yang hilang dapat melemahkan catatan data yang digunakan untuk memahami bagaimana kondisi berubah dari waktu ke waktu. Oleh karena itu, fasilitas tersebut membutuhkan sensor yang mampu beroperasi di rentang tegangan yang lebih luas.

Infrastruktur pendingin tersebut berisi 300 titik pemantauan yang tersebar di berbagai kabinet.

Dengan pengaturan sebelumnya, manajemen terpusat sulit dilakukan. Personel pemeliharaan harus memeriksa setiap kabinet secara individual, sehingga menciptakan beban kerja operasional yang cukup besar. Seiring pertumbuhan infrastruktur komputasi, jenis pemantauan manual ini menjadi semakin tidak efisien.

Oleh karena itu, solusi pemantauan baru ini perlu mengirimkan informasi sensor ke platform operasi dan pemeliharaan yang sudah ada di pusat tersebut, sehingga memungkinkan pengelolaan beberapa lokasi pemantauan secara terpusat.

Sistem pemantauan yang ada sebagian besar bersifat reaktif.

Sistem tersebut tidak memiliki kemampuan analisis tren yang dapat membantu personel pemeliharaan mengantisipasi perubahan pH cairan pendingin. Akibatnya, tim umumnya hanya bereaksi setelah anomali atau kerusakan telah terjadi.

Pendekatan ini membatasi peluang untuk tindakan pencegahan. Oleh karena itu, pusat tersebut ingin melangkah lebih jauh dari pemantauan dasar menuju sistem yang mampu menganalisis tren pH dan memberikan peringatan dini tentang perubahan abnormal.

Tantangan yang teridentifikasi di fasilitas tersebut memunculkan beberapa persyaratan pemantauan yang jelas.

Pertama, sensor-sensor tersebut perlu mampu menahan perendaman terus-menerus. Perangkat IP67 sebelumnya telah menunjukkan bahwa perlindungan yang tidak memadai dapat mengakibatkan masuknya air dan kegagalan sensor sebelum waktunya.

Kedua, peralatan pemantauan membutuhkan rentang tegangan input yang lebih luas. Fluktuasi tegangan merupakan karakteristik yang diketahui dari lingkungan daya di lokasi tersebut, sehingga sensor perlu terus beroperasi ketika kondisi pasokan berubah.

Ketiga, komunikasi diperlukan untuk mendukung manajemen terpusat.

Dengan ratusan titik pemantauan yang tersebar di berbagai kabinet, operator membutuhkan cara untuk memasukkan informasi pemantauan ke dalam platform operasi dan pemeliharaan yang ada, daripada memeriksa setiap kabinet secara terpisah. Sistem ini juga perlu mendukung strategi pemeliharaan yang lebih proaktif.

Alih-alih hanya melaporkan nilai pH saat ini, data yang dikumpulkan perlu mendukung analisis tren sehingga perubahan yang tidak biasa berpotensi dapat diidentifikasi sebelum berkembang menjadi kondisi yang lebih serius.

Oleh karena itu, persyaratan pemantauan utama meliputi:

• Pencelupan terus-menerus yang andal dalam cairan pendingin PG25 yang disesuaikan.
• Perlindungan yang lebih baik terhadap masuknya cairan.
• Toleransi tegangan input yang lebih luas
• Pengumpulan data pemantauan secara terpusat
• Komunikasi RS485
• Kompatibilitas protokol Modbus-RTU
• Analisis tren pH
• Peringatan dini terhadap perubahan pH abnormal
• Mengurangi ketergantungan pada inspeksi kabinet individual.

Secara bersama-sama, persyaratan-persyaratan ini menjadi dasar dari sistem pemantauan kualitas cairan pendingin yang baru.

Pusat superkomputer tersebut memilih sensor pH khusus pendingin cair RK500-12 untuk proyek ini.

Sebanyak 120 sensor dipasang dalam tiga fase. Sensor-sensor tersebut dipasang di dinding samping sistem pendingin dan dihubungkan melalui bus RS485 ke platform operasi dan pemeliharaan yang sudah ada di pusat tersebut. Arsitektur ini memungkinkan pengukuran pH dari lokasi pemantauan yang terpasang untuk dikelola secara terpusat.

Sensor RK500-12 menyediakan perlindungan IP68, mengatasi masalah masuknya air yang dialami oleh perangkat IP67 sebelumnya. Tingkat perlindungan ini memungkinkan sensor untuk beroperasi terus menerus saat terendam dalam cairan pendingin.

Sensor-sensor tersebut juga mendukung input daya tegangan lebar 7–30 VDC. Rentang input yang lebih luas ini sangat penting karena fasilitas tersebut mengalami fluktuasi tegangan yang cukup besar. Dengan mengakomodasi rentang kondisi pasokan yang lebih luas, sensor-sensor tersebut dapat mempertahankan operasinya di tempat perangkat 12–24 VDC sebelumnya mengalami gangguan.

Dukungan protokol Modbus-RTU memberikan bagian penting lainnya dari solusi ini. Hal ini memungkinkan data sensor untuk diintegrasikan dengan platform operasi dan pemeliharaan yang sudah ada di pusat tersebut.

Namun, proyek ini melampaui sekadar pemasangan perangkat keras. Sebuah model analisis tren pH dan peringatan dini juga dikembangkan menggunakan data pemantauan. Hal ini memberi fasilitas tersebut kemampuan untuk menganalisis perubahan dari waktu ke waktu dan mengidentifikasi anomali yang berkembang lebih awal.

Sebanyak 120 sensor RK500-12 dipasang dalam tiga fase, bukan dalam satu instalasi skala besar. Sensor-sensor tersebut dipasang di dinding samping sistem pendingin untuk mendukung pemantauan terus menerus terhadap cairan pendingin PG25 yang telah disesuaikan. Setelah pemasangan fisik, perangkat-perangkat tersebut dihubungkan melalui bus RS485.

Komunikasi Modbus-RTU memungkinkan jaringan pemantauan untuk berinteraksi dengan platform operasi dan pemeliharaan yang ada di pusat superkomputer. Hal ini menciptakan lingkungan pemantauan terpusat untuk sensor yang telah dipasang.

Rentang input VDC yang lebar, yaitu 7–30 VDC, mengatasi ketidakstabilan daya yang dialami di fasilitas tersebut. Alih-alih mengandalkan sensor dengan rentang 12–24 VDC yang lebih sempit seperti sebelumnya, perangkat baru ini dapat mengakomodasi kondisi daya yang lebih bervariasi.

Perlindungan IP68 menjawab persyaratan penting lainnya dalam proses commissioning: pengoperasian yang andal selama perendaman cairan pendingin secara terus menerus. Setelah data pemantauan tersedia melalui platform pusat, proyek dapat beralih ke tahap berikutnya: analisis tren.

Sebuah model analisis tren pH dan peringatan dini dikembangkan untuk menganalisis data pemantauan dan mengidentifikasi perubahan pH yang tidak normal. Hal ini menambahkan unsur prediktif pada strategi pemantauan dan memungkinkan tim operasional untuk beralih dari hanya menanggapi setelah masalah muncul.

Sensor pH khusus pendingin cair RK500-12 menjadi inti dari penerapan pemantauan tersebut.

Untuk proyek ini, salah satu karakteristik terpentingnya adalah peringkat perlindungan IP68. Sensor IP67 sebelumnya mengalami kebocoran air selama perendaman terus menerus, sehingga peningkatan perlindungan sangat penting untuk lingkungan operasional. RK500-12 juga mendukung input daya 7–30 VDC. Ini membantu sistem pemantauan mengakomodasi fluktuasi tegangan yang ada di pusat superkomputer.

Konektivitas RS485 dan dukungan protokol Modbus-RTU memungkinkan sensor untuk berkomunikasi dengan platform operasi dan pemeliharaan yang ada. Sebagai perangkat khusus,sensor pH pendinginPerangkat tersebut menyediakan data pH yang dibutuhkan untuk analisis tren dan model peringatan dini proyek tersebut.

Meskipun proyek khusus ini berfokus pada pemantauan pH, sistem pendingin cair dapat memerlukan pengukuran kualitas air yang berbeda tergantung pada komposisi kimia pendingin dan persyaratan operasionalnya.

Sebagai contoh, sensor konduktivitas untuk pemantauan cairan pendingin dapat dipertimbangkan ketika operator perlu mengamati konduktivitas listrik sebagai bagian dari manajemen cairan pendingin. Strategi sensor kualitas air pendingin pusat data yang lebih luas dapat menggabungkan pH dengan parameter relevan lainnya bila diperlukan oleh aplikasi.

Kombinasi sensor yang tepat harus ditentukan berdasarkan jenis cairan pendingin, desain sistem pendingin, tujuan pemantauan, dan kondisi pengoperasian, bukan menggunakan konfigurasi yang sama untuk setiap instalasi pendingin cair.

Proyek yang telah selesai memberikan peningkatan yang terukur dalam keandalan pemantauan dan manajemen sistem.

Sebelum proyek ini, 17 sensor IP67 mengalami kerusakan akibat masuknya air dalam waktu enam bulan. Setelah pemasangan sensor yang dilindungi IP68, tingkat kerusakan akibat masuknya air turun menjadi 0%. Sensor beroperasi terus menerus selama 12 bulan tanpa kegagalan. Waktu Rata-rata Antar Kegagalan (Mean Time Between Failures/MTBF) mencapai 15.000 jam, menunjukkan peningkatan keandalan di bawah kondisi perendaman terus menerus di fasilitas tersebut.

Perangkat pemantauan sebelumnya mengalami kesulitan mengatasi fluktuasi tegangan di fasilitas tersebut. Dengan desain tegangan lebar 7–30 VDC, kehilangan data yang terkait dengan kondisi daya yang tidak stabil dapat dihilangkan. Tingkat kehilangan data secara keseluruhan menurun dari 12% menjadi 0%. Hal ini memberikan catatan pemantauan yang lebih berkelanjutan dan mendukung analisis tren pH yang lebih andal.

Menghubungkan sensor ke platform operasi dan pemeliharaan melalui bus RS485 mengatasi kesulitan dalam mengelola titik pemantauan yang terdistribusi. Alih-alih bergantung pada inspeksi kabinet individual untuk pengamatan rutin, informasi sensor dapat diintegrasikan ke dalam platform pusat. Hal ini memberikan dasar yang lebih praktis untuk mengelola pemantauan pendingin di seluruh infrastruktur superkomputer.

Model analisis tren dan peringatan dini memperkenalkan kemampuan prediksi yang tidak ada pada sistem sebelumnya. Menurut hasil proyek yang diberikan, model tersebut dapat memprediksi perubahan pH abnormal hingga tujuh hari sebelumnya. Hal ini memungkinkan strategi pemeliharaan bergeser dari respons reaktif menuju pencegahan proaktif. Alih-alih menunggu hingga kondisi abnormal atau kerusakan telah terjadi, personel dapat menggunakan informasi tren untuk mengidentifikasi potensi perubahan pH lebih awal dan merencanakan tindakan yang tepat.

Kombinasi peningkatan keandalan sensor, penghapusan kehilangan data terkait daya, dan pemantauan pH prediktif berkontribusi pada peningkatan ketersediaan sistem. Setelah implementasi, ketersediaan sistem superkomputer mencapai 99,995%. Untuk infrastruktur yang memberikan daya komputasi 10 EFLOPS, pemantauan yang andal mendukung tujuan yang lebih luas untuk mempertahankan operasi komputasi yang stabil dan sangat tersedia.

Proyek pusat superkomputer ini menunjukkan bagaimana persyaratan untuk sebuahsensor kualitas air pendingin cairdapat berubah ketika peralatan pemantauan harus beroperasi terus menerus di dalam lingkungan pendinginan imersif.

Sistem pemantauan sebelumnya memiliki tiga keterbatasan mendasar: perlindungan yang tidak memadai terhadap perendaman terus-menerus, sensitivitas terhadap fluktuasi pasokan daya, dan manajemen terpusat yang terbatas. Sistem tersebut juga kurang mampu memprediksi perubahan kondisi pendingin.

Penggunaan 120 sensor pH khusus pendingin cair RK500-12 mengatasi tantangan ini melalui perlindungan IP68, rentang input 7–30 VDC, konektivitas RS485, dan integrasi Modbus-RTU.

Hasilnya terukur. Kerusakan akibat masuknya air turun menjadi 0%, kehilangan data terkait listrik dihilangkan, tingkat kehilangan data secara keseluruhan turun dari 12% menjadi 0%, dan MTBF mencapai 15.000 jam.

Yang terpenting, analisis tren pH dan model peringatan dini dapat mengidentifikasi perubahan pH abnormal hingga tujuh hari sebelumnya. Hal ini memungkinkan pusat tersebut untuk beralih dari menanggapi anomali pendingin setelah terjadi menuju pendekatan pemantauan yang lebih proaktif.

Untuk pusat superkomputer dan fasilitas komputasi berdensitas tinggi lainnya, efektivitaspemantauan kualitas cairan pendinginOleh karena itu, hal ini tidak terbatas pada pengumpulan pengukuran individual. Sensor yang andal, perlindungan lingkungan yang memadai, komunikasi yang stabil, manajemen data terpusat, dan analisis tren dapat bekerja sama untuk memberikan pendekatan yang lebih lengkap dalam mengelola kondisi pendingin pada sistem pendinginan cair yang menuntut.