Radical-Cylon ist ein integriertes System, das die Vorteile von Cylon, einem leistungsfähigen Datenverarbeitungsframework, und RADICAL-Pilot, einem flexiblen und skalierbaren Laufzeitsystem, kombiniert. Es ermöglicht die effiziente Ausführung heterogener Workloads, einschließlich Datenverarbeitungs- und Deep-Learning-Aufgaben, auf verschiedenen HPC-Plattformen.
Das Kerndesign von Radical-Cylon basiert auf einer losen Kopplung der beiden Systeme, bei der sie ihre jeweiligen Funktionen und Fähigkeiten unabhängig voneinander nutzen können. RADICAL-Pilot übernimmt die Verwaltung der Ressourcen und die Ausführung der Cylon-Aufgaben, während Cylon die Datenverarbeitung und -analyse durchführt.
Die Experimente zeigen, dass Radical-Cylon eine vergleichbare oder sogar bessere Leistung als Bare-Metal-Cylon erreicht, insbesondere bei hoher Parallelität. Darüber hinaus übertrifft Radical-Cylon in heterogenen Ausführungsszenarien mit mehreren Aufgaben die Leistung von Batch-Ausführungen um 4-15%. Diese Ergebnisse belegen die Skalierbarkeit und Effizienz von Radical-Cylon bei der Verarbeitung großer Datenmengen auf verschiedenen HPC-Plattformen.
To Another Language
from source content
arxiv.org
Principais Insights Extraídos De
by Arup Kumar S... às arxiv.org 03-26-2024
https://arxiv.org/pdf/2403.15721.pdfPerguntas Mais Profundas