Aktien und Saunaclub alla Luci Forum: Community User: WALL.E
Heute in den News zu Nvidia/Alibaba: Alibaba Cloud hat ein neues Computing-Pooling-System namens Aegaeon vorgestellt, das Berichten zufolge den Bedarf an Nvidia-GPUs bei der Bereitstellung seiner KI-Modelle um 82 % senkt. Diese Innovation wurde in einem Forschungsbeitrag auf dem 31. Symposium on Operating Systems Principles (SOSP) vorgestellt und zielt darauf ab, die bei der Bereitstellung gleichzeitiger Large Language Model (LLM)-Workloads häufig auftretende Ressourceneffizienz zu beheben. Das Aegaeon-System nutzt automatische Skalierung auf Token-Ebene und Ressourcenpooling, sodass eine einzelne Nvidia H20-GPU bis zu sieben verschiedene Modelle gleichzeitig unterstützen kann, was eine erhebliche Steigerung gegenüber den bisherigen maximal zwei oder drei Modellen darstellt. Während der Beta-Tests auf dem Modellmarktplatz von Alibaba Cloud reduzierte das System die Anzahl der erforderlichen Nvidia H20-GPUs für Modelle mit bis zu 72 Milliarden Parametern von 1.192 auf 213. Diese erhebliche Effizienzsteigerung senkt die Kosten für die Hardwarebeschaffung und steht im Einklang mit Chinas Bestrebungen nach technologischer Selbstversorgung und Optimierung der KI-Infrastruktur.
|
|
Thema | ||
|---|---|---|---|
| 1 | TUI Hauptforum | +1,45 % | |
| 2 | Dax Prognose | +1,11 % | |
| 3 | DAX Hauptdiskussion | +1,11 % | |
| 4 | Novo Nordisk nach Split | +2,24 % | |
| 5 | Investmentchancen | +1,25 % | |
| 6 | Diginex Hauptdiskussion | +2,51 % | |
| 7 | INTEL Hauptdiskussion | +2,13 % | |
| 8 | Börsentheater | ||
| 9 | PLUG POWER Hauptdiskussion | +2,46 % | |
| 10 | NEL ASA Hauptdiskussion | +18,31 % | Alle Diskussionen |
|
|
Thema | ||
|---|---|---|---|
| 1 | TUI Hauptforum | +1,55 % | |
| 2 | Novo Nordisk nach Split | +2,17 % | |
| 3 | Investmentchancen | +1,29 % | |
| 4 | Diginex Hauptdiskussion | +2,51 % | |
| 5 | INTEL Hauptdiskussion | +2,17 % | |
| 6 | NEL ASA Hauptdiskussion | +18,31 % | |
| 7 | PLUG POWER Hauptdiskussion | +1,98 % | |
| 8 | Critical Infrastructure Technologies Hauptdiskussion | +4,00 % | |
| 9 | Mercedes-Benz Group Hauptdiskussion | -0,16 % | |
| 10 | ATOS Hauptdiskussion | -0,06 % | Alle Diskussionen |