News AI-Beschleuniger AMD Instinct: MI355X übernimmt vom Ladenhüter MI325X auf dem Weg zum MI450X

Volker

Ost 1
Teammitglied
Registriert
Juni 2001
Beiträge
19.141
  • Gefällt mir
Reaktionen: Mcr-King, cosmo45, PietVanOwl und 3 andere
Klingt ganz so, als wäre es im Nachhinein sinnvoller gewesen, MI325X einfach nur das Speicherupgrade und sonst nix zu spendieren...
 
  • Gefällt mir
Reaktionen: Mcr-King
Beim Trainig geht ohne Rackscale nichts. Jedenfalls nicht bei den großen Modellen, wo nunmal das große Geld auch steckt.

Ganz anders sieht es beim Inferencing aus. Die teuren Rackscale Lösungen von Nvidia sind dafür nicht zwingend, im Gegenteil. Die abnormalen Preise von Nvidia schrecken manche Partner wie Meta oder Oracle sogar ab. Einige der größten Sprachmodelle wie Llama werden ja nicht grundlos rein von AMD Instinct bedient und das wird nur zunehmen. Und dort bewegt sich der AI Markt auch immer mehr hin. Denn im Inferencing steckt das noch weitaus größer Geld drin, als im Training. In Bechmarks haben No-Inference LLMs keinerlei Chancen mehr.

Und genau hier kann AMD möglicherweise weit weit besser punkten und Marktanteile gut machen, noch vor der MI400.
 
  • Gefällt mir
Reaktionen: Makso, mu_fi, lynx007 und eine weitere Person
Der Markt für KI-Beschleuniger ist ebenfalls ein sehr spannender, wenn auch ein etwas fragwürdiger. Ohne vernünftige Software im Rücken heizt diese Technik nur unnötig das globale Klima an. Für mich ist die aktuelle KI-Generation um Gemini & Co. noch weit entfernt davon sowohl ökonomisch als auch ökologisch vertretbar zu sein. Im Grunde haben wir es nur der dystopischen Entwicklung in dieser Welt zu verdanken, dass amerikanische Big-Tech-Konzerne viel zu "reich" geworden sind und daher nicht mehr großartig auf Wirtschaftlichkeit achten müssen. Jedes andere Unternehmen würde mit diesem Verhalten sicher Bankrott gehen...
 
Zuletzt bearbeitet:
Millennial_24K schrieb:
Der Markt für KI-Beschleuniger ist ebenfalls ein sehr spannender, wenn auch ein etwas fragwürdiger. Ohne vernünftige Software im Rücken heizt diese Technik nur das globale Klima an und nichts anderes. Für mich ist die aktuelle KI-Generation um Gemini & Co. noch weit entfernt davon sowohl ökonomisch als auch ökologisch vertretbar zu sein. Im Grunde haben wir es nur der dystopischen Entwicklung in dieser Welt zu verdanken, dass amerikanische Big-Tech-Konzerne viel zu "reich" geworden sind und daher nicht mehr großartig auf Wirtschaftlichkeit achten müssen. Denn alle anderen Unternehmen würden mit diesem Verhalten aktuell sicher Bankrott gehen...
Ja da hast du recht

Plus die Angst irrelevant zu werden
ChatGPT ersetzt zb für mich immer mehr Google und würde Google da nicht mitziehen könnte es denen irgendwann so gehen wie Yahoo oder MySpace
 
  • Gefällt mir
Reaktionen: Makso
w33werner schrieb:
Plus die Angst irrelevant zu werden
ChatGPT ersetzt zb für mich immer mehr Google und würde Google da nicht mitziehen könnte es denen irgendwann so gehen wie Yahoo oder MySpace
Es gibt Leute die dieses Gestammel nutzen?
 
CDLABSRadonP... schrieb:
Klingt ganz so, als wäre es im Nachhinein sinnvoller gewesen, MI325X einfach nur das Speicherupgrade und sonst nix zu spendieren...
Im Q1 Call von AMD liest sich das durchaus anders.

Auch die Sache mit der MI355X stellt AMD im Q1 Call ganz anders dar. Im übrigen wurde auch schon ein größerer Cluster für Oracle basierend auf MI355X, Turin und Polara angekündigt.

Ich finde man muss zwischen der GPU-Architektur und der Systemarchitektur unterschieden.

Bei der GPU-Architektur ist die MI355X AFAIU ein großer Schritt nach vorne, da sie erstmal einige sehr wichtige Datentypen unterstützt.

Bei der Systemarchitektur und den dafür notwendigen Komponenten (NVLink, NV Switch) hat Nvidia einen noch größeren Vorsprung als bei den GPUs. Um diesen Vorsprung zu egalisieren mischt AMD bei 2 Initiativen mit, UALink und UltraEthernet. UALink wurde im April in der Version 1.0 verabschiedet und so wie ich es verstehe soll UALink bei der Rackscale Lösung für die MI400 verwendet werden. Man wird sehen, ob das tatsächlich noch 2026 klappt.

Da die Rackscale Lösung frühestens 2026 fertig ist, verwendet die MI355X noch einmal die Blades, die für die MI300X entworfen wurden. Das hat den Vorteil, dass es von Systemseite kaum Risiken, hat jedoch den riesigen Nachteil, dass AMD auf Basis der MI355X keine Rack Scale Lösungen anbieten kann.
 
  • Gefällt mir
Reaktionen: peru3232 und REB3L
AMD halt Mal wieder, mi3xx als "nvidia-Killer" tituliert und plötzlich nur mehr zwischenlösung. Aber die 400er werden jetzt sicher der Killer... :D
Ergänzung ()

ETI1120 schrieb:
Bei der Systemarchitektur und den dafür notwendigen Komponenten (NVLink, NV Switch) hat Nvidia einen noch größeren Vorsprung als bei den GPUs.
Verstehen halt viele nicht und fokussieren sich nur auf einzelnen Chip, genauso viele News Seiten und der Hype rennt wieder...
Ergänzung ()

foofoobar schrieb:
Es gibt Leute die dieses Gestammel nutzen?
Tja wer nicht mit der Zeit geht... Eh schon wissen, will es beim Programmieren nicht mehr missen, quasi ein Junior dev den man on-demand hinzuziehen kann bzw mit Zusammenfassungen schnell in ein neues Thema hineinkommt.
 
Zuletzt bearbeitet:
TheInvisible schrieb:
AMD halt Mal wieder, mi3xx als "nvidia-Killer" tituliert und plötzlich nur mehr zwischenlösung. Aber die 400er werden jetzt sicher der Killer...
Wann und von wem wurde mi3xx als "nvidia-Killer" tituliert? Von AMD mit Sicherheit nicht, bitte hier auf dem Boden der Tatsachen bleiben. Es war immer nur die Rede und Hoffnung im Markt, dass AMD kleine Marktanteile gewinnen könnte. Was nun mal Milliarden entsprechen würde. Aber ich kann mich an solche Übertreibungen nicht erinnern. AMD ist eh konservativer im Marketing, als der bullshit von Nvidia.

Vielleicht in irgendwelchen Foren, wo gern mal wie hier jetzt übertrieben wird.
 
Zurück
Oben
OSZAR »