Motif Technologies sichert Brückenfinanzierung für Motif 4, Nvidia dabei

Motif 4 soll in die globale Top 5

Motif 4 folgt auf Motif 3, das im August vorgestellt wurde, und soll im ersten Quartal des kommenden Jahres als Open-Weight-Modell erscheinen. Bei Open-Weight werden die Gewichte (Parameter) des fertig trainierten Modells veröffentlicht, sodass jeder sie herunterladen, nutzen und anpassen kann. Das Unternehmen peilt für Motif 4 einen Platz unter den weltweit fünf besten Modellen an.

Motif 3 entstand im Rahmen des Programms für „eigenständige KI-Foundation-Modelle“ des südkoreanischen Wissenschaftsministeriums. Laut Unternehmen erreichte es im August im Gesamt-Intelligenzindex des Analysehauses Artificial Analysis 47 Punkte und belegte Rang 10 unter allen Modellen sowie Rang 4 unter den Open-Weight-Modellen. Ohne Modelle aus den USA und China war das die höchste Platzierung. Mit einer selbst entwickelten Architektur, darunter Grouped Differential Latent Attention (GDLA), habe Motif das Modell in fünf Monaten auf 768 GPUs entwickelt.

Nachholbedarf beim Post-Training

Wegen knapper Zeit und Ressourcen blieb bei Motif 3 das Post-Training, etwa per Reinforcement Learning, unzureichend. In dieser Phase wird ein vortrainiertes Modell für den praktischen Einsatz verfeinert. Mit dem neuen Kapital will das Unternehmen das Post-Training von Motif 4 ausbauen und so Alltagstauglichkeit und Marktchancen erhöhen.

CEO Jung-hwan Lim, promovierter Mathematiker der Universität Oxford, sagte, im harten globalen Modellwettbewerb überlebe nur, wer sich von der Architektur bis zum Post-Training auf jeder Stufe abhebe. Bei Motif 3 habe man aus Zeit- und Ressourcengründen nicht genug Post-Training leisten können. Motif 4 solle neben technischer Qualität auch Nutzbarkeit und Kommerzialisierbarkeit zeigen.