Meta FAIR setzt auf Open Science und veröffentlicht acht neue KI-Forschungsartefakte

Das Streben nach fortschrittlicherer Technologie erfordert Zusammenarbeit und Offenheit. Getreu diesem Motto hat Meta FAIR, die Forschungseinrichtung von Meta für Künstliche Intelligenz, acht neue Forschungsartefakte veröffentlicht. Diese umfassen neue Modelle, Datensätze und Code, die der KI-Community als Inspiration und Grundlage für Innovationen dienen sollen. Dieser Schritt unterstreicht Metas Engagement für Open Science und den Aufbau eines offenen KI-Ökosystems.

Die neuen Forschungsartefakte im Überblick:

Die neuen Forschungsartefakte decken ein breites Spektrum an KI-Anwendungen ab, von Sprachmodellen und Bildsegmentierung bis hin zur Materialforschung und der Verbesserung der Fairness von KI-Systemen.

1. Meta Spirit LM

Dieses Open-Source-Sprachmodell ermöglicht eine nahtlose Integration von Sprache und Text. Es eröffnet neue Möglichkeiten für Anwendungen, die sowohl gesprochene als auch geschriebene Sprache verarbeiten, wie z.B. fortschrittliche Sprachassistenten oder Übersetzungstools.

2. Meta Segment Anything Model 2.1 (SAM 2.1)

SAM 2.1 ist eine verbesserte Version des Meta Segment Anything Models, das die automatische Segmentierung von Bildern ermöglicht. Die neue Version liefert bessere Ergebnisse bei der Erkennung von visuell ähnlichen Objekten, kleinen Objekten und der Handhabung von Verdeckungen. Zusätzlich wurde eine neue Entwickler-Suite veröffentlicht, die die Integration von SAM 2 in eigene Anwendungen erleichtert.

3. Layer Skip

Dieser Forschungsbeitrag stellt eine neue Methode zur Verbesserung der Leistung von Large Language Models (LLMs) vor. Der veröffentlichte Code und die vortrainierten Checkpoints ermöglichen es Forschern, die Leistungsfähigkeit von LLMs zu steigern und gleichzeitig den Rechenaufwand zu reduzieren.

4. SALSA

SALSA ist ein neuer Code, der es Forschern ermöglicht, KI-basierte Angriffe auf Post-Quanten-Kryptographie zu testen. Dies ist ein wichtiger Schritt zur Validierung der Sicherheit von Verschlüsselungsalgorithmen im Hinblick auf die Bedrohung durch Quantencomputer.

5. Meta Lingua

Meta Lingua ist eine schlanke und eigenständige Codebasis, die für das Training von Sprachmodellen im großen Maßstab entwickelt wurde. Die Veröffentlichung von Meta Lingua soll die Entwicklung und Erforschung neuer Sprachmodelle vereinfachen und beschleunigen.

6. Meta Open Materials

Mit der Veröffentlichung von Meta Open Materials stellt Meta neue Open-Source-Modelle und den größten Datensatz seiner Art zur Verfügung, um die KI-gestützte Entdeckung neuer anorganischer Materialien zu beschleunigen. Dies könnte zu neuen Materialien mit verbesserten Eigenschaften für verschiedene Anwendungen führen, z.B. in der Energiegewinnung oder der Elektronik.

7. MEXMA

MEXMA ist ein neuartiger, vortrainierter, sprachübergreifender Satz-Encoder, der 80 Sprachen abdeckt. Das dazugehörige Forschungspapier und der Code sollen die Entwicklung von Anwendungen im Bereich der maschinellen Übersetzung und des Cross-Lingual Information Retrieval vorantreiben.

8. Self-Taught Evaluator

Diese neue Methode ermöglicht die Generierung synthetischer Präferenzdaten für das Training von Belohnungsmodellen, ohne auf menschliche Annotationen angewiesen zu sein. Dies vereinfacht und beschleunigt das Training von KI-Systemen, die menschliche Präferenzen lernen und darauf reagieren sollen.

Fazit:

Die Veröffentlichung dieser acht neuen KI-Forschungsartefakte durch Meta FAIR ist ein wichtiger Schritt für die Förderung von Open Science und die Weiterentwicklung der Künstlichen Intelligenz. Die Bereitstellung dieser Ressourcen für die Forschungsgemeinschaft ermöglicht es Entwicklern und Forschern weltweit, auf den neuesten Erkenntnissen von Meta aufzubauen und Innovationen in verschiedenen Bereichen voranzutreiben. Die Offenlegung des Codes und der Modelle fördert zudem die Transparenz und Nachvollziehbarkeit von KI-Systemen, was insbesondere im Hinblick auf die ethische Verantwortung von großer Bedeutung ist.

Bibliographie:

https://twitter.com/AIatMeta/status/1803107817345393136 https://ai.meta.com/blog/meta-fair-research-new-releases/ https://www.linkedin.com/posts/aiatmeta_today-is-a-good-day-for-open-science-as-activity-7208869034480529410-8pHi https://x.com/aiatmeta?lang=de https://ai.meta.com/blog/fair-10-year-anniversary-open-science-meta/ https://about.fb.com/news/2024/06/releasing-new-ai-research-models-to-accelerate-innovation-at-scale/ https://www.linkedin.com/posts/kumar-shubham-iitd_end-of-my-ai-residency-at-meta-today-marked-activity-7229993818295582722-VwyY https://twitter.com/AIatMeta/status/1803107817345393136/history https://blog.stackademic.com/meta-is-fair-a-free-boost-to-give-an-ai-to-the-world-4921ca3ffca7