Destinație săptămâna aceasta a anunțat un nou model de inteligență artificială (AI) deschide sursă conectând mai multe tipuri de date, inclusiv text, date audio, vizuale, temperatură și citiri de mișcare. Modelul este doar un proiect de cercetare în acest moment, fără aplicații practice sau de consum imediate. Cu toate acestea, indică un viitor al sistemelor inteligență artificială generativă capabilă să creeze experiențe imersive si multisenzoriala. Numele lui este Meta ImageBind și vă explicăm cum funcționează.
Meta introduce ImageBind un nou model open source multi-senzorial AI. Iată cum funcționează și ce poate face
Noutatea se numește Meta ImageBind și este prima combina șase tipuri de date într-un singur spațiu multidimensional. Cele șase tipuri de date incluse în model sunt:
- Imagini (sub formă de imagini și videoclipuri)
- Termică (imagini în infraroșu)
- test
- Audio
- Informații aprofundate
- Citirile de mișcare generate de o unitate de măsurare inerțială sau IMU
De asemenea, citește: Meta introduce SAM, AI care identifică elemente individuale din imagini
Ideea este că viitoarele sisteme AI pot face încrucișează aceste date în același mod în care sistemele actuale fac pentru introducerea textului. Imaginați-vă, de exemplu, un dispozitiv futurist de realitate virtuală care generează nu numai intrări audio și vizuale, ci și mediul nostru și mișcarea noastră pe o scenă fizică. Utilizatorul poate cere instrumentului să emulează o călătorie lungă pe mare, și nu l-ar pune doar pe o navă cu vuietul valurilor în fundal, ci și puntea legănată sub picioare și briza răcoroasă a aerului oceanului. Ideea este că platforma combină diverse formate de date pentru a genera rezultatul.
Într-o postare pe blog, Meta notează că ar putea fi adăugate alte fluxuri de intrare senzoriale la modelele viitoare, inclusiv „atingere, vorbire, miros și semnale ale creierului fMRI„. Această caracteristică nou lansată nu este încă gata, așa că comunitatea nu o poate testa în această etapă incipientă, chiar dacă se află într-un stadiu avansat de dezvoltare.
