Meta кодро дар зеҳни сунъии дастрас бо ном интишор мекунад ImageBind, ки муносибатҳои байни додаҳоро пешгӯӣ мекунад, ки чӣ гуна одамон муҳити худро дарк мекунанд ё тасаввур мекунанд. Дар ҳоле ки генераторҳои тасвирӣ ба монанди Midjourney, Stable Diffusion ва DALL-E 2 калимаҳоро ба тасвирҳо мепайванданд ва ба шумо имкон медиҳанд, ки саҳнаҳои визуалиро дар асоси тавсифи матнӣ эҷод кунед, ImageBind аз ин фаротар аст. Он метавонад матн, тасвирҳо ё видео, аудио, андозагирии 3D, маълумоти ҳарорат ва маълумотҳои ҳаракатро пайваст кунад ва ин корро бидуни ниёз ба омӯзиши пешакӣ дар ҳар фурсат анҷом медиҳад. Ин марҳилаи ибтидоии чаҳорчӯба аст, ки дар ниҳоят метавонад аз воридоти оддӣ, ба монанди дархости матн, тасвир ё аудио (ё маҷмӯи онҳо) муҳити мураккабро тавлид кунад.
Шумо метавонед ImageBind-ро ҳамчун тақрибии омӯзиши мошинсозӣ ба омӯзиши инсон тасаввур кунед. Масалан, агар шумо дар муҳити динамикӣ истода бошед, ба монанди кӯчаи серодами шаҳр, мағзи шумо (асосан ба таври беҳушӣ) манзараҳо, садоҳо ва дигар эҳсосоти ҳассосро ба худ мегирад, то дар бораи мошинҳо, биноҳои баланд, обу ҳаво ва ғайра маълумот гиред. . Одамон ва ҳайвоноти дигар барои коркарди ин маълумот барои бартариҳои генетикии мо таҳаввул карданд: зинда мондан ва ба ДНК гузаштани мо. (Чӣ қадаре ки шумо дар бораи муҳити худ донед, ҳамон қадар шумо метавонед аз хатар канорагирӣ кунед ва ба муҳити худ мутобиқ шавед, то беҳтар зинда мондан ва рушд кунед). Вақте ки компютерҳо ба тақлид кардани пайвастҳои бисёрҳассоси ҳайвонот наздик мешаванд, онҳо метавонанд ин пайвастҳоро барои тавлиди саҳнаҳои комилан амалӣ дар асоси қисмҳои маҳдуди маълумот истифода баранд.
Ҳамин тавр, дар ҳоле, ки шумо метавонед Midjourney-ро барои эҷод кардани "як саги бассет дар костюми Гандалф, ки дар тӯби соҳил мувозинат мекунад" истифода баред ва акси нисбатан воқеии ин саҳнаи аҷибро гиред, як абзори мултимодалии AI ба монанди ImageBind метавонад бо саг бо саг бо тасвири мувофиқ видео эҷод кунад. садоҳо, аз ҷумла меҳмонхонаи муфассал, ҳарорати хонагӣ ва ҷойгиршавии дақиқи саг ва ҳама дар ҷои ҳодиса. "Ин имкони олиҷаноб барои эҷоди аниматсияҳо аз тасвирҳои статикӣ тавассути омезиши онҳо бо дархостҳои аудиоӣ фароҳам меорад" қайд мекунанд муҳаққиқони Meta дар блоги таҳиягарон нигаронидашуда. "Масалан, эҷодкор метавонад тасвирро бо соати зангдор ва хурӯси бонгро муттаҳид созад ва бо истифода аз сигнали аудиоӣ хурӯс ё садои соати зангдорро тақсим кунад ва ҳардуро дар пайдарпаии видео аниме кунад."
Дар мавриди бо ин бозичаи нав чӣ кор кардан мумкин аст, он ба таври возеҳ ба яке аз ҳадафҳои асосии Meta ишора мекунад: VR, воқеияти омехта ва метафазо. Масалан, гӯшмонаки ояндаро тасаввур кунед, ки метавонад саҳнаҳои пурраи 3D-ро (бо садо, ҳаракат ва ғ.) дар парвоз созад. Ё таҳиягарони бозии виртуалӣ дар ниҳоят метавонистанд онро истифода баранд, то як қисми зиёди кори душворро дар раванди тарроҳӣ наҷот диҳанд. Ба ҳамин монанд, эҷодкунандагони мундариҷа метавонанд видеоҳои пурқувватро бо саундтрекҳои воқеӣ ва ҳаракат дар асоси матн, тасвирҳо ё аудио эҷод кунанд. Инчунин тасаввур кардан осон аст, ки чӣ гуна асбобе ба мисли ImageBind тавассути тавлиди тавсифи мултимедиявӣ дар вақти воқеӣ дарҳои навро барои дастрасӣ мекушояд, то ба одамони дорои нуқсонҳои визуалӣ ё шунавоӣ беҳтар дарк кардани муҳити онҳо кӯмак кунад.
Инчунин ҷолиб: Беҳтарин абзорҳо дар асоси зеҳни сунъӣ
"Дар системаҳои маъмулии AI, барои ҳар як усули мувофиқ як ҷобаҷогузории мушаххас (яъне векторҳои ададҳо, ки метавонанд маълумот ва муносибатҳои онҳоро дар омӯзиши мошин намояндагӣ кунанд) мавҷуд аст" мегӯяд Мета. "ImageBind нишон медиҳад, ки бидуни омӯзиш дар бораи маълумот бо ҳар як омезиши инфиродии усулҳо як фазои умумӣ барои якчанд усулҳо эҷод кардан мумкин аст. Ин муҳим аст, зеро муҳаққиқон наметавонанд маҷмӯи маълумотро бо намунаҳое, ки масалан, маълумотҳои аудиоӣ ва маълумоти гармӣ аз кӯчаи серодами шаҳр ё маълумоти амиқ ва тавсифи матнии кӯҳи соҳили баҳрро дар бар мегиранд, эҷод кунанд.
Мета бовар дорад, ки ин технология дар ниҳоят аз шаш "ҳисси"-и ҳозира берун хоҳад рафт. "Гарчанде ки мо дар таҳқиқоти кунунии худ шаш услубро таҳқиқ кардем, мо боварӣ дорем, ки ҷорӣ кардани усулҳои наве, ки ҳарчи бештар ҳиссиётро мепайвандад - ба монанди ламс, сухан, бӯй ва сигналҳои мағзи fMRI - имкон медиҳад, ки моделҳои ғании AI ба инсон нигаронидашуда." Таҳиягароне, ки ба омӯхтани ин қуттии нав таваҷҷӯҳ доранд, метавонанд аз ворид шудан ба рамзи кушодаи кушодаи Meta оғоз кунанд.
Ҳамчунин хонед: