Microsoftin VisualGPT julkaisee uuden teknologian VisualGPT ', joka on tekoälyn edistysaskel ja avaa mahdollisuuksia houkuttelevampiin ja vuorovaikutteisempiin tekoälykokemuksiin kuromalla umpeen visuaalisen ja kielen välistä kuilua.
Mikä on VisualGPT?
VisualGPT on laajennettu versio ChatGPT:stä, joka perustuu NLP (Natural Language Processing) -malleihin, mutta VisualGPT:ssä käytetään VFMS:ää, joka voi muuntaa tekstikyselyt kuvamuotoon. Se on sellainen, että se on teksti- ja kuvakyselyiden yhdistelmä/integrointi.
VisualGPT:n tarkoitus
ChatGPT:n julkaisun jälkeen markkinoille, joka työskenteli tekstimuodossa ainoana, seuraavan edistyksen tason saavuttamiseksi on täydellinen työkalu, joka toimii tekstimuodossa graafiseen muotoon, seuraamalla kaikkia näitä syitä ja kilpailussa tekoälystä. edistyminen Microsoft julkaisee VisualGPT:n VisualGPT:n päätarkoitus on luoda tekoälykuvia käyttäjän pyynnöstä tai analysoida kuvaa
VisualGPT:n arkkitehtuuri
VisualGPT sisältää käyttäjäkyselyn, kehotteen hallinnan, visuaaliset perusmallit (VFM), järjestelmäperiaatteen, dialogin historian, päättelyhistorian ja välivastauksen.
Jos puhumme nimenomaan sen mallista, eli ' VFM:t (Visual Foundation Models) ”, käytetään lähes 22 VFM:ää, kuten BLIP (Bootstrapping Language-Image Pre-training) ja Stable Diffusion.
Kuinka suorittaa visuaalinen chatGPT?
Suorita Visual ChatGPT, harkitse seuraavia vaiheita:
Vaihe 1: Luo ympäristö
Ensin sinun on luotava Python-version 3.8 ympäristö:
tuonti sys
sys.path.append ( '/usr/local/lib/python3.8/site-packages' )
Vaihe 2: Kloonaa Visual ChatGPT -tiedosto
Kloonaa nyt visuaalinen ChatGPT-tiedosto GitHubista käyttämällä seuraavaa komentoa:
! git klooni https: // github.com / deepanshu88 / visual-chatgpt.git 
Vaihe 3: Aseta uusi hakemisto
Tämän jälkeen määritä uusi hakemisto alla olevan komennon avulla:
% CD visual-chatgptVaihe 4: Asenna tarvittavat paketit
Asenna nyt tarvittavat paketit käyttämällä ' pip ” cmdlet:
! curl https: // bootstrap.pypa.io / get-pip.py -O get-pip.py! python3.8 get-pip.py
! python 3.8 -m pip Asentaa -r vaatimukset.txt
Vaihe 5: Avaa OpenAI API
Kun olet asentanut alkupaketit, käytä OpenAI APIa hankkimalla API-avain osoitteesta 'platform.openai.com' ja soittamalla todennettuja API-kutsuja:
% env OPENAI_API_KEY =sk-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxVaihe 6: Valitse malli
Lopuksi, kun olet avannut Openai-valinnan mallin, VisualGPT:ssä käytetään yli 20 mallia, jotka voit valita tarpeidesi mukaan:
! python 3.8. / visual_chatgpt.py --ladata Text2Image_cuda: 0Yllä olevassa komennossa ' Text2Image ” vastaa käytettävää mallia. Lisätietoja saat tästä Google Colabista muistikirja .
Johtopäätös
ChatGPT otettiin käyttöön saadakseen tarkkoja vastauksia kaikkiin kyselyihin, ja nyt Microsoft on julkaissut VisualGPT:n, joka pystyy käsittelemään teksti- ja kuvatietoja. Se on sellainen, että käyttäjä voi yksinkertaisesti lisätä vaatimuksensa tekstimuodossa ja saada sen graafisen tulosteen.