VisualGPT Microsoft merilis teknologi baru “ VisualGPT ” yang merupakan kemajuan AI dan membuka kemungkinan pengalaman AI yang lebih menarik dan interaktif dengan menjembatani kesenjangan antara visual dan bahasa.
Apa itu VisualGPT?
VisualGPT merupakan versi lanjutan dari ChatGPT yang didasarkan pada model NLP (Natural Language Processing), namun pada VisualGPT digunakan VFMS yang dapat mengubah query teks menjadi bentuk gambar. Sedemikian rupa sehingga merupakan kombinasi/integrasi kueri teks dan gambar.
Tujuan VisualGPT
Setelah ChatGPT dirilis ke pasar yang bekerja pada format tekstual sebagai satu-satunya, untuk mencapai tingkat kemajuan berikutnya, terdapat alat sempurna yang akan bekerja pada format tekstual ke grafis, mengikuti semua alasan ini dan dalam perlombaan untuk AI kemajuan Microsoft merilis VisualGPT. Tujuan utama VisualGPT adalah membuat gambar AI sesuai permintaan pengguna atau menganalisis gambar
Arsitektur VisualGPT
VisualGPT berisi Kueri Pengguna, Manajer Prompt, Model Dasar Visual (VFM), Prinsip Sistem, Sejarah Dialog, Sejarah Penalaran, dan Jawaban Menengah.
Jika kita secara khusus berbicara tentang modelnya yaitu, “ VFM (Model Fondasi Visual) ”, hampir 22 VFM digunakan, seperti BLIP (Bootstrapping Language-Image Pre-training), dan Stable Diffusion.
Bagaimana Cara Menjalankan Obrolan VisualGPT?
Untuk menjalankan Visual ChatGPT, pertimbangkan langkah-langkah berikut:
Langkah 1: Ciptakan Lingkungan
Pertama, Anda perlu membuat lingkungan Python versi 3.8:
sistem impor
sys.path.append ( '/usr/local/lib/python3.8/site-packages' )
Langkah 2: Kloning File GPT Obrolan Visual
Sekarang, kloning file visual ChatGPT dari GitHub menggunakan perintah berikut:
! git klon https: // github.com / deepanshu88 / visual-chatgpt.git 
Langkah 3: Siapkan Direktori Baru
Setelah itu, buat direktori baru melalui perintah di bawah ini:
% CD visual-chatgptLangkah 4: Instal Paket yang Diperlukan
Sekarang, instal paket yang diperlukan menggunakan “ pip ” cmdlet:
! keriting https: // bootstrap.pypa.io / dapatkan-pip.py -HAI dapatkan-pip.py! python3.8 dapatkan-pip.py
! python3.8 -M pip Install -R persyaratan.txt
Langkah 5: Akses API OpenAI
Setelah menginstal paket awal, akses OpenAI API dengan mendapatkan kunci API dari “platform.openai.com” dan melakukan panggilan API yang diautentikasi:
% env OPENAI_API_KEY =sk-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxLangkah 6: Pilih Modelnya
Terakhir, setelah mengakses Openai pilih Model, ada lebih dari 20 model yang digunakan di visualGPT yang dapat Anda pilih sesuai kebutuhan Anda:
! python3.8 . / visual_chatgpt.py --memuat Teks2Gambar_cuda: 0Dalam perintah di atas, “ Teks2Gambar ” sesuai dengan model yang akan digunakan. Untuk lebih jelasnya periksa Google Colab ini buku catatan .
Kesimpulan
ChatGPT diperkenalkan untuk mendapatkan jawaban spesifik tentang pertanyaan apa pun dan sekarang Microsoft telah meluncurkan VisualGPT yang mampu menangani data tekstual dan gambar. Sedemikian rupa sehingga pengguna cukup menambahkan persyaratannya dalam bentuk tekstual dan mendapatkan keluaran grafisnya.