Qualcomm Pamerkan LLaVA, AI LMM Pertama di HP Android

Selain pada smartphone Android, Qualcomm juga menunjukkan fitur yang serupa tetapi untuk komputer (PC) Windows.

Dengan Snapdragon X Elite, PC mampu memahami dan menganalisis audio yang diberikan oleh pengguna.

Jumlah parameternya juga melampaui 7 miliar, dan LMM pun dijalankan secara on-device, sehingga mempertahankan sejumlah benefit yang sudah dipaparkan sebelumnya.

Pamerkan LoRA di ponsel Android

Tak hanya LLaVA, Qualcomm juga memamerkan Low Rank Adaptation (LoRA) di MWC 2024.

LLaVA ditujukan untuk skenario penggunaan berupa perckapapan. Sementara LoRA ditujukan untuk skenario berupa generator atau pembuat gambar unik/artistik dari input teks.

Sederhananya, kemampuan LoRA ini mirip dengan AI Art generator macam Stable Diffusion, Midjourney, atau Dall-E. Qualcomm turut mendemonstrasikan kemampuan LoRA di MWC 2024.

Pengguna bisa membuat gambar dengan memberikan perintah dalam bentuk teks. Misalnya, pengguna ingin membuat gambar kucing berbulu keriting. Pengguna bisa mengatur tingkat ketajaman hingga elemen utama gambar (misalnya kristal dan mi). Setelah diatur, pengguna cukup klik "generate".

Dari video, waktu yang dibutuhkan AI LoRA untuk membuat gambar kucing sesuai intruksi adalah 6,79 detik. Nantinya, pengguna melihat kucing berbulu kriting yang mana bulunya mirip mi atau kucing dengan bulu terbuat dari kristal. 

Demonstrasi AI LoRA bisa dilihat lewat video di bawah ini.

Baca juga: Chip Modem Qualcomm Snapdragon X80 5G Resmi dengan Fitur Komunikasi Satelit

Tugas LoRA lainnya adalah mengurangi jumlah parameter model AI yang dilatih, sehingga menghasilkan efisiensi yang lebih baik, penskalaan, dan customized AI generatif on-device.

LoRA juga dapat diaplikasikan untuk model AI yang sudah customized, seperti model bahasa besar (large language model/LLM), untuk menciptakan asisten pribadi yang disesuaikan dengan pengguna, penerjemahan bahasa yang ditingkatkan, dan lain-lain.

AI generatif di berbagai perangkat

Qualcomm mengintegrasikan kemampuan AI generatif untuk berbagai perangkat, mulai dari ponsel flagship yang ditenagai chipset Snapdragon 8 Gen 3, misalnya Honor Magic6 Pro, Oppo X7 Ultra, dan Xiaomi 14 Pro.

Setiap perangkat ini menghadirkan fitur AI generatif terbaru, seperti fitur ekspansi gambar berbasis AI (Xiaomi), pembuat video dan kalender berbasis AI (Honor), dan penghapus objek pada gambar (Oppo).

Untuk PC, Snapdragon X Elite dengan performa komputasi 45 TOPS bisa menghasilkan gambar AI lewat software GIMP (ditambah plug-in Stable Diffusion) dalam kurun waktu 7 detik. Ini disebut 3 kali lebih cepat dibandingkan kompetitor x86.

Hardware lainnya yang bisa menikmati kemampuan AI generatif mencakup otomotif, perangkat Internet of Things (IoT), modem Snapdragon X80 Modem-RF, dan infrastruktur 5G milik Qualcomm.

Masih soal AI, Qualcomm turut memperkenalkan Qualcomm AI Hub, yakni perpustakaan model kecerdasan buatan (artificial intelligence/AI) yang telah dioptimalkan sebelumnya, untuk kelancaran integrasi (deployment) model pada perangkat yang didukung platform Snapdragon dan Qualcomm.