Alexa dari Amazon akan segera keluar dari cangkangnya, dan apa yang muncul bisa jadi sangat menarik. Pada acara perangkat keras musim gugur pada hari Rabu, perusahaan meluncurkan asisten suara Alexa baru yang didukung oleh model bahasa besar Alexa yang baru. Menurut Dave Limp, wakil presiden senior perangkat dan layanan Amazon saat ini, Alexa baru dapat memahami frasa percakapan dan merespons dengan tepat, menafsirkan konteks dengan lebih efektif, dan menyelesaikan banyak permintaan hanya dengan satu perintah.

Asisten suara perlu diubah. Kurangnya inovasi dan kemajuan yang tidak terlihat dalam hal pemahaman telah menjadikan hal-hal tersebut sebagai alat yang penting dan bukan kemajuan teknologi menarik yang kita harapkan ketika hal tersebut muncul lebih dari satu dekade yang lalu.

AI generatif sepertinya merupakan peluang terbaik untuk bertahan hidup untuk sementara waktu. Meskipun asisten digital ini selalu memiliki elemen AI, mereka tidak memiliki kemampuan pemrosesan yang kompleks dan interaksi yang lebih mirip manusia yang dapat dihasilkan oleh AI. Ini adalah momen besar bagi rumah pintar, karena hal ini dapat membawa otomatisasi rumah ke tingkat berikutnya, membawanya dari pengalaman kendali jarak jauh menjadi rumah yang benar-benar pintar.

Dalam sebuah wawancara dengan tepi Sebelum acara, Limp menjelaskan bahwa Alexa LLM baru “adalah model bahasa yang sangat besar yang dapat digeneralisasikan dan sangat dioptimalkan untuk kasus penggunaan Alexa; bukan itu yang Anda temukan dengan Bard atau ChatGPT atau hal-hal semacam itu.”

Namun, Alexa yang serba baru tidak akan diluncurkan di semua tempat, pada semua orang, sekaligus. Perusahaan meluncurkannya secara perlahan melalui program pratinjau “dalam beberapa bulan mendatang” – dan hanya di AS. Jelas bahwa ada pelajaran yang bisa dipetik dari kesalahan yang dilakukan oleh Microsoft dan Google, dan Amazon bertindak hati-hati.

“Saat Anda menghubungkan MBA dengan dunia nyata, Anda ingin meminimalkan halusinasi — dan meskipun kami pikir kami memiliki sistem yang tepat… tidak ada pengganti untuk menerapkannya di dunia nyata,” kata Limb. Jika Anda ingin diberi tahu saat Anda dapat bergabung dengan pratinjau, beri tahu perangkat Echo Anda, “Alexa, ayo bicara,” dan minat Anda akan didaftarkan.

Tidak mengherankan jika kekuatan super Alexa ini tidak selalu gratis. Meskipun Alexa, seperti sekarang ini, akan tetap gratis, kata Limp, “ide tentang asisten super yang dapat melengkapi rumah pintar Anda dan, lebih dari itu, melakukan tugas-tugas rumit untuk Anda, dapat memberikan manfaat yang cukup bagi kami.” mengisi daya sesuatu.” “. Jadi di jalan.

Perubahan besar pertama pada Alexa baru adalah asisten yang lebih bisa berbicara, yang bisa lebih memahami apa yang Anda katakan dan memerlukan label yang tidak terlalu spesifik untuk melakukan apa yang Anda minta. Ini adalah salah satu alasan paling umum yang menyebabkan frustrasi terhadap asisten suara — harus mengulanginya sendiri saat Anda meminta mereka mematikan termostat atau saat Anda meminta mereka menjawab, “Ada beberapa hal yang sama-sama bernama ‘lampu’. Silakan pilih nama unik dan jalankan penemuan lagi,” Untuk ke-900 kalinya yang Anda inginkan hanyalah mengetahui di mana Anda meninggalkan remote.

Dengan Alexa baru, Anda dapat mengucapkan kalimat seperti, “Alexa, saya kedinginan,” dan asisten akan menaikkan suhu termostat yang terhubung. Atau seperti yang dijelaskan Limp, “Katakan, ‘Alexa, buat ruangan ini terlihat seperti warna Seahawk,’ dan ia akan mengetahui ruangan mana saya berada dan apa warna Seahawk serta melakukan terjemahan antar API.”

API adalah kuncinya, kata Limb. “Kami telah mengubah sejumlah besar API rumah pintar, lebih dari 200, menjadi MBA kami.” Data ini, dikombinasikan dengan pengetahuan Alexa tentang perangkat apa yang ada di rumah Anda dan di ruangan mana Anda berada berdasarkan speaker Echo mana yang Anda ajak bicara, akan memberi Alexa konteks yang diperlukan untuk mengelola rumah pintar Anda dengan lebih proaktif dan lancar.

Pemahaman kontekstual ini tidak hanya sekedar mengetahui perangkat apa saja yang terhubung yang mungkin ingin Anda kendalikan untuk hal-hal seperti menyimpulkan kapan terjadi perubahan di rumah Anda. “Jika Anda menambahkan perangkat baru ke rumah Anda, Anda dapat mengatakan, ‘Alexa, nyalakan lampu baru,’ dan perangkat tersebut akan mengetahui apa itu lampu baru,” jelas Limb. “Ini akan mengungkap banyak hal, jadi jika Anda memasangnya steker atau lampu pintar baru, akan lebih mudah dikendalikan.”

Kemampuan baru lainnya adalah merespons beberapa permintaan sekaligus. Ini bukan hanya hal-hal dasar yang sudah dapat dilakukan (sampai batas tertentu), seperti “Alexa mematikan lampu dan mengunci pintu.” Ini lebih maju. “Anda bisa berkata, ‘Alexa, nyalakan alat penyiram, buka pintu garasi saya, matikan lampu luar,’ dan semuanya akan beres,” kata Limp.

Kemampuan ini akan diperluas hingga menciptakan rutinitas saat bepergian sepenuhnya dengan suara – tanpa pemrograman manual apa pun di aplikasi Alexa. “Saya menyiapkannya pagi ini untuk anak saya hanya dengan mengatakan, ‘Alexa, setiap pagi jam 8 pagi, nyalakan lampu, putar musik bangun tidur untuk anak saya di kamar tidurnya, dan nyalakan pembuat kopi,’” Limb katanya. “Ini bisa menjadi rumit.” Sejelas apa pun yang Anda inginkan, dan secara instan, hal ini akan muncul di aplikasi Anda sebagai rutinitas.”

Pada awalnya, fitur multi-perintah hanya akan berfungsi dengan sebagian jenis perangkat, termasuk lampu, colokan pintar, dan beberapa lainnya, kata Lemp. Namun tim sedang berupaya menambahkan segalanya.

Pengembang juga akan dapat memanfaatkan fungsi kognitif baru Alexa dan mengintegrasikan produk dan layanan mereka ke dalam format yang lebih komunikatif ini. Amazon menawarkan dua alat yang memungkinkan Alexa baru mengontrol beberapa fitur unik produk produsen pihak ketiga yang belum tentu ada dalam perangkat ekosistem rumah pintar Amazon. Ini disebut pengontrol dinamis dan pengontrol tindakan.

Pengontrol Dinamis akan mengaktifkan fitur seperti pemandangan prasetel untuk mengontrol pencahayaan agar tampak lebih alami. Jadi, jika Anda memiliki bola lampu berwarna GE Cync dan Anda berkata, “Alexa, buatlah ini tampak menakutkan di sini,” Alexa akan tahu apa yang harus dilakukan tanpa harus memprogram rutinitas atau mengimpor adegan ke dalam aplikasi Alexa.

Demikian pula, konsol Actions memungkinkan pengembang untuk menambahkan tindakan sederhana yang dapat dilakukan Alexa. Misalnya, jika Anda mengatakan, “Alexa, lantainya kotor,” asisten akan mengetahui bahwa Anda ingin robot penyedot debu dimulai.

Amazon mengatakan pihaknya telah bekerja sama dengan GE Cync, Philips, GE Appliances, iRobot, Roborock, dan Xiaomi pada fitur-fitur ini, dan pengembang dapat Daftar sekarang untuk meminta partisipasi. Blog pengembang Amazon memiliki rincian lebih lanjut tentang kemampuan dan alat baru.

Limp mengatakan ini hanyalah awal dari perjalanan baru Alexa. “Kami telah membangun program AI LLM baru yang – seiring waktu – akan mendukung berbagai domain Alexa, termasuk serangkaian pengalaman rumah pintar baru,” katanya. “Perangkat pertama adalah mencoba menyederhanakan tugas sehari-hari ini.” Ke mana dia pergi selanjutnya akan menjadi perjalanan yang menarik untuk disaksikan.

Asisten suara baru yang didukung Alexa LLM akan debut dalam pratinjau di AS dan akan tersedia bagi siapa saja yang memiliki perangkat Echo. Amazon belum mengumumkan tanggal pratinjau, dan fitur rumah pintar baru yang didukung Alexa LLM akan menjadi bagian dari pratinjau tambahan khusus undangan. Anda dapat meminta undangan setelah menjadi bagian dari pratinjau. Amazon mengatakan itu akan tersedia nanti.

Diperbarui Kamis, 21 September pukul 09:20: Menambahkan detail tentang bagaimana pengembang dapat mendaftar untuk mengintegrasikan perangkat dan layanan mereka dengan Alexa LLM.