Bergabunglah dengan buletin harian dan mingguan kami untuk pembaruan terbaru dan konten eksklusif tentang liputan AI terkemuka di industri. Pelajari lebih lanjut
Aplikasi ulasan Yelp telah memberikan informasi bermanfaat kepada pengunjung dan konsumen lain selama beberapa dekade. Itu telah bereksperimen dengan pembelajaran mesin sejak tahun -tahun awalnya. Selama ledakan baru -baru ini dalam teknologi AI, itu masih menghadapi batu sandungan karena bekerja untuk menggunakan model bahasa besar modern untuk memberi daya pada beberapa fitur.
Yelp menyadari bahwa pelanggan, terutama mereka yang hanya sesekali menggunakan aplikasi, mengalami kesulitan terhubung dengan fitur AI-nya, seperti asistennya yang bertenaga AI.
“Salah satu pelajaran yang jelas yang kami lihat adalah sangat mudah untuk membangun sesuatu yang terlihat keren, tetapi sangat sulit untuk membangun sesuatu yang terlihat keren dan sangat berguna,” Craig Saldanha, kepala produk produk di Yelp, mengatakan kepada VentureBeat dalam sebuah wawancara.
Tentunya tidak semuanya mudah. Setelah meluncurkan Yelp Assistant, asisten pencarian layanan AI-nya, pada bulan April 2024 ke pelanggan yang lebih luas dari pelanggan, Yelp melihat angka penggunaan untuk alat AI-nya sebenarnya mulai menurun.
“Yang mengejutkan kami adalah ketika kami meluncurkan ini sebagai beta bagi konsumen – beberapa pengguna dan orang yang sangat akrab dengan aplikasi – [and they] menyukainya. Kami mendapat sinyal yang kuat bahwa ini akan berhasil, dan kemudian kami meluncurkannya untuk semua orang, [and] Pertunjukan itu jatuh, ”kata Saldanha. “Kami butuh waktu lama untuk mencari tahu mengapa.”
Ternyata pengguna Yelp yang lebih kasual, mereka yang sesekali mengunjungi situs atau aplikasi untuk menemukan penjahit atau tukang ledeng baru, tidak berharap segera berbicara dengan perwakilan AI.
Dari fitur AI yang sederhana hingga lebih terlibat
Kebanyakan orang tahu Yelp sebagai situs web dan aplikasi untuk mencari ulasan restoran dan foto menu. Saya menggunakan Yelp untuk menemukan gambar makanan di restoran baru dan untuk melihat apakah orang lain berbagi perasaan saya tentang hidangan yang sangat hambar. Ini juga tempat yang memberi tahu saya jika kedai kopi yang saya rencanakan untuk digunakan sebagai ruang kerja untuk hari itu memiliki wifi, colokan dan tempat duduk, langka di Manhattan.
Saldanha ingat bahwa Yelp telah berinvestasi di AI “untuk bagian yang lebih baik dari satu dekade.”
“Kembali ketika, saya akan mengatakan dalam timeline 2013-2014, kami berada di generasi AI yang sangat berbeda, jadi fokus kami adalah membangun model kami sendiri untuk melakukan hal-hal seperti pemahaman kueri. Bagian dari pekerjaan membuat hubungan yang bermakna adalah membantu orang memperbaiki niat pencarian mereka sendiri, ”katanya.
Tetapi ketika AI terus berkembang, demikian pula kebutuhan Yelp. Diinvestasikan dalam AI untuk mengenali makanan dalam gambar yang dikirimkan oleh pengguna untuk mengidentifikasi hidangan populer, dan kemudian meluncurkan cara -cara baru untuk terhubung ke pedagang dan layanan dan membantu memandu pencarian pengguna di platform.
Yelp Assistant membantu pengguna Yelp menemukan “pro” yang tepat untuk bekerja dengannya. Orang dapat mengetuk kotak obrolan dan menggunakan petunjuk atau mengetik tugas yang perlu mereka lakukan. Asisten kemudian mengajukan pertanyaan tindak lanjut untuk mempersempit penyedia layanan potensial sebelum menyusun pesan kepada pro yang mungkin ingin mengajukan tawaran untuk pekerjaan itu.
Saldanha mengatakan pro didorong untuk menanggapi pengguna sendiri, meskipun ia mengakui bahwa merek yang lebih besar sering memiliki pusat panggilan yang menangani pesan yang dihasilkan oleh asisten AI Yelp.
Selain Yelp Assistant, Yelp meluncurkan wawasan dan highlight ulasan. LLMS menganalisis sentimen pengguna dan peninjau, yang dikumpulkan Yelp menjadi skor sentimen. Yelp menggunakan prompt GPT-4O terperinci untuk menghasilkan dataset untuk daftar topik. Kemudian, disesuaikan dengan model GPT-4O-Mini.
Tinjauan ini menyoroti fitur, yang menyajikan informasi dari ulasan, juga menggunakan prompt LLM untuk menghasilkan dataset. Namun, ini didasarkan pada GPT-4, dengan fine-tuning dari GPT-3.5 Turbo. Yelp mengatakan akan memperbarui fitur dengan GPT-4O dan O1.
Yelp bergabung dengan banyak perusahaan lain menggunakan LLM untuk meningkatkan kegunaan ulasan dengan menambahkan fungsi pencarian yang lebih baik berdasarkan komentar pelanggan. Misalnya, Amazon meluncurkan Rufus, seorang asisten bertenaga AI yang membantu orang menemukan barang yang direkomendasikan.
Model besar dan kebutuhan kinerja
Untuk banyak fitur AI barunya, termasuk asisten AI, Yelp beralih ke Openai GPT-4O dan model lainnya, tetapi Saldanha mencatat bahwa tidak peduli modelnya, data Yelp adalah saus rahasia bagi asistennya. Yelp tidak ingin mengunci diri menjadi satu model dan tetap berpikiran terbuka tentang LLMS mana yang akan memberikan layanan terbaik bagi pelanggannya.
“Kami menggunakan model dari Openai, Anthropic dan model lain di AWS Bedrock,” kata Saldanha.
Saldanha menjelaskan bahwa Yelp menciptakan rubrik untuk menguji kinerja model dalam kebenaran, relevansi, kesadaran, keamanan pelanggan dan kepatuhan. Dia mengatakan bahwa “itu benar -benar model akhir” yang berkinerja terbaik. Perusahaan menjalankan pilot kecil dengan masing -masing model sebelum memperhitungkan biaya iterasi dan latensi respons.
Mengajar pengguna
Yelp juga memulai upaya bersama untuk mendidik pengguna kasual dan kekuatan untuk merasa nyaman dengan fitur AI baru. Saldanha mengatakan salah satu hal pertama yang mereka sadari, terutama dengan asisten AI, adalah bahwa nada harus terasa manusia. Itu tidak bisa merespons terlalu cepat atau terlalu lambat; Itu tidak bisa terlalu menggembirakan atau terlalu kasar.
“Kami berusaha keras untuk membantu orang merasa nyaman, terutama dengan respons pertama itu. Kami membutuhkan waktu hampir empat bulan untuk mendapatkan bagian kedua ini dengan benar. Dan segera setelah kami melakukannya, itu sangat jelas dan Anda bisa melihat hoki itu tetap dalam pertunangan, ”kata Saldanha.
Bagian dari proses itu melibatkan pelatihan Asisten Yelp untuk menggunakan kata -kata tertentu dan terdengar positif. Setelah semua penyesuaian itu, Saldanha mengatakan mereka akhirnya melihat angka penggunaan yang lebih tinggi untuk fitur AI Yelp.
