Ikhtisar Google AI: percaya diri jika salah, namun lebih terlihat dari sebelumnya

Google, mesin pencari, memiliki salah satu tahun terlemah sejak 2015. Artinya, pangsa pasarnya telah turun tepat di bawah 90% untuk hampir setiap bulan pada tahun 2025, menurut Statcounter. Tentu saja, itu masih menempatkan Google sangat banyak di atas dunia pencarian. Dan itu berusaha untuk memperkuat dominasi itu dengan lebih banyak ikhtisar AI.

Jika Anda berhasil melewatkannya sejak mereka tiba pada Mei 2024, gambaran google AI adalah sekitar 250 ringkasan yang ditulis AI di atas beberapa hasil pencarian Google. Berapa banyak hasil Google yang mendapatkan ikhtisar AI adalah rahasia yang dijaga ketat. Penelitian dari peringkat SE menemukan mereka sebanyak 18% dari semua pertanyaan pada tahun 2024 (dengan penurunan hingga 7% segera setelah rilis, di tengah gelombang hasil aneh termasuk ikhtisar “lem” pizza “yang terkenal).

Pada bulan Maret 2025, Pew Research juga menemukan 18% pencarian datang dengan ikhtisar AI. Kemudian pada Mei 2025, peringkat SE melihat lompatan tiba -tiba: ikhtisar AI pada hampir 30% dari pencarian Google.

Hasil ini mungkin belum menjadi pencilan. Google menolak untuk mengatakan berapa banyak hasil yang mendapatkan pengobatan ikhtisar AI, tetapi tetap yakin bahwa produk tersebut membantu. “Ketika orang menggunakan ikhtisar AI, kami melihat mereka lebih bahagia dengan hasil mereka,” kata orang Google dalam sebuah pernyataan, “dan mereka datang ke Google bahkan untuk mengajukan lebih banyak pertanyaan mereka.”

Google tidak menawarkan bukti untuk klaim itu. Namun, studi PEW juga menyarankan pengguna mempercayai ikhtisar Google AI - atau setidaknya, pengguna 50 persen lebih kecil kemungkinannya untuk mengklik tautan dalam hasil pencarian dengan ikhtisar AI terlampir. Kecelakaan dalam klik dari hasil pencarian telah menghasilkan apa yang oleh banyak penerbit online disebut kiamat lalu lintas.

Tetapi sebaiknya Mereka mempercayai ikhtisar AI lebih dari artikel yang mengutip para ahli? Dalam setahun ketika model baru yang paling halusinasi dari Openai salah 40% dari waktu, pertanyaan ini tidak pernah lebih penting.

Mashable telah menguji ikhtisar AI untuk halusinasi dalam pertanyaan dua kali sebelumnya (pada bulan Mei 2024 dan Desember 2024), berusaha untuk fokus pada pencarian asli (sebagai lawan dari pertanyaan Gotcha gaya lem-on-pizza). Inilah yang kami temukan pada tahun 2025.

Seberapa akurat gambaran google AI? Jangan tanya Google

Pertama -tama, inilah yang dikatakan juru bicara Google tentang akurasi ikhtisar AI: “Sebagian besar ikhtisar AI sangat faktual dan kami terus melakukan perbaikan baik untuk bantuan dan kualitas tanggapan.”

Tapi jangan katakan itu pada ikhtisar AI yang muncul saat Anda mengajukan pertanyaan yang sama di Google: Layanan dengan liar melebih -lebihkan seberapa besar berhaticinates.

Luangkan waktu sejenak untuk membuat koki ironi di sini. Tinjauan Google AI mengatakan ikhtisar AI salah sebanyak 60% dari waktu, dan itu salah, menurut Google.

Berikut adalah kisah Mashable yang dikutip oleh ikhtisar AI, dan tampaknya telah disalahpahami. Itu melaporkan eksperimen jurnalisme: berbagai chatbot AI diberi kutipan artikel dan diminta untuk menyebutkan nama artikel dan penulisnya. Chatbots membentuk jawaban 60% dari waktu: meresahkan dalam dirinya sendiri, tetapi itu tidak ada hubungannya dengan halusinasi di gambaran google AI - yang dikatakan Google seharusnya lebih akurat daripada AI lain karena mereka “berakar pada hasil pencarian.”

Seorang juru bicara Google mengatakan bahwa akurasi ikhtisar AI kira -kira setara dengan fitur pencarian yang sama dan lebih tua yang disebut cuplikan unggulan - yang bukan argumen terbaik, mengingat bahwa mereka juga dikenal untuk hasil bodoh, dan setelah mempromosikan konspirasi aneh tentang Presiden Obama.

Namun, dalam tes saya, yang lebih anekdotal daripada penelitian yang ketat, hanya 1 dari 5 ikhtisar AI mengembalikan jawaban yang tidak akurat atau menyesatkan. Jangan terlalu sedih, gambaran google AI!

Kecepatan cahaya yang dapat dipasangkan

Ikhtisar Google AI dapat salah paham saat mode AI melakukannya dengan benar

Namun, ketika ikhtisar AI salah, itu bisa menjadi doozy. Contoh kasus: Pertanyaan kutu buku terpanas di internet sekarang. Atau setidaknya, satu pertanyaan setiap Doctor Who Penggemar ingin dijawab sekarang.

Untuk menjelaskan: Di final musim terakhir Sci-Fi Show yang sudah berjalan lama, Dokter ke-15 (Ncuti Gatwa) regenerasi menjadi … yah, seseorang yang terlihat seperti mantan teman dokter Rose Tyler (Billie Piper). BBC, sementara itu, secara mencolok tidak mengumumkan Piper sebagai dokter ke -16. Fans mencurigai semacam fakut waktu-waktu-sampai Doctor Who Showrunner Russell T Davies mengungkapkan bahwa dia tidak tahu apakah Piper adalah yang ke-16 atau tidak.

Dengan kata lain, ini adalah pertanyaan terbuka yang diperdebatkan dengan panas, disajikan dengan dosis nuansa yang sehat. Tetapi tidak sesuai dengan ikhtisar Google AI, yang dengan percaya diri mengumumkan bahwa Piper bukan dokter ke -16. Dan untuk encore, kemudian mengklaim bahwa Gatwa masih dokter, meskipun Gatwa dan BBC dengan jelas menyatakan sebaliknya. (Kami mendengar Anda, ikhtisar AI: pindah dari dokter favorit Anda adalah keras.)

Tapi inilah kickernya: mengklik mode Google AI mengembalikan jawaban yang sama sekali berbeda. AI mode natters pada panjangnya tanpa memberikan ya atau tidak, cukup banyak seperti a Doctor Who Penggemar akan:

Oke, Mode AI Kerja Bagus! Pertanyaan berikutnya: Mengapa sih Anda tidak membagikan semua ini dengan teman pekerja keras Anda di bilik berikutnya, ikhtisar AI?

Google menolak untuk membuat eksekutif pencarian tersedia untuk wawancara (setelah melakukannya untuk pemeriksaan Desember 2024 kami). Tetapi hampir tidak halusinasi untuk menunjukkan bahwa kueri mode AI yang mendalam membutuhkan lebih banyak daya pemrosesan daripada ikhtisar AI. Seorang juru bicara Google mengatakan bahwa mode AI adalah alat mutakhir berdasarkan model Gemini terbaru, dan bahwa lebih banyak hasilnya akan berakhir dalam ikhtisar AI dari waktu ke waktu.

Yang cukup adil, tetapi ini memang mengarah pada kesimpulan yang tidak nyaman bahwa Google secara sadar mendorong hasil yang kurang akurat dengan cara kami, sambil menempatkan jawaban yang lebih tepat satu klik satu klik.

Ikhtisar AI menembak untuk bulan, meleset

Begitu banyak untuk fiksi ilmiah. Tentunya fakta sains lebih mudah?

Tidak jika pertanyaan fakta sains adalah “Kapan misi berikutnya ke bulan,” sebanyak mungkin dari kedengarannya. Tinjauan Google AI mengklaim bahwa misi Artemis II NASA bertujuan untuk diluncurkan pada bulan September 2025, mengutip sumbernya sebagai siaran pers NASA dari Januari 2024.

Semua baik dan bagus - kecuali ada siaran pers NASA lain pada bulan Desember 2024, memindahkan tanggal target Artemis II hingga September 2026.

Untuk layanan yang tampaknya menggantikan banyak klik berita, ikhtisar AI tampaknya kadang -kadang tidak tertarik dalam hal -hal yang, Anda tahu, baru.

Tinjauan AI tidak tahu doge

Momen aneh lain yang terjebak-dalam-2024 datang ketika saya mencari “Kontroversi Elon Musk Doge.” Ini menghasilkan ikhtisar AI tentang … gugatan atas dugaan manipulasi harga Dogecoin, yang diselesaikan pada November 2024.

Bertanya-tanya apakah pengguna Google yang mengetik kata-kata kunci tersebut mungkin memikirkan peristiwa terkait yang lebih baru, mungkin melibatkan seluruh pemerintah AS daripada memecoin?

Akan tetapi, akan menjadi tingkat kegilaan yang mirip untuk menunjukkan bahwa hasil ini sepenuhnya representatif.

Dalam pengujian saya, seperti dalam dua pemeriksaan kami sebelumnya, sebagian besar ikhtisar AI menghasilkan ringkasan yang layak; Sebagai seorang vegan yang baru dicetak, saya senang melihatnya tahu tentang keberadaan pesto vegan (menggantikan Parmesan dalam pesto biasa dengan ragi nutrisi atau keju mete), dan saya menemukan saran baru untuk mengeluarkan penyok kecil keluar dari pintu bagasi mobil saya (pengering rambut diikuti oleh plunger).

Jadi jika sebagian besar berguna, apakah buruk bahwa ikhtisar AI terkadang berhalusinasi? Jarak tempuh Anda mungkin bervariasi. Tetapi ketika saya mengatakannya sebagai kueri Google, ikhtisar AI mengundurkan diri. Sebaliknya, Google menawarkan cuplikan unggulan dari Abeba Birhane, penasihat akuntabilitas AI ke Mozilla Foundation, merespons negatif.

“Ikhtisar AI Google terlalu berhalusinasi untuk menjadi dapat diandalkan,” tulis Birhane pada tahun 2024. “Tidak ada bukti yang jelas yang menunjukkan pengguna bahkan menginginkan ikhtisar AI ini.”

Jadi apakah ikhtisar AI atau cuplikan adalah masa depan pencarian Google, tampaknya kita dapat menantikan salah satu yang bertentangan dengan pernyataan Google resmi.

Topik
Kecerdasan buatan Google