Ya, Bing Memiliki Human Cari Kualitas Penilai & Inilah Cara Mereka Hakim Halaman Web

A+ A-

bing-logo Sebuah halaman web yang definitif memenuhi maksud penelusur adalah “Sempurna,” dan akan muncul di bagian atas hasil pencarian Bing. Di ujung lain dari skala, halaman web spam dan halaman yang hampir tidak ada pencari akan menemukan berguna dianggap “Bad.”

Itu sedikit bagaimana Bing memerintahkan orang-orang di nya Relevansi Sistem Manusia (HRS) proyek untuk halaman web kelas. Ini dijelaskan dalam dokumen 52-halaman yang Bing menyebut “HRS Dilihat Pedoman.”

Proyek HRS ini mirip dengan program Kualitas Rater yang menggunakan Google. Versi Microsoft telah sekitar dalam beberapa bentuk sejak lama setelah MSN Search mulai menghasilkan hasil pencarian sendiri pada akhir tahun 2004. Seperti Google, Microsoft menggunakan jasa pengujian (seperti Lionbridge dan lain-lain) untuk menyewa evaluator pencarian manusia dan mengelola program. (Microsoft sering merujuk pada evaluator sebagai “hakim,” dan aku akan melakukan hal yang sama dalam artikel ini.)

Sangat sedikit, jika ada, yang telah ditulis tentang proyek HRS Microsoft, dan tim komunikasi perusahaan itu dimengerti enggan untuk membicarakannya dengan Search Engine Land ketika kami menghubungi mereka baru-baru ini. Tapi, ketika kami berbagi salinan dokumen pedoman yang diberikan kepada kita oleh seorang hakim mantan, juru bicara Bing melakukan konfirmasi bahwa itu adalah versi saat ini dari pedoman HRS. Dokumen ini tanggal 15 Maret 2012.

Apa yang ada didalam? Bagaimana Bing meminta hakim kualitas pencarian manusia untuk halaman web kelas? Baca terus untuk rincian.

Intent Searcher & Landing Pages

Dokumen masuk ke detail tentang tiga maksud permintaan primer (Navigational, Informational dan transaksional) dan menawarkan saran untuk bagaimana menentukan maksud pengguna berdasarkan permintaan pencarian. hakim manusia diperintahkan untuk mempertimbangkan empat pertanyaan-pertanyaan ini berkaitan dengan niat ketika mereka menilai halaman arahan (yang “LP” disebut di bawah ini):

1. maksud: Apakah isi LP mengatasi niat yang mungkin untuk query?
2. Cakupan: Apakah jangkauan dan kedalaman isi LP sesuai apa yang diinginkan pengguna?
3. Otoritas: Apakah kepercayaan dari konten di LP yang sesuai dengan harapan pengguna?
4. Kualitas: Apakah penampilan dan organisasi dari LP menyediakan pengalaman yang memuaskan?

Pada akhirnya, hakim diminta untuk mengidentifikasi apakah halaman arahan memenuhi pencari niat pada skala dari “sangat” untuk “buruk,” dengan kategori tambahan untuk konten cabul dan tidak dapat diakses.

Dokumen pedoman menjelaskan bahwa “Sebuah halaman sangat memuaskan erat akan cocok niat pengguna dan persyaratan dalam lingkup dan kewenangan, sedangkan hasil buruk yang memuaskan akan berguna untuk hampir tidak ada pengguna.”

Rating Matrix

HRS Dilihat Pedoman meminta hakim untuk mengandalkan Penilaian Matrix untuk dokumen web kelas. matriks menggabungkan A) maksud kemungkinan pencari dengan B) seberapa baik dokumen memenuhi bahwa maksud. Sebuah dokumen yang “sangat” memenuhi maksud “paling mungkin” ini dinilai sangat baik / sempurna, sementara dokumen yang “buruk” sesuai dengan yang paling mungkin maksud ini dinilai buruk.

bing-rating-matrix

Peringkat Options

Pilihan lima Peringkat bahwa hakim dapat menggunakan ditunjukkan dalam matriks di atas, tetapi pedoman menawarkan penjelasan yang lebih rinci. Ini benar-benar jantung dokumen - bagian yang mengungkapkan apa yang tampak Bing dalam gradasi (dan kemungkinan dalam peringkat) halaman web / dokumen.

Berikut adalah cara Bing menjelaskan lima peringkat mungkin:

1.) Sempurna

“LP adalah halaman definitif atau pejabat yang sangat memuaskan yang paling mungkin maksud.

Dokumen tersebut mengatakan bahwa halaman arahan Sempurna “harus muncul sebagai hasil pencarian teratas.” Ia juga mengatakan bahwa hanya satu halaman arahan biasanya akan layak rating yang sempurna, tapi untuk beberapa permintaan generik (seperti “pinjaman” atau “asuransi”) ada tidak akan menjadi halaman arahan yang sempurna. Halaman Sempurna harus membahas maksud dari setidaknya 50 persen dari pencari.

2.) Luar biasa

Bing menggambarkan ini sebagai halaman arahan yang “sangat memenuhi maksud sangat mungkin atau kemungkinan besar” dan “sangat cocok dengan persyaratan query dalam lingkup, kesegaran, otoritas, pasar dan bahasa.” Pengguna menemukan sebuah halaman arahan yang sangat baik “bisa berakhir mereka cari di sini dan melanjutkan.”Sebuah halaman yang sangat baik harus membahas maksud dari setidaknya 25 persen dari pencari.

Sebuah contoh dalam dokumen adalah bahwa halaman rumah Barnes & Noble adalah “sangat baik” hasil untuk permintaan pencarian “membeli buku.”

3.) Baik

Sebuah halaman arahan yang baik “cukup memenuhi maksud sangat mungkin atau kemungkinan besar, atau sangat memuaskan maksud mungkin.” Bing mengatakan kebanyakan pencari tidak akan puas dengan satu halaman ini dan akan terus mencari. Halaman Baik harus membahas maksud dari setidaknya 10 persen dari pencari.

4.) Adil

Peringkat ini berlaku untuk halaman yang hanya berguna untuk beberapa pencari. Sebuah halaman Adil “lemah memenuhi maksud sangat mungkin atau kemungkinan besar, cukup memenuhi maksud mungkin, atau sangat memuaskan maksud tidak mungkin.” Sebuah halaman Adil membahas maksud dari setidaknya satu persen dari pencari.

5.) Bad

Selain menjadi berguna untuk hampir tidak ada dan tidak memuaskan maksud pengguna, rating ini berlaku untuk halaman web yang “menggunakan teknik spam” atau “menyesatkan menyediakan konten dari situs lain,” serta parkir domain dan halaman yang mencoba untuk menginstal malware. Halaman Bad membahas maksud dari kurang dari satu persen dari pencari.

Dokumen itu ke beberapa detail pada peringkat tambahan seperti “merugikan”, yang berlaku (sebagian) ke dokumen web yang menampilkan konten dewasa saja, dan “Tidak ada kiamat” untuk halaman yang tidak dapat diakses untuk berbagai alasan.

Kesegaran

Ada bagian yang cukup rinci pada kesegaran. Ini menjelaskan mengapa hakim harus kesegaran memperhitungkan saat meninjau dokumen web dan menunjukkan situasi ketika konten segar lebih berharga dan orang lain ketika itu tidak penting. Dokumen ini menjelaskan bahwa ada “dasarnya” tiga kategori pertanyaan terkait kesegaran - Segar Tidak Penting, Sangat Likely segar dan Paling Mungkin Segar - dan menawarkan grafik ini dengan contoh permintaan pencarian untuk membedakan mereka.

bing-freshness

Pertimbangan tambahan

Ada juga bagian menangani query di mana istilah pencarian adalah URL, bagaimana menilai permintaan salah eja dan bagaimana menilai permintaan lokal. Misalnya, halaman rumah dari Arizona Hispanik Kamar Dagang dianggap “sempurna” untuk permintaan ruang hispanic dari comerce glendale az karena Glendale adalah pinggiran kota Phoenix dan tidak ada Hispanik Kamar Dagang kantor di Glendale.

Seperti yang saya katakan di atas, sangat sedikit yang pernah ditulis tentang proyek Sistem Relevansi Manusia Microsoft untuk hasil pencarian Peringkat. Dari membaca melalui pedoman doc, saya akan mengatakan itu tidak semua yang berbeda dari buku pegangan Google untuk penilai, yang pertama kita menulis tentang tahun 2008.