Layanan untuk mencari kata kunci. Meningkatkan relevansi pencarian di sphinxsearch Kata kunci php pencarian merpati kayu

Saya memiliki bidang judul (varchar), deskripsi (teks), kata kunci (varchar) di tabel mysql saya.

Saya menyimpan bidang kata kunci karena saya pikir saya akan mencari di bidang ini saja. Tapi sekarang saya perlu mencari di antara ketiga bidang tersebut. jadi untuk kata kunci "word1 word2 word3", query saya menjadi

PILIH * DARI myTable WHERE (nama SEPERTI "%kata1%" ATAU deskripsi SEPERTI "%kata1%" ATAU kata kunci SEPERTI "%kata1%" ATAU nama SEPERTI "%kata2%" ATAU deskripsi SEPERTI "%kata2%" ATAU kata kunci SEPERTI "% word2%" ATAU nama SEPERTI "%word3%" ATAU deskripsi SEPERTI "%word3%" ATAU kata kunci SEPERTI "%word3%") DAN status = "live"

Terlihat agak berantakan tetapi ini berhasil. Tapi sekarang saya perlu menerapkan pencarian sinonim. jadi untuk kata tertentu dengan asumsi ada beberapa sinonim yang tersedia, kueri ini menjadi lebih berantakan saat saya mengulang semua kata. Karena persyaratannya semakin jelas, saya perlu menggabungkan myTable ini ke beberapa tabel lain juga.

Apakah menurut Anda cara di atas berantakan dan akan menimbulkan masalah seiring bertambahnya data?

Bagaimana cara menghindari kekacauan di atas? Apakah ada solusi bersih yang bisa saya lakukan? Contoh apa pun akan membantu saya.

• Apakah ada metode/teknik lain yang dapat Anda rekomendasikan kepada saya?

Sunting

@Peter Stuifzand menyarankan saya agar saya dapat membuat satu tabel search_index dan menyimpan semua 3 bidang (judul, kata kunci, deskripsi) info tentang itu dan melakukan pencarian teks lengkap. Saya memahami bahwa tabel ini juga akan menyertakan referensi ke kunci utama myTable juga.

Tapi pencarian lanjutan saya mungkin termasuk menggabungkan tabel saya dengan tabel Kategori, tabel lokasi_geografis (untuk pencarian dalam jarak 10, 20 mil dll), memfilter berdasarkan kriteria lain dan tentu saja, mengurutkan hasil pencarian. Apakah menurut Anda menggunakan mysql fulltext tidak akan memperlambatnya?

Oleh Ibrahim Diallo

Diterbitkan 2 Juli 2014 ~ 16 menit dibaca

Pencarian merupakan fitur penting dalam sebuah website. Ketika beberapa pembaca saya ingin mencari bagian tertentu di blog saya, mereka menggunakan kotak pencarian. Dulunya produk ini didukung oleh Google Penelusuran, namun sejak itu saya mengubahnya menjadi versi buatan saya sendiri, bukan karena saya bisa melakukan yang lebih baik, namun karena ini adalah tantangan yang menarik.

Jika Anda sedang terburu-buru dan hanya ingin situs Anda dapat dicari, lakukan apa yang saya lakukan sebelumnya, gunakan Google.

// Dalam file search.php $term = isset($_GET["query"])?$_GET["query"]: ""; $term = urlencode($term); $situs web = urlencode("www.situswebanda.com"); $redirect = "https://www.google.com/search?q=site%3A($situs web)+($term)"; header("Lokasi: $redirect"); KELUAR;

Apa yang dilakukannya cukup sederhana. Dapatkan istilah yang disampaikan oleh pengguna, dan teruskan ke halaman pencarian Google. Batasi hasil pencarian pada domain kami saat ini menggunakan kata kunci site: dalam permintaan pencarian. Semua halaman Anda yang diindeks oleh Google akan tersedia melalui pencarian sekarang. Namun jika Anda ingin menangani pencarian Anda sendiri, teruslah membaca.

Solusi Pencarian Buatan Sendiri

Sebelum melangkah lebih jauh, coba gunakan kotak pencarian di blog ini. Ini menggunakan proses yang sama yang akan saya jelaskan di bawah. Jika Anda merasa ini yang Anda inginkan, silakan lanjutkan membaca.

Solusi ini ditujukan untuk situs web kecil. Saya menggunakan LIKE dengan wild card di kedua ujungnya, artinya pencarian Anda tidak dapat diindeks. Ini berarti solusinya akan bekerja dengan baik untuk blog atau situs web pribadi Anda yang tidak berisi banyak data. Pindahkan ke situs web yang lebih besar dan mungkin akan menjadi sangat lambat. MySQL menawarkan Pencarian Teks Lengkap yang tidak kami lakukan di sini.

Catatan: Jika Anda memiliki 5000 postingan blog Anda masih baik-baik saja. .

Kami akan mengambil struktur blog ini sebagai referensi. Setiap posting blog memiliki:

• Judul p_title
• Sebuah url p_url
• Ringkasan p_summary
• Konten postingan p_content
• Dan kategori kategori.nama tag

Untuk setiap bidang yang cocok dengan istilah pencarian kami, kami akan memberikan skor. Skor akan didasarkan pada pentingnya pertandingan:

// istilah yang sama persis ditemukan pada judul $scoreFullTitle = 6; // cocokkan judul pada bagian $scoreTitleKeyword = 5; // istilah yang sama persis ditemukan di ringkasan $scoreFullSummary = 5; // cocokkan ringkasan di bagian $scoreSummaryKeyword = 4; // istilah yang sama persis ditemukan di konten $scoreFullDocument = 4; // cocokkan dokumen di bagian $scoreDocumentKeyword = 3; // cocok dengan kategori $scoreCategoryKeyword = 2; // cocok dengan url $scoreUrlKeyword = 1;

Sebelum kita memulai, ada beberapa kata yang tidak memberikan kontribusi banyak pada pencarian yang sebaiknya dihapus. Contoh "dalam","itu","a","yang","dari" ... . Kami akan memfilternya dan bebas menambahkan kata apa pun yang menurut Anda tidak relevan. Hal lainnya adalah, kami ingin membatasi panjang kueri kami. Kami tidak ingin pengguna menulis novel di kolom pencarian dan membuat server MySQL kami crash.

// Hapus kata-kata yang tidak perlu dari istilah pencarian dan kembalikan sebagai fungsi array filterSearchKeys($query)( $query = trim(preg_replace("/(\s+)+/", " ", $query)); $words = array(); // perluas daftar ini dengan kata-katamu. $list = array("in","it","a","the","of","or","I","you", "dia","saya","kita","mereka","dia","ke","tapi","itu","ini","itu","lalu"); $c = 0; foreach(explode(" ", $query) sebagai $key)( if (in_array($key, $list))( lanjutkan; ) $words = $key; if ($c >= 15)( break; ) $c++ ; ) return $words; ) // batas kata jumlah karakter function limitChars($query, $limit = 200)( return substr($query, 0,$limit); )

Fungsi pembantu kami sekarang dapat membatasi jumlah karakter dan memfilter kata-kata yang tidak berguna. Cara kami mengimplementasikan algoritma kami adalah dengan memberikan skor setiap kali kami menemukan kecocokan. Kami akan mencocokkan kata-kata menggunakan pernyataan if dan mengumpulkan poin saat kami mencocokkan lebih banyak kata. Pada akhirnya kita dapat menggunakan skor itu untuk mengurutkan hasil kita

Catatan: Saya tidak akan menunjukkan cara terhubung ke database MySQL. Jika Anda mengalami masalah dalam menyambung ke database secara efisien, saya sarankan membaca ini.

Mari kita beri struktur pada fungsi kita terlebih dahulu. Catatan, saya meninggalkan placeholder sehingga kita dapat mengimplementasikan bagian secara terpisah.

Fungsi pencarian($query)( $query = trim($query); if (mb_strlen($query)===0)( // tidak perlu pencarian kosong kan? return false; ) $query = limitChars($query) ; // Menimbang skor $scoreFullTitle = 6; $scoreTitleKeyword = 5; $scoreFullSummary = 5; $scoreSummaryKeyword = 4; $scoreFullDocument = 4; $scoreDocumentKeyword = 3; $scoreCategoryKeyword = 2; $scoreUrlKeyword = 1; $keywords = filterSearchKeys( $query); $escQuery = DB::escape($query); // lihat catatan di atas untuk mendapatkan objek db $titleSQL = array(); $sumSQL = array(); $docSQL = array(); $categorySQL = array (); $urlSQL = array(); /** Mencocokkan kejadian penuh PLACE HOLDER **/ /** Mencocokkan Kata Kunci PLACE HOLDER **/ $sql = "SELECT p.p_id,p.p_title,p.p_date_published,p. p_url, p.p_summary,p.p_content,p.thumbnail, ((-- Skor judul ".implode(" + ", $titleSQL).")+ (-- Ringkasan ".implode(" + ", $sumSQL) .")+ (-- dokumen ".implode(" + ", $docSQL).")+ (-- tag/kategori ".implode(" + ", $categorySQL).")+ (-- url ". implode(" + ", $urlSQL).")) sebagai relevansi DARI postingan p WHERE p.status = "diterbitkan" MEMILIKI relevansi >

Dalam kueri, semua skor akan dijumlahkan sebagai variabel relevansi dan kita dapat menggunakannya untuk mengurutkan hasilnya.

Mencocokkan kejadian penuh

Kami memastikan kami memiliki beberapa kata kunci terlebih dahulu kemudian menambahkan kueri kami.

Jika (hitungan($kata kunci) > 1)( $titleSQL = "if (p_title LIKE "%".$escQuery."%",($scoreFullTitle),0)"; $sumSQL = "if (p_summary LIKE "%" .$escQuery."%",($scoreFullSummary),0)"; $docSQL = "if (p_content LIKE "%".$escQuery."%",($scoreFullDocument),0)"; )

Itu adalah pertandingan dengan skor lebih tinggi. Jika istilah pencarian cocok dengan artikel yang memuat hal ini, maka peluangnya lebih tinggi untuk muncul di urutan teratas.

Kemunculan kata kunci yang cocok

Kami menelusuri semua kata kunci dan memeriksa apakah kata kunci tersebut cocok dengan salah satu bidang. Untuk pencocokan kategori, saya menggunakan sub-kueri karena sebuah postingan dapat memiliki banyak kategori.

Foreach($kata kunci sebagai $kunci)( $titleSQL = "if (p_title LIKE "%.DB::escape($key).."%",($scoreTitleKeyword),0)"; $sumSQL = "if (p_summary LIKE "%".DB::escape($key).."%",($scoreSummaryKeyword),0)"; $docSQL = "if (p_content LIKE "%".DB::escape($key)."% ",($scoreDocumentKeyword),0)"; $urlSQL = "if (p_url LIKE "%".DB::escape($key)."%",($scoreUrlKeyword),0)"; $categorySQL = "if ((PILIH count(category.tag_id) DARI kategori GABUNG post_category PADA post_category.tag_id = kategori.tag_id WHERE post_category.post_id = p.post_id DAN kategori.name = "".DB::escape($key).") > 0 ,($scoreCategoryKeyword),0)"; )

Juga seperti yang ditunjukkan oleh pemberi komentar di bawah, kita harus memastikan bahwa variabel-variabel ini bukan array kosong atau kueri akan gagal.

// Seandainya saja "kosong, tambahkan 0 if (empty($titleSQL))( $titleSQL = 0; ) if (empty($sumSQL))( $sumSQL = 0; ) if (empty($docSQL))( $docSQL = 0; ) jika (kosong($urlSQL))( $urlSQL = 0; ) jika (kosong($tagSQL))( $tagSQL = 0; )

Pada akhirnya, semua kueri digabungkan dan ditambahkan untuk menentukan relevansi postingan dengan istilah pencarian.

// Hapus kata-kata yang tidak perlu dari istilah pencarian dan kembalikan sebagai fungsi array filterSearchKeys($query)( $query = trim(preg_replace("/(\s+)+/", " ", $query)); $words = array(); // perluas daftar ini dengan kata-katamu. $list = array("in","it","a","the","of","or","I","you", "dia","saya","kita","mereka","dia","ke","tapi","itu","ini","itu","lalu"); $c = 0; foreach(explode(" ", $query) sebagai $key)( if (in_array($key, $list))( lanjutkan; ) $words = $key; if ($c >= 15)( break; ) $c++ ; ) return $words; ) // batas kata jumlah karakter function limitChars($query, $limit = 200)( return substr($query, 0,$limit); ) function search($query)( $query = trim ($query); if (mb_strlen($query)===0)( // tidak perlu pencarian kosong kan? return false; ) $query = limitChars($query); // Menimbang skor $scoreFullTitle = 6; $ scoreTitleKeyword = 5; $scoreFullSummary = 5; $scoreSummaryKeyword = 4; $scoreFullDocument = 4; $scoreDocumentKeyword = 3; $scoreCategoryKeyword = 2; $scoreUrlKeyword = 1; $kata kunci = filterSearchKeys($query); $escQuery = DB::escape($query); // lihat catatan di atas untuk mendapatkan objek db $titleSQL = array(); $jumlahSQL = susunan(); $docSQL = susunan(); $kategoriSQL = susunan(); $urlSQL = susunan(); /** Mencocokkan kemunculan penuh **/ if (count($keywords) > 1)( $titleSQL = "if (p_title LIKE "%".$escQuery."%",($scoreFullTitle),0)"; $sumSQL = "if (p_summary LIKE "%".$escQuery."%",($scoreFullSummary),0)"; $docSQL = "if (p_content LIKE "%".$escQuery."%",($scoreFullDocument), 0)"; ) /** Kata Kunci yang Cocok **/ foreach($kata kunci sebagai $key)( $titleSQL = "if (p_title LIKE "%".DB::escape($key).."%",($scoreTitleKeyword ),0)"; $sumSQL = "if (p_summary LIKE "%".DB::escape($key).."%",($scoreSummaryKeyword),0)"; $docSQL = "if (p_content LIKE "% ".DB::escape($key).."%",($scoreDocumentKeyword),0)"; $urlSQL = "if (p_url LIKE "%".DB::escape($key).."%", ( $scoreUrlKeyword),0)"; $categorySQL = "if ((SELECT count(category.tag_id) DARI kategori GABUNG post_category ON post_category.tag_id = kategori.tag_id WHERE post_category.post_id = p.post_id DAN kategori.name = "" . DB::escape($key)."") > 0,($scoreCategoryKeyword),0)"; ) // Jika saja kosong, tambahkan 0 if (empty($titleSQL))( $titleSQL = 0 ; ) if (kosong($sumSQL))( $sumSQL = 0; ) if (kosong($docSQL))( $docSQL = 0; ) if (kosong($urlSQL))( $urlSQL = 0; ) if (kosong($tagSQL))( $tagSQL = 0; ) $sql = " PILIH p.p_id,p.p_title,p.p_date_published,p.p_url, p.p_summary,p.p_content,p.thumbnail, ((-- Skor judul ".implode(" + ", $titleSQL). ")+ (-- Ringkasan ".implode(" + ", $sumSQL).")+ (-- dokumen ".implode(" + ", $docSQL).")+ (-- tag/kategori ".implode (" + ", $categorySQL).")+ (-- url ".implode(" + ", $urlSQL).")) sebagai relevansi DARI postingan p WHERE p.status = "diterbitkan" MEMILIKI relevansi > 0 ORDER BY relevansi DESC,p.page_views DESC LIMIT 25"; $hasil = DB::query($sql); jika (!$hasil)( kembalikan salah; ) kembalikan $hasil; )

Sekarang file search.php Anda akan terlihat seperti ini:

$term = isset($_GET["query"])?$_GET["query"]: ""; $hasil_pencarian = pencarian($istilah); if (!$search_results) ( echo "Tidak ada hasil"; exit; ) // Cetak halaman dengan hasil di sini.

Kami membuat algoritma pencarian sederhana yang dapat menangani cukup banyak konten. Saya secara sewenang-wenang memilih skor untuk setiap pertandingan, silakan mengubahnya menjadi skor yang paling sesuai untuk Anda. Dan selalu ada ruang untuk perbaikan.

Sebaiknya lacak istilah penelusuran yang berasal dari pengguna Anda, dengan cara ini Anda dapat melihat apakah sebagian besar pengguna menelusuri hal yang sama. Jika ada pola, maka Anda dapat menyimpannya dalam perjalanan dan hanya menyimpan hasilnya dalam cache menggunakan Memcache.

Jika Anda ingin melihat algoritma pencarian ini beraksi, silakan coba cari artikel di kotak pencarian di bagian atas halaman. Saya telah menambahkan fitur tambahan seperti mengembalikan bagian di mana kecocokan ditemukan dalam teks. Jangan ragu untuk menambahkan fitur ke milik Anda.

Apakah Anda menyukai artikel ini? Anda dapat berlangganan untuk membaca yang lebih keren. .

Pada catatan terkait, berikut beberapa artikel menarik.

Sekarang saatnya untuk menangani fungsi mysql_* untuk selamanya. Metode-metode ini sudah ketinggalan zaman dan lambat. Waktu untuk melakukan upgrade sudah lama berlalu namun kita masih melihatnya di mana-mana. Karena saya tidak bisa memaksa setiap penulis untuk memperbarui tutorial dan blog mereka, saya memutuskan untuk menulis postingan agar peringkatnya lebih baik dan memberikan informasi penting untuk membantu pendatang baru.

Membuat situs web Anda sendiri seharusnya tidak terlalu sulit. Perusahaan hosting seperti GoDaddy atau Hostgator membuatnya sangat mudah bagi siapa saja untuk memulai; mereka memungkinkan Anda membuat situs web secara keseluruhan tanpa harus menulis kode. Bagi kebanyakan orang, menjalankan situs web saja sudah cukup. Blog WordPress. Jika ini yang Anda cari, Anda harus mengunjungi Godaddy.com sekarang. Kita sudah selesai di sini. Namun di sisi lain, jika Anda ingin memiliki kendali dan tidak dibatasi oleh kekurangan dari shared hosting tanpa menguras dompet Anda, Anda telah datang ke tempat yang tepat.

Vim adalah editor teks favorit saya di terminal. Setelah bermain sebentar dengan nano dan emacs, saya akhirnya puas dengan vim karena kesederhanaannya (tolong jelaskan). Meskipun dapat dikustomisasi dan digunakan seperti keseluruhan IDE, saya menggunakannya sebagian besar untuk mengedit file di server saya dan membuat perubahan kecil namun penting. Jangan terlibat dalam perang Editor dan memulai.

Komentar(45)

Zaryel 12 Agustus 2015:

Ian Mustafa 26 September 2015:

rampok 29 September 2015:

adeem 11 Februari 2016:

Ivan Venediktov 9 April 2016.

Tentu saja, setiap orang yang setidaknya memiliki gagasan tentang promosi mesin pencari tahu tentang arti meta tag. Semua orang menyadari pentingnya judul, deskripsi, h1-h6, alt dan tag lainnya. Tidak ada yang menyangkal bahwa hal itu mempengaruhi optimasi situs web. Tetapi mesin pencari memiliki sikap ambivalen terhadap salah satu tag – tag kata kunci.

Dalam beberapa tahun terakhir, telah terjadi perdebatan sengit di Internet yang berlanjut hingga hari ini: apakah layak menggunakan tag meta kata kunci? Sayangnya, masih belum ada yang bisa memberikan jawaban pasti. Mari pertimbangkan sudut pandang yang berbeda dan coba pahami masalah ini.

Apa itu kata kunci?

Kata kunci adalah kata kunci (tidak lebih dari 20 untuk satu halaman situs) yang sesuai dengan konten halaman.

Pada kode halaman meta tag ini terlihat seperti ini:

Awalnya, tag memiliki pengaruh yang signifikan terhadap relevansi halaman situs, dan akibatnya pada peringkat situs di posisi teratas mesin pencari.

Mengetahui hal ini, pemilik situs mulai menipu - menyalahgunakan kata kunci atau menambahkan banyak kata yang tidak pantas ke tag ini. Dan mesin pencari menemukannya dengan cukup cepat.

Apa yang terjadi sekarang?

Seperti yang mereka katakan, dari satu ekstrem ke ekstrem lainnya: akibatnya, mesin pencari berhenti memberikan arti apa pun pada tag ini sama sekali.

Yandex

Perwakilan Yandex menyatakan hal berikut tentang kata kunci: “...dapat diperhitungkan saat menentukan apakah suatu halaman relevan dengan permintaan pencarian”.

Harap dicatat bahwa kata kunci di sini adalah Mungkin. Lagipula Mungkin tidak berarti sama sekali diperhitungkan.

Google

Sistem ini tidak meninggalkan keraguan dan tidak memberikan dasar untuk berpikir. Semuanya ringkas dan jelas di sini: “Kami tidak menggunakan meta-tag kata kunci dalam peringkat pencarian”, “Google telah mengabaikan meta tag kata kunci selama bertahun-tahun dan saat ini kami merasa tidak perlu mengubah kebijakan tersebut”.

“Kami tidak menggunakan meta tag kata kunci dalam peringkat pencarian”, “Google telah mengabaikan meta tag kata kunci selama bertahun-tahun, dan saat ini tidak ada kebutuhan untuk mengubah kebijakan ini”.

Rambler, Yahoo, Mail.ru

Mereka berbagi pendapat dengan Google dan percaya bahwa meta tag kata kunci telah habis kegunaannya. Oleh karena itu, sama sekali tidak diperhitungkan oleh mesin pencari ini.

Tapi kenapa masih banyak orang yang menggunakan kata kunci?

Kemungkinan besar, ini disebabkan oleh kata-kata ambigu Yandex tentang tag tersebut. Logika pemilik situs adalah ini: jika ada harapan bahwa Yandex akan mempertimbangkan tag tersebut, dan Google, Rambler, Yahoo, dan Mail.ru bersikap netral terhadap tag meta, maka mengisinya tidak akan memperburuk keadaan.

Bagaimana jika ya?

Ada pendapat di kalangan pengoptimal bahwa mengisi tag kata kunci bisa berbahaya. Jika mesin pencari tidak menganggap tag sebagai tag, maka teks yang disertakan di dalamnya akan dibaca sebagai teks situs biasa. Dan jika Anda telah menggunakan kunci ini di tag lain dan di badan teks, maka ada risiko “mengirim spam berlebihan” ke halaman dengan kunci. Ya, spam yang berlebihan (mual yang berlebihan) bisa membuat Anda masuk dalam filter.

sudut pandang 1PS

Sejauh ini kami telah menggambarkan situasi umum dan perbedaan pendapat mengenai masalah ini. Setiap orang memiliki sudut pandangnya masing-masing. Maksud kami, sebaiknya tag kata kunci tidak diisi. Memang tidak ada manfaatnya, tapi masih ada risiko terjerumus ke dalam filter.

Lebih baik promosikan website Anda dengan konten dan tag yang tepat