Cara menggunakan mongodb indexing

Description

Kami Baba Studio telah berdiri selama 17 tahun dengan 130 ribu murid dan alumni. Beberapa Pencapaian Baba Studio
adalah:
1. Peraih Ratusan Penghargaan
2. Termasuk 5 ICT Award dari Menkominfo

Hasil yang didapat dari kursus ini

Di Materi ini kamu akan mempelajari:

Bab 1 : Penerapan MongoDB
  1.1 Instalasi MongoDB
  1.2 Cara Menjalankan MongoDB
  1.3 Menambah data pada MongoDB
  1.4 Merubah data pada MongoDB
  1.5 Menghapus data pada MongoDB
  1.6 Menampilkan data pada MongoDB
  1.7 Data array pada MongoDB

Bab 2 : Tipe - tipe data MongoDB
  2.1 Tipe - tipe data MongoDB
  2.2 Relasi
  2.3 Relasi One to one
  2.4 Relasi One to many
  2.5 Relasi Many to Many
  2.6 Lookup MongoDB
  2.7 Membuat validasi pada MongoDB

Bab 3 : MongoDB Compass
  3.1 MongoDB Help
  3.2 MongoDB Compass
  3.3 Ordered
  3.4 Export Database
  3.5 Import Database

Bab 4 : Mengenal fungsi - fungsi yang ada pada MongoDB
  4.1 Mengenal Method, filter, operator
  4.2 in & nin
  4.3 And, or, not
  4.4 Exists, type, reges
  4.5 Expr
  4.6 Next
  4.7 Sort
  4.8 Limit
  4.9 Unset
  4.10 Upsert
  4.11 elemMacth
  4.12 Push, Pull, Addtoset

Bab 5 : Bekerja dengan Indexes
  5.1 Membuat index pada MongoDB
  5.2 Menghapus index
  5.3 Membuat banyak index
  5.4 Partialfilter Expression
  5.5 Expired After Second
  5.6 Pencarian index
  5.7 Geospatial part 1
  5.8 Geospatial part 2
  5.9 Aggregate
  5.10 Security MongoDB
  5.11 Capped Collections
  5.12 MongoDB Alert

Bab 6 : Pengimplementasikan MongoDB pada Node js
  6.1 Instalasi Node js
  6.2 Instalasi Visual Studio Code
  6.3 Mengkoneksikan Node js ke MongoDB
  6.4 Menambahkan Produk
  6.5 Menampilkan Produk
  6.6 Menampilkan Detail
  6.7 Update data & Hapus data

Curriculum

• • Cara Menjalankan MongoDB
  • 17:34
• • Menambah Data pada Mongodb
  • 04:59
• • Merubah Data pada MongoDB
  • 07:59
• • Menghapus Data pada MongoDB
  • 04:31
• • Menampilkan data pada MongoDB
  • 09:17
• • Data array pada MongoDB
  • 12:25

• • Tipe - tipe data MongoDB
  • 16:16
• • Membuat validasi pada MongoDB
  • 37:23

• • Mengenal Method, Filter, Operator
  • 03:40
• • Push, Pull, Addtoset
  • 18:43

• • Membuat index pada MongoDB
  • 12:16
• • Membuat Banyak Index
  • 09:24
• • Partialfilter Expression
  • 07:16
• • Expired After Second
  • 12:10

• • Instalasi Visual Studio Code
  • 04:47
• • Mengkoneksikan Node js ke MongoDB
  • 13:16
• • Update data & Hapus data
  • 12:59

MongoDB, salah satu database NoSQL terkemuka, terkenal dengan kinerja yang cepat, skema fleksibel, skalabilitas dan kemampuan pengindeksan yang bagus Inti dari pertunjukan cepat ini adalah MongoDB indeks, yang mendukung eksekusi kueri dengan efisien dengan menghindari pengumpulan penuh scan dan karenanya membatasi jumlah dokumen pencarian MongoDB.

Mulai dari versi 2.4, MongoDB dimulai dengan fitur eksperimental yang mendukung Full-Text Search menggunakan Text Indexes. Fitur ini ada sekarang menjadi bagian integral dari produk (dan bukan lagi fitur eksperimental). Pada artikel ini kita akan mengeksplorasi fungsi full-text search MongoDB langsung dari fundamental.

Jika Anda baru mengenal MongoDB, saya sarankan Anda membaca artikel berikut di Envato Tuts+ yang akan membantu Anda memahami konsep dasar dari MongoDB:

• Memulai MongoDB - Bagian 1
• Pemetaan Database Relasional dan SQL ke MongoDB

Dasar

Sebelum kita membahasnya, mari kita lihat beberapa latar belakang. Full-text search mengacu pada teknik full-text database lengkap terhadap kriteria pencarian yang ditentukan oleh pengguna. Ini adalah sesuatu yang mirip dengan cara kami mencari konten di Google (atau dalam faktanya aplikasi pencarian lainnya) dengan memasukkan kata kunci / frase string tertentu dan mengembalikan hasil yang relevan diurutkan berdasarkan rangkingnya.

Disini adalah beberapa skenario lagi di mana kita akan melihat full-text search yang terjadi:

• Pertimbangkan untuk mencari topik favorit Anda di Wiki. Saat Anda memasukkan teks pencarian di Wiki, mesin pencari menampilkan hasil semua artikel yang berhubungan dengan kata kunci / frase yang Anda cari (walaupun kata kunci tersebut digunakan jauh di dalam artikel). Hasil pencarian ini diurutkan berdasarkan relevansi berdasarkan skor yang cocok.
• Sebagai contoh lain, perhatikan situs jejaring sosial tempat pengguna bisa melakukan pencarian untuk menemukan semua tulisan yang mengandung kata kunci

  {
  

  24 di dalamnya; atau menjadi lebih kompleks, semua tulisan yang memiliki komentar mengandung kata

  {
  

  24.

Sebelum kita melanjutkan, ada beberapa istilah umum yang terkait dengan full-text search yang harus Anda ketahui. Persyaratan ini berlaku untuk implementasi full-text search (dan bukan spesifik MongoDB).

Stop Word

Stop Words adalah kata-kata yang tidak relevan yang harus disaring dari teks. Misalnya: a, an, the, is, at, which, dll.

Stemming

Stemming adalah proses mengurangi kata-kata pada batangnya. Misalnya: kata-kata seperti berdiri, berdiri, berdiri, dll memiliki basis dasar yang sama.

Scoring

Peringkat relatif untuk mengukur hasil pencarian mana yang paling relevan.

Alternatif untuk Full-Text Search di MongoDB

Sebelum MongoDB mengemukakan konsep indeks teks, kita akan memodelkan data kami untuk mendukung keyword search atau menggunakan untuk menerapkan fungsi pencarian fungsi pencarian tersebut. Namun, dengan menggunakan salah satu pendekatan ini memiliki keterbatasan sendiri:

• Pertama, tidak satu pun pendekatan ini mendukung fungsi seperti stemming, stop words, rangking, dll.
• Menggunakan Menggunakan pencarian kata kunci akan memerlukan pembuatan indeks multi-kunci, yang tidak cukup dibandingkan dengan full-text.
• Menggunakan regular expression tidak efisien dari sudut pandang kinerja, karena ungkapan ini tidak efektif memanfaatkan indeks.
• Selain itu, tidak satu pun dari teknik ini dapat digunakan untuk melakukan pencarian frase apapun (seperti mencari 'film yang diluncurkan pada tahun 2015') atau penelusuran berbobot.

Terlepas dari pendekatan ini, untuk aplikasi sentris search yang lebih maju dan kompleks ada solusi alternatif seperti Elastic Search atau SOLR. Tapi menggunakan salah satu dari solusi ini meningkatkan kompleksitas aplikasi arsitektur, karena MongoDB sekarang harus berbicara dengan database eksternal tambahan.

Perhatikan bahwa full-text search MongoDB tidak diusulkan sebagai penggantian lengkap database mesin pencari seperti Elastic, SOLR, dll. Namun, aplikasi ini dapat digunakan secara efektif untuk sebagian besar aplikasi yang dibangun dengan MongoDB hari ini.

Memperkenalkan MongoDB Pencarian Teks

Dengan menggunakan full-text search MongoDB, Anda dapat menentukan indeks teks pada bidang apa pun dalam dokumen yang nilainya berupa string atau array. Saat kami membuat indeks teks di lapangan, MongoDB memberi tokenizes dan memunculkan konten teks bidang yang diindeks, dan membuat indeks sesuai dengan itu.

Untuk memahami hal-hal lebih jauh, marilah kita menyelami beberapa praktek langsung. Saya ingin Anda mengikuti tutorial dengan saya dengan mencoba contoh di mongo shell. Kita pertama-tama akan membuat beberapa data sampel yang akan kita gunakan sepanjang artikel, dan kemudian kami akan melanjutkan untuk membahas konsep utama.

Untuk tujuan artikel ini, pertimbangkan kumpulan

{

1

{

2

    "subject":"Joe owns a dog", 

3

    "content":"Dogs are man's best friend", 

4

    "likes": 60, 

5

    "year":2015, 

{

{

{

{

Mari kita masukkan beberapa contoh dokumen menggunakan perintah

{

1

{

2

3

{

4

5

2

{

{

2

Membuat Indeks Text

Sebuah indeks teks dibuat sangat mirip dengan bagaimana kita membuat indeks reguler, kecuali bahwa ia menentukan kata kunci

{

Mengindeks Bidang Tunggal

Buat indeks teks pada bidang

{

1

2

Untuk menguji indeks teks yang baru dibuat ini di bidang

{

{

{

{

Karena kita menjalankan pencarian teks, kita juga tertarik untuk mendapatkan beberapa statistik tentang seberapa relevan dokumen yang dihasilkan. Untuk tujuan ini, kita akan menggunakan

{

{

{

{

{

1

2

Permintaan di atas mengembalikan dokumen berikut yang berisi kata kunci

{

{

1

    "subject":"Joe owns a dog", 

2

3

    "subject":"Joe owns a dog", 

Seperti yang bisa Anda lihat, dokumen pertama memiliki skor 1 (karena kata kunci

{

Satu pertanyaan yang mungkin muncul di benak Anda adalah jika kita mencari kata kunci

{

{

{

{

Pengindeksan Beberapa Bidang (Compound Indexing)

Lebih sering daripada tidak, Anda akan menggunakan pencarian teks di berbagai bidang dokumen. Dalam contoh kita, kita akan mengaktifkan pengindeksan teks gabungan pada bidang

{

{

1

    "subject":"Joe owns a dog", 

Apakah ini bekerja? Tidak!! Membuat indeks teks kedua akan memberi Anda pesan kesalahan yang mengatakan bahwa indeks pencarian teks lengkap sudah ada. Kenapa gitu? Jawabannya adalah bahwa indeks teks hanya memiliki satu indeks teks per koleksi. Oleh karena jika Anda ingin membuat indeks teks lain, Anda harus memasukkan yang sudah ada dan menciptakan yang baru.

1

    "subject":"Joe owns a dog", 

2

    "subject":"Joe owns a dog", 

Setelah mengeksekusi kueri pembuatan indeks di atas, coba cari semua dokumen dengan kata kunci

{

1

3

Permintaan di atas akan menampilkan dokumen berikut:

1

3

2

3

3

Anda dapat melihat bahwa nilai dokumen pertama, yang berisi kata kunci

{

{

{

Mengindekskan Seluruh Dokumen (Wildcard Indexing)

Pada contoh terakhir, kita menempatkan indeks gabungan pada bidang

{

{

Misalnya, pertimbangkan untuk menyimpan email dalam dokumen MongoDB. Dalam kasus email, semua bidang, termasuk Pengirim, Penerima, Subjek dan Badan, perlu dapat dicari. Dalam skenario seperti itu Anda dapat mengindeks semua bidang string dokumen Anda menggunakan specifier wildcard

{

Kueri akan berjalan seperti ini (pastikan Anda menghapus indeks yang ada sebelum membuat yang baru):

1

3

Kueri ini akan secara otomatis mengatur indeks teks pada setiap bidang string di dokumen kami. Untuk menguji ini, masukkan dokumen baru dengan

{

1

    "content":"Dogs are man's best friend", 

Sekarang jika Anda mencoba pencarian teks dengan kata kunci

{

1

    "content":"Dogs are man's best friend", 

Beberapa hal yang ingin saya fokuskan di sini:

• Perhatikan bahwa kita tidak secara eksplisit menentukan indeks pada bidang

  {
  

  55 setelah kita memasukkan dokumen baru. Ini karena kita sudah mendefinisikan indeks teks pada keseluruhan dokumen menggunakan operator

  {
  

  54.
• Indeks wildcard bisa lambat, terutama dalam skenario dimana data Anda sangat besar. Untuk alasan ini, rencanakan indeks dokumen Anda (alias wildcard indexes) dengan bijak, karena bisa menyebabkan hit kinerja.

Pencarian Tingkat Lanjut

Pencarian Frase

Anda bisa mencari ungkapan seperti "smart birds who love cooking" dengan menggunakan indeks teks. Secara default, pencarian frase membuat pencarian OR pada semua kata kunci yang ditentukan, yaitu akan mencari dokumen yang berisi kata kunci

{

{

{

{

1

    "content":"Dogs are man's best friend", 

Kueri ini akan menampilkan dokumen-dokumen berikut:

1

    "content":"Dogs are man's best friend", 

2

3

    "content":"Dogs are man's best friend", 

Jika Anda ingin melakukan pencarian frase yang tepat (logika AND), Anda dapat melakukannya dengan menentukan tanda kutip ganda di teks pencarian.

1

4

Kueri ini akan menghasilkan dokumen berikut, yang berisi ungkapan "cook food" bersama:

1

4

Pencarian Negasi

Mengawali kata kunci pencarian dengan

{

{

{

1

4

Melihat di Balik Layar

Salah satu fungsi penting yang tidak saya ungkapkan sampai sekarang adalah bagaimana Anda melihat di balik layar dan melihat bagaimana kata kunci pencarian Anda stemmed, stop word yang diaplikasikan, negasi, dll.

{

{

1

4

Jika Anda melihat objek

{

{

{

{

Anda juga dapat melihat istilah yang kita abaikan dari penelusuran dan frasa yang kita gunakan di bagian

{

1

4

2

    "likes": 60, 

3

    "likes": 60, 

4

    "likes": 60, 

5

    "likes": 60, 

{

    "likes": 60, 

{

5

5

5

5

    "likes": 60, 

5

5

5

5

    "year":2015, 

    "year":2015, 

    "year":2015, 

    "year":2015, 

    "year":2015, 

5

    "year":2015, 

    "year":2015, 

    "year":2015, 

    "year":2015, 

{

5

{

{

{

{

Explain query akan sangat berguna saat kita melakukan kueri penelusuran yang lebih rumit dan ingin menganalisisnya.

Penelusuran Teks Tertimbang

Bila kita memiliki indeks pada lebih dari satu bidang dalam dokumen kita, sebagian besar waktu satu bidang akan lebih penting (yaitu lebih berat) daripada yang lain. Misalnya, ketika Anda mencari di sebuah blog, judul blog harus memiliki bobot tertinggi, diikuti oleh konten blog.

Bobot default untuk setiap bidang yang diindeks adalah 1. Untuk menetapkan bobot relatif untuk bidang yang diindeks, Anda dapat memasukkan opsi

{

{

Mari kita pahami ini dengan sebuah contoh. Jika Anda mencoba mencari kata kunci

{

1

{

1

{

2

3

    "content":"Dogs are man's best friend", 

Sekarang mari kita ubah indeks kita untuk memasukkan bobot; dengan bidang

{

{

1

{

Coba cari kata kunci

{

{

1

    "content":"Dogs are man's best friend", 

2

3

    "content":"Dogs are man's best friend", 

Partisi Teks Indeks

Seiring data yang tersimpan dalam aplikasi Anda tumbuh, ukuran indeks teks Anda terus berkembang juga. Dengan peningkatan ukuran indeks teks ini, MongoDB harus mencari semua entri yang diindeks setiap kali pencarian teks dilakukan.

Sebagai teknik untuk menjaga pencarian teks Anda tetap efisien dengan indeks yang berkembang, Anda dapat membatasi jumlah entri indeks hasil pindaian dengan menggunakan kondisi kesetaraan dengan pencarian reguler

{

Jika Anda mengamati dokumen yang sedang kami tangani, kita memiliki bidang

{

Untuk ini, kita dapat membuat indeks gabungan yang menentukan sebuah kunci indeks ascending / descending pada

{

{

• Kita secara logis mempartisi seluruh data koleksi menjadi beberapa set yang dipisahkan oleh tahun.
• Ini akan membatasi pencarian teks untuk memindai dokumen-dokumen yang jatuh di bawah tahun tertentu (atau menyebutnya).

Jatuhkan indeks yang sudah Anda miliki dan buat indeks senyawa baru pada (

{

{

1

{

Sekarang jalankan query berikut untuk mencari semua pesan yang dibuat pada tahun 2015 dan berisi kata kunci

{

1

{

Permintaan akan mengembalikan hanya satu dokumen yang sesuai seperti yang diharapkan. Jika Anda

{

{

{

Indeks Teks: Manfaat

Apa Lagi yang Dapat Dilakukan Indeks Teks?

Kita telah menempuh perjalanan panjang dalam artikel ini untuk belajar tentang indeks teks. Ada banyak konsep lain yang dapat Anda eksperimen dengan indeks teks. Tapi karena cakupan artikel ini, kita tidak akan bisa membahasnya secara rinci hari ini. Namun demikian, mari kita lihat secara singkat apa fungsi ini:

• Indeks teks memberikan dukungan multi bahasa, memungkinkan Anda untuk mencari dalam berbagai bahasa menggunakan operator

  {
  

  90. MongoDB saat ini mendukung sekitar 15 bahasa, termasuk Prancis, Jerman, Rusia, dll.
• Indeks teks dapat digunakan dalam query pipeline agregasi. Tahap pencocokan dalam pencarian agregat dapat menentukan penggunaan kueri full-text search.
• Anda dapat menggunakan operator reguler untuk proyeksi, filter, batasan, jenis, dll., Saat bekerja dengan indeks teks.

Pengindeksan Teks MongoDB vs. Database Pencarian Eksternal

Mengingat fakta bahwa full-text search MongoDB bukanlah pengganti lengkap untuk database mesin pencari tradisional yang digunakan bersama MongoDB, dengan menggunakan fungsi MongoDB asli disarankan karena alasan berikut:

• Seperti yang baru-baru ini dibicarakan terkait MongoDB, cakupan pencarian teks saat ini bekerja dengan baik untuk sebagian besar aplikasi (sekitar 80%) yang dibangun dengan menggunakan MongoDB hari ini.
• Membangun kemampuan pencarian aplikasi Anda dalam database aplikasi yang sama mengurangi kompleksitas arsitektur aplikasi.
• Pencarian teks MongoDB bekerja secara real time, tanpa update lag atau batch. Saat Anda memasukkan atau memperbarui dokumen, entri indeks teks akan diperbarui.
• Pencarian teks diintegrasikan ke dalam fungsi kernel db MongoDB, ini benar-benar konsisten dan bekerja dengan baik bahkan dengan penghancuran dan replikasi.
• Ini terintegrasi sempurna dengan fitur Mongo yang ada seperti filter, agregasi, pembaruan, dll.

Indeks Teks: Kekurangan

Full-text search merupakan fitur yang relatif baru di MongoDB, ada beberapa fungsi yang memiliki kekurangan saat ini. Saya akan membagi mereka menjadi tiga kategori. Mari kita lihat.

Fungsionalitas yang Hilang Dari Pencarian Teks

• Indeks Teks saat ini tidak memiliki kemampuan untuk mendukung antarmuka pluggable seperti stemmers, stop words, etc.
• Mereka saat ini tidak mendukung fitur seperti pencarian berdasarkan sinonim, kata-kata serupa, dll.
• Mereka tidak menyimpan posisi istilah, yaitu jumlah kata yang digunakan kedua kata kunci tersebut untuk dipisahkan.
• Anda tidak dapat menentukan urutan untuk ekspresi semacam dari indeks teks.

Batasan di Fungsionalitas Saat Ini

• Indeks teks majemuk tidak dapat mencakup jenis indeks lainnya, seperti indeks multi-kunci atau indeks geo-spasial. Selain itu, jika indeks teks gabungan Anda menyertakan kunci indeks sebelum kunci indeks teks, semua kueri harus menentukan operator kesetaraan untuk tombol sebelumnya.
• Ada beberapa batasan khusus kueri. Misalnya, kueri hanya dapat menentukan satu ekspresi

  {
  

  31 tunggal, Anda tidak dapat menggunakan

  {
  

  31 dengan

  {
  

  93, Anda tidak dapat menggunakan perintah

  {
  

  94 dengan

  {
  

  31, menggunakan

  {
  

  31 dengan

  {
  

  97 yang dibutuhkan semua klausa

  {
  

  97 Anda untuk diindeks, dll.

Kerugian Kinerja

• Indeks teks membuat sebuah overhead saat memasukkan dokumen baru. Hal ini pada gilirannya menyentuh throughput penyisipan.
• Beberapa pertanyaan seperti pencarian frase bisa relatif lambat.

Kesimpulan

Pencarian teks lengkap selalu menjadi salah satu fitur yang paling dituntut dari MongoDB. Pada artikel ini, kita memulai dengan pengenalan full-text search, sebelum beralih ke dasar-dasar pembuatan indeks teks.

Kita kemudian mengeksplorasi pengindeksan compound, pengindeksan wildcard, pencarian frase dan pencarian negasi. Selanjutnya, kita mengeksplorasi beberapa konsep penting seperti menganalisis indeks teks, pencarian tertimbang, dan membagi partisi secara logis. Kita dapat mengharapkan beberapa pembaruan utama pada pembaruan utama pada fungsi ini dalam rilis MongoDB yang akan datang.

Saya Merekomendasikan sebaiknya Anda memberi teks-search untuk dicoba dan berbagi pemikiran Anda. Jika Anda telah menerapkannya di aplikasi Anda, silakan berbagi pengalaman Anda di sini. Akhirnya, jangan ragu untuk memposting pertanyaan, pemikiran dan saran Anda di artikel ini di bagian komentar.

MongoDB digunakan untuk apa?

MongoDB menggunakan bahasa apa?

Apa itu Collection di MongoDB?

Apakah MongoDB termasuk database?