Cara Kerja Memex Search Engine Index Deep Web

Cara kerja mesin pencari Memex sangat kompleks. Semua informasi di internet terkait topik atau masalah yang sedang diselidiki nantinya akan disisir oleh Memex, termasuk informasi dari iklan yang diposting secara online. Memex kemudian akan mengambil informasi seperti nomor telepon, gambar, dan juga lokasi metadatanya untuk dipetakan dan hasil pencariannya ditampilkan dalam bentuk infografis.

Menurut para pakar IT apa yang kita lihat melalui mesin pencari sebenarnya baru 4-5 persennya saja dari apa yang terdapat di internet. Masih banyak sudut gelap dan tempat-tempat yang tak terlihat, yang biasanya disebut "Deep Web".

Apa itu Deep Web?

Pertanyaan menarik yang muncul adalah apa itu Deep Web? Sebelum memahami tentang Deep Web, kita harus tahu dulu tentang Surface Web.

Menurut laman Inform IT, Surface web adalah kumpulan halaman web yang bisa diakses saat kita melakukan pencarian melalui mesin pencari seperti Google atau Yahoo. Halaman tersebut dapat diakses karena terhubung dengan halaman publik lainnya dan secara luas dilihat oleh mesin pencari.

Seperti diketahui, Google hanya mengindekskan halaman web yang ada pada Surface Web. Algoritma pengindeksan ini dilakukan dalam skala besar yang disebut spiders (laba-laba). Spiders menjelajahi setiap halaman web baru, mengarsipkan lokasinya, membuat catatan-catatan konten dan history kerja semua link yang keluar dan masuk halaman web.

Situs Facebook.com, Wikipedia.org atau situs lain yang dapat diakses publik itu hanya bagian dari Surface Web. Yang menarik, menurut Inform IT, Surface Web hanya terdiri dari 4% dari semua konten yang di internet. Sisanya tersembunyi dalam `dark` domain alias server privat.

Jika pencarian di Surface Web didasarkan pada popularitas backlink, berbeda halnya dengan Deep Web. Di Deep Web, backlink tidak akan ditemukan dalam kondisi web normal. Di dalam Deep Web terdapat banyak data rahasia yang selama ini belum tersentuh, salah satunya kegiatan ilegal yang disebut Dark Web.

Konten yang bisa ditemukan di Deep web sangat besar. Kira-kira 500 kali lebih besar dari konten yang diindeks oleh mesin pencari konvensional.

Menurut Denny Sugiri, Auditor IRCA information Security Management System, jaringan Dark Web adalah jaringan situs ilegal yang selama ini belum tersentuh atau belum dapat dijangkau oleh mesin pencari biasa. Umumnya situs tersebut mempunyai kegiatan digital yang bersifat rahasia dan tentu ilegal dan berada di dalam Deep Web.

"Informasi publik yang ada di Deep Web lebih besar 400-500 kali dari yang ada pada web biasa atau yang ter-index. Deep Web mempunyai sebanyak 7500 terabyte (TB) informasi, sementara pada web biasa kurang lebih hanya 19 TB," terang Denny.

Informasi yang ada pada Deep Web, tambah Denny, terdapat sekitar 550 miliar dokumen rahasia, sementara pada web biasa hanya di kisaran 1 miliar dokumen atau yang ter-index lebih dari 200 ribu website aktif dan dapat diakses tanpa enkripsi.

Memex Mampu Jelajahi Laut Dalam

Lebih lanjut Denny berpendapat bahwa Google dan Memex memiliki perbedaan signifikan. "Jika internet diibaratkan sebagai sebuah lautan, maka Google adalah kapal yang berlayar di permukaan laut berdasarkan algoritma khusus dari rating atau index iklan sebuah situs, sementara Memex adalah ibarat sebuah kapal selam yang menjelajah hingga ke laut dalam," kata Denny.

Denny mengungkap, jaringan Dark Web merupakan jaringan situs ilegal yang selama ini belum tersentuh atau belum dapat dijangkau oleh mesin pencari biasa. Umumnya, situs tersebut mempunyai kegiatan digital yang bersifat rahasia dan tentu ilegal dan berada di dalam Deep Web.

Sedangkan Memex, dalam pencariannya tidak dibatasi rating ataupun index iklan, tapi algoritmanya lebih investigatif dalam menemukan hubungan antar data dalam setiap situs yang berbeda bahkan situs-situs yang sifatnya privat yang berada di dalam Deep Web.

(Disarikan dari berbagai sumber)

Tweet