KOMPONEN UTAMA SEARCH ENGINE
A. Web Crawler
Web Crawler atau sering juga disebut sebagai spider adalah sebuah mesin atau program pencari daftar untuk mengindeks halaman web. Web crawler hanya mengumpulkan data dalam teks bukan berupa image.
B. Indexing System
Indexing system adalah sistem pengindeksan suatu halaman web yang terdiri dari:
a) Merge Factors
b) Storage Techniques
c) Index Size
d) Lookup Speed
e) Maintenance
f) Fault Tolerance
C. Search System
Search system adalah sistem pencari halaman web. Sistem pencari berperan saat pencarian data dalam database atau basis data suatu halaman web melalui index.
KOMPRESI & DEKOMPRESI DATA
· Berdasarkan mode pengiriman data
a) Dialogue Mode
Adalah tipe kompresi & dekompresi secara real time. Contoh tipe kompresi dialogue mode ini adalah chatting dan video conference.
b) Retrevial Mode
Adalah tipe kompresi & dekompresi secara unreal time. Contoh tipe kompresi retrevial mode ini adalah e-mail.
· Kriteria algoritma program kompresi
Hasil kompresi dengan ukuran data seminimal mungkin
Data asli tidak berubah
Data hasil kompresi dapat dikembalikan menjadi data asli