Чтобы создать большой веб-поиск, нам необходимо:
1. Сканирование большого объема данных из Интернета.
2. Индексирование этих страниц и вычисление репутации (рейтинга) этих страниц.
3. Как можно более быстрый подсчет ранжирования сайтов и выдача наиболее релевантных страниц по запросам пользователей.