Проект веб-базы в Стэндфорде.
Основатели Google Ларри Пейдж и Сергей Брин породили свои технологии мирового уровня в Стэнфорде, и новая группа взяла на себя ответственность и планирует сосредоточиться на разработке и тестировании новых алгоритмов кластеризации, поиска, добычи и классификации веб-контента.
Репозиторий, который они создают, доступен для извлечения веб-страниц из онлайн-документации. Кроме того, можно запустить локальный сервер, который сканирует веб-контент и передает его в хранилище WebBase, что является отличным способом внести свой вклад, если у вас есть доступная пропускная способность и время сервера.