К концу 2000 года, пока остальная технологическая индустрия выглядела как бесплодная пустошь, шесть тысяч компьютеров Google обрабатывали 15 миллионов запросов в день. Пятнадцать миллионов. Новые языки, новые пользователи и сеть, разрастающаяся на миллиарды страниц в течение года, были теми барьерами, что постоянно держали в напряжении. Поисковик Google теперь был монстром с более чем тремя тысячами компьютеров, сканирующих Интернет, индексирующих ссылки и ранжирующих веб-страницы. Команда инженеров Google заботилась о результатах поиска, программном обеспечении и обо всем остальном на кухне Google, всегда пытаясь совершенствовать результаты пользователей. Алгоритм поиска постоянно анализировался, чтобы оставаться на вершине.
К осени 2000 года Ларри описал состояние поисковой системы Google следующим образом: «Если распечатать весь наш каталог, его высота была бы семьдесят миль! У нас есть шесть тысяч компьютеров. Так что у нас достаточно места для хранения сотни копий Интернета».
«Я не вижу конца тому, что нам еще предстоит сделать, – говорил Ларри в то время, – если в следующем году мы не будем намного лучше, мы будем забыты».
И он был прав. Результатам поиска необходимо было быть не только точными, но также и актуальными. Представь, будто ты услышал, как твои друзья обсуждают выпуск крутой новой игры. Ты садишься за поиск и не находишь ни единого упоминания о ней среди результатов поиска – совсем. Нигде. Ничего. Пусто. Шиш. Вот это была бы проблема. А для Google – первоклассный способ превратиться из героя в ничтожество менее чем за секунду.
Вот что произойдет, если сканеры Google не будут достаточно часто индексировать Интернет. Чтобы избежать такой проблемы, Google начал обновлять свой веб-каталог как можно чаще. Это означало, что результаты Google стали еще и «самыми свежими» в мире.
Google Новости
11 СЕНТЯБРЯ 2001 ГОДА, ПОСЛЕ ТОГО, КАК ПЕРВЫЙ САМОЛЕТ АТАКОВАЛ ВСЕМИРНЫЙ ТОРГОВЫЙ ЦЕНТР, все находились в замешательстве относительно того, что на самом деле происходит. Был ли это маленький самолет? Несчастный случай? Но спустя семнадцать минут второй пассажирский самолет врезался в Южную башню прямо в прямом эфире, приводя все население в ужас. Было ясно, что нападениям подвергается вся страна.
Было трудно найти информацию. Не было никаких смартфонов для записи происходящего или трансляции в прямом эфире на еще не созданном тогда Facebook. Сети вещания передавали информацию, как только они ее получали. Но все эти усилия столкнулись с немыслимыми препятствиями: от перегруженных сотовых сетей и потери телевизионной передачи с башен на крыше Всемирного торгового центра до поиска убежища журналистами во время обрушения зданий. Было невероятно трудно осознать, запечатлеть и как-то передать то, что происходило.
Между тем весь мир пытался понять,
Потребность в информации была запредельной.
Члены семей нуждались в новостях о пропавших близких. Каждому самолету в Северной Америке было приказано приземлиться. Пассажиры оказались в затруднительном положении. Их семьям тоже нужна была информация. А так как в новостных сообщениях стали упоминаться множество имен и слов, которые большинство американцев никогда раньше не слышали (такие как Усама бен Ладен, «Аль-Каида» и «Талибан»), все хотели получить больше информации.
Независимо, были ли люди непосредственно затронуты атаками или просто в ужасе наблюдали, им нужны были детали всех аспектов происходящего. В тот день трафик Google резко подскочил.
Пользователи вбивали в поисковую строку «башни-близнецы». Но результаты Google не выдавали никакой информации об атаках. Поискового бота запускали лишь месяц назад. Это означало, что результаты поиска устарели аж на месяц.
В тот сентябрьский день, когда весь мир пытался разобраться в том, что только что произошло и что это означало, каталога Google было недостаточно.
«Мы в Google подводили наших пользователей, – объяснил позже сотрудник Google Амит Сингхал, – поэтому мы разместили ссылки на все новостные организации, такие как CNN, прямо на нашей главной странице со словами «пожалуйста, перейдите на эти сайты, чтобы узнать новости дня»».
Снимок экрана Google.com от 11 сентября 2001 года
Но многие традиционные новостные сайты были перегружены увеличившимся трафиком. Быстрое решение Google заключалось в том, чтобы размещать ссылки на кэшированные (или сохраненные) версии различных новостных сайтов, доступные ранее тем днем. Это было придуманное на ходу решение, позволившее людям получить необходимую информацию. И эти ссылки были прямо на главной странице Google.