stringtranslate.com

Центры обработки данных Google

Бывший дата-центр Google в Эмсхавене , Нидерланды

Центры обработки данных Google — это крупные центры обработки данных , которые Google использует для предоставления своих услуг . Они объединяют большие диски, компьютерные узлы, организованные в проходах стоек, внутренние и внешние сети, средства контроля окружающей среды (в основном, управление охлаждением и увлажнением) и программное обеспечение для эксплуатации (особенно в части балансировки нагрузки и отказоустойчивости ).

Официальных данных о количестве серверов в центрах обработки данных Google нет , но Gartner подсчитал в отчете за июль 2016 года, что на тот момент у Google было 2,5 миллиона серверов. Это число меняется, поскольку компания расширяет мощности и обновляет свое оборудование. [1]

Места

Расположение различных центров обработки данных Google по континентам следующее: [2] [3]

Аппаратное обеспечение

Оригинальное оборудование

Первая производственная серверная стойка Google, около 1998 г.

Первоначальное оборудование (около 1998 года), которое использовалось Google, когда компания располагалась в Стэнфордском университете, включало: [77]

Производственное оборудование

С 2014 года Google использует сильно измененную версию Debian Linux . Они постепенно перешли с системы на основе Red Hat в 2013 году. [78]

Цель настройки — приобрести поколения ЦП, которые предлагают лучшую производительность за доллар, а не абсолютную производительность. Как это измеряется, неясно, но, вероятно, это будет включать эксплуатационные расходы всего сервера, а энергопотребление ЦП может быть существенным фактором. [79] Серверы по состоянию на 2009–2010 годы состояли из изготовленных на заказ систем с открытым верхом, содержащих два процессора (каждый с несколькими ядрами [80] ), значительный объем оперативной памяти, распределенной по 8 слотам DIMM, в которых размещались модули DIMM двойной высоты, и по крайней мере два жестких диска SATA, подключенных через нестандартный блок питания размера ATX. [81] Серверы были с открытым верхом, чтобы в стойку можно было вставить больше серверов. Согласно CNET и книге Джона Хеннесси , каждый сервер имел новую 12-вольтовую батарею для снижения затрат и повышения энергоэффективности. [80] [82]

По данным Google, электрическая мощность их глобального центра обработки данных колеблется от 500 до 681 мегаватт . [83] [84] Совокупная вычислительная мощность этих серверов могла достигать от 20 до 100 петафлопс в 2008 году. [85]

Топология сети

Подробная информация о всемирных частных сетях Google недоступна для общественности, но публикации Google [86] [87] ссылаются на отчет «Atlas Top 10», в котором Google занимает третье место среди крупнейших интернет-провайдеров после Level 3 .

Для того чтобы управлять такой большой сетью с прямыми подключениями к максимально возможному количеству интернет-провайдеров по минимально возможной цене, Google придерживается очень открытой политики пиринга . [88]

На этом сайте мы видим, что доступ к сети Google возможен из 67 публичных точек обмена и 69 различных мест по всему миру. По состоянию на май 2012 года у Google было 882 Гбит/с публичного подключения (не считая частных пиринговых соглашений, которые Google имеет с крупнейшими интернет-провайдерами). Эта публичная сеть используется для распространения контента среди пользователей Google, а также для сканирования интернета с целью создания своих поисковых индексов. Частная сторона сети является секретом, но недавнее раскрытие информации от Google [89] указывает на то, что они используют специально изготовленные коммутаторы-маршрутизаторы с высоким радиусом (с емкостью 128 × 10 портов Gigabit Ethernet ) для глобальной сети . Запустив не менее двух маршрутизаторов на центр обработки данных (для избыточности), мы можем сделать вывод, что сеть Google масштабируется в диапазоне терабит в секунду (с двумя полностью загруженными маршрутизаторами двухсекционная пропускная способность составляет 1280 Гбит/с).

Эти специальные коммутаторы-маршрутизаторы подключаются к устройствам DWDM для соединения центров обработки данных и точек присутствия (PoP) через темное оптоволокно .

С точки зрения центра обработки данных сеть начинается на уровне стойки, где 19-дюймовые стойки изготавливаются на заказ и содержат от 40 до 80 серверов (от 20 до 40 серверов 1 U с каждой стороны, в то время как новые серверы представляют собой системы для монтажа в стойку 2U. [90] Каждая стойка имеет коммутатор Ethernet ). Серверы подключаются через канал Ethernet 1 Гбит/с к верхнему коммутатору стойки (TOR). Затем коммутаторы TOR подключаются к гигабитному кластерному коммутатору с помощью нескольких гигабитных или десятигигабитных восходящих соединений. [91] Сами кластерные коммутаторы соединены между собой и образуют структуру межсоединений центра обработки данных (скорее всего, с использованием конструкции «стрекоза», а не классической компоновки «бабочка» или «сплющенная бабочка» [92] ).

С точки зрения эксплуатации, когда клиентский компьютер пытается подключиться к Google, несколько DNS-серверов преобразуются www.google.comв несколько IP-адресов с помощью политики Round Robin . Более того, это действует как первый уровень балансировки нагрузки и направляет клиента на разные кластеры Google. Кластер Google имеет тысячи серверов , и как только клиент подключается к серверу, выполняется дополнительная балансировка нагрузки для отправки запросов на наименее загруженный веб-сервер. Это делает Google одной из крупнейших и самых сложных сетей доставки контента . [93]

Google имеет множество центров обработки данных, разбросанных по всему миру. По крайней мере 12 значительных установок центров обработки данных Google расположены в Соединенных Штатах. Крупнейшие известные центры расположены в Даллесе, штат Орегон ; Атланте, штат Джорджия ; Рестоне, штат Вирджиния ; Ленуаре, Северная Каролина ; и Монкс-Корнере, Южная Каролина . [94] В Европе крупнейшие известные центры находятся в Эмсхавене и Гронингене в Нидерландах и Монсе , Бельгия . [94] Центр обработки данных Google Oceania расположен в Сиднее , Австралия . [95]

Топология сети центра обработки данных

Для поддержки отказоустойчивости , увеличения масштаба центров обработки данных и размещения коммутаторов с низким радиусом счисления Google в прошлом принимала различные модифицированные топологии Clos . [96]

Проект 02

Центр обработки данных Google в Даллесе, штат Орегон

Один из крупнейших центров обработки данных Google расположен в городе Даллес, штат Орегон , на реке Колумбия , примерно в 80 милях (129 км) от Портленда . Комплекс под кодовым названием «Проект 02» был построен в 2006 году и имеет размер примерно с два поля для американского футбола , с градирнями высотой в четыре этажа. [97] [98] Место было выбрано для использования недорогой гидроэлектроэнергии и для подключения к большому избытку оптоволоконного кабеля в регионе , остатка бума доткомов . Проект участка появился в 2008 году. [ 99]

Бумажная фабрика «Сумма»

В феврале 2009 года Stora Enso объявила о продаже бумажной фабрики Summa в Хамине , Финляндия, компании Google за 40 миллионов евро. [100] [101] Google инвестировала 200 миллионов евро в строительство центра обработки данных на этом участке и объявила о дополнительных инвестициях в размере 150 миллионов евро в 2012 году. [102] [103] Google выбрала это место из-за доступности и близости возобновляемых источников энергии. [104]

Плавающие центры обработки данных

В 2013 году пресса раскрыла существование плавучих центров обработки данных Google вдоль побережья штатов Калифорния ( здание 3 Treasure Island ) и Мэн. Проект разработки держался в строгой секретности. Центры обработки данных имеют длину 250 футов, ширину 72 фута, глубину 16 футов. Патент на технологию охлаждения центра обработки данных в океане был куплен Google в 2009 году [105] [106] (вместе с патентом на центр обработки данных на основе волн в 2008 году [107] [108] ). Вскоре после этого Google заявила, что две огромные и тайно построенные инфраструктуры были просто «интерактивными учебными центрами, [...] пространством, где люди могут узнать о новых технологиях». [109]

Google остановил работу над баржами в конце 2013 года и начал распродавать баржи в 2014 году. [110] [111]

Программное обеспечение

Большая часть программного стека , который Google использует на своих серверах, была разработана внутри компании. [112] По словам известного бывшего сотрудника Google в 2006 году, C++ , Java , Python и (совсем недавно) Go имеют преимущество перед другими языками программирования. [113] Например, бэкенд Gmail написан на Java, а бэкенд Google Search написан на C++. [114] Google признал, что Python играл важную роль с самого начала и продолжает играть ее по мере роста и развития системы. [115]

Программное обеспечение, на котором работает инфраструктура Google, включает: [116]

Google разработал несколько абстракций, которые он использует для хранения большинства своих данных: [124]

Практики разработки программного обеспечения

Большинство операций только для чтения. Когда требуется обновление, запросы перенаправляются на другие серверы, чтобы упростить проблемы согласованности. Запросы делятся на подзапросы, где эти подзапросы могут быть отправлены в разные каналы параллельно , тем самым сокращая время задержки. [90]

Чтобы уменьшить последствия неизбежного отказа оборудования , программное обеспечение разрабатывается как отказоустойчивое . Таким образом, когда система выходит из строя, данные остаются доступными на других серверах, что повышает надежность.

Поисковая инфраструктура

Центр обработки данных Google в Даллесе, штат Орегон

Индекс

Как и большинство поисковых систем, Google индексирует документы, создавая структуру данных, известную как инвертированный индекс . Такой индекс получает список документов по слову запроса. Индекс очень большой из-за количества документов, хранящихся на серверах. [93]

Индекс разделен идентификаторами документов на множество частей, называемых шардами . Каждый шард реплицируется на несколько серверов. Первоначально индекс обслуживался с жестких дисков , как это делается в традиционных системах поиска информации (IR). Google справился с растущим объемом запросов, увеличив количество реплик каждого шарда и, таким образом, увеличив количество серверов. Вскоре они обнаружили, что у них достаточно серверов, чтобы хранить копию всего индекса в основной памяти (хотя с низкой репликацией или без репликации вообще), и в начале 2001 года Google перешел на систему индексации в памяти . Этот переход «радикально изменил многие параметры дизайна» их поисковой системы и позволил значительно увеличить пропускную способность и значительно сократить задержку запросов. [129]

В июне 2010 года Google выпустила систему индексирования и обслуживания следующего поколения под названием «Caffeine», которая может непрерывно сканировать и обновлять индекс поиска. Ранее Google обновлял свой индекс поиска партиями, используя серию заданий MapReduce . Индекс был разделен на несколько слоев, некоторые из которых обновлялись быстрее других, а основной слой не обновлялся в течение двух недель. С Caffeine весь индекс обновляется постепенно на постоянной основе. Позже Google представил распределенную систему обработки данных под названием «Percolator» [130], которая, как говорят, является основой системы индексирования Caffeine. [122] [131]

Типы серверов

Инфраструктура серверов Google делится на несколько типов, каждый из которых предназначен для разных целей: [90] [93] [132] [133] [134]

Безопасность

В октябре 2013 года The Washington Post сообщила, что Агентство национальной безопасности США перехватывало коммуникации между центрами обработки данных Google в рамках программы под названием MUSCULAR . [135] [136] Эта прослушка стала возможной, поскольку в то время Google не шифровал данные, передаваемые внутри своей собственной сети. [137] Это было исправлено, когда Google начал шифровать данные, передаваемые между центрами обработки данных в 2013 году. [138]

Воздействие на окружающую среду

Центр обработки данных Google в округе Мейес, штат Оклахома, в промышленном парке MidAmerica

Самый эффективный центр обработки данных Google работает при температуре 35 °C (95 °F), используя только охлаждение свежим воздухом и не требуя электрического кондиционирования воздуха. [139]

В декабре 2016 года Google объявила, что начиная с 2017 года она будет закупать достаточно возобновляемой энергии, чтобы покрыть 100% энергопотребления своих центров обработки данных и офисов. Это обязательство сделает Google «крупнейшим в мире корпоративным покупателем возобновляемой энергии с обязательствами, достигающими 2,6 гигаватт (2600 мегаватт) ветровой и солнечной энергии». [140] [141] [142]

Ссылки

  1. ^ «Сколько серверов у Google?». Data Center Knowledge . 16 марта 2017 г. Получено 20 сентября 2018 г.
  2. ^ "Google data centers, locations" . Получено 21 июля 2014 г. .
  3. ^ "ISO/IEC 27001 - Соответствие". Google Cloud . Получено 11 июля 2023 г.
  4. ^ ab Report, Times-Mirror Staff (19 июня 2019 г.). «Google „ограничивает“ инвестиции в размере 600 млн долларов в округе Лаудон». LoudounTimes.com . Получено 12 февраля 2021 г. .
  5. ^ ab "Google планирует 2 центра обработки данных в Лоудоуне". LoudounNow.com . 29 ноября 2017 г. Получено 12 апреля 2023 г.
  6. ↑ Арельяно (CIPER), Альберто (25 мая 2020 г.). «Зоны освещения, которые позволяют оценить мегапроект Google в Cerrillos». CIPER Чили (на испанском языке) . Проверено 10 июля 2023 г.
  7. ^ "Google установил новый центр обработки данных в Чили". diarioeldia.cl (на испанском языке). Архивировано из оригинала 22 сентября 2021 г. Получено 28 сентября 2019 г.
  8. ^ «Новый регион Google Cloud в Сантьяго, все потенциальные возможности сейчас больше всего» . Google . 1 декабря 2021 года . Проверено 10 июля 2023 г.
  9. ^ "Регион Google Cloud теперь доступен в Колумбусе, штат Огайо". Блог Google Cloud . Получено 10 июля 2023 г.
  10. ^ "Намасте, Индия. Наш новый облачный регион в Делийском национальном столичном регионе уже запущен". cloudonair.withgoogle.com .
  11. ^ "Новый регион Google Cloud теперь открыт в Катаре". Блог Google Cloud . Получено 10 июля 2023 г.
  12. ^ "Дублин, Ирландия – Центры обработки данных – Google". www.google.com . Получено 2 апреля 2019 г. .
  13. ^ "ПРОЕКТ В ХАНАУ: RECHENZENTRUM FÜR GOOGLE ENTWICKELT" . НДЦ-ГАРБЕ . 2 сентября 2021 г.
  14. ^ "Google Cloud инвестирует в Германию с новой инфраструктурой и устойчивой энергетикой". Блог Google Cloud . Получено 10 июля 2023 г.
  15. ^ "Breaking ground for Google's first data center in Denmark". Google . 20 ноября 2018 г. . Получено 10 июля 2023 г. .
  16. ^ "Google получает зеленый свет для своего шестого центра обработки данных в Хамине, Финляндия". 11 сентября 2020 г.
  17. ^ «Инвестирование в инфраструктуру Google, инвестирование в Неваду». Блог Google Cloud . Получено 10 июля 2023 г.
  18. ^ Торрес-Кортес, Рикардо (16 сентября 2020 г.). «Google инвестирует дополнительно 600 млн долларов в центр обработки данных в Хендерсоне – газета Las Vegas Sun». lasvegassun.com . Получено 12 февраля 2021 г. .«Благодаря последнему заявлению Google доведет свои общие инвестиции в город Хендерсон до 1,2 млрд долларов», — заявила мэр Дебра Марч в пресс-релизе.
  19. ^ Baxtel. "Google Henderson NV Data Center". baxtel.com . Получено 12 февраля 2021 г. .
  20. ^ "Скоро: регион Гонконга GCP". Блог Google Cloud . Получено 10 июля 2023 г.
  21. ^ "Расширяем наше присутствие в Азиатско-Тихоокеанском регионе: новые регионы GCP в Гонконге и Джакарте". Блог Google Cloud . Получено 10 июля 2023 г.
  22. ^ "Новый регион Google Cloud в Джакарте уже открыт". Блог Google Cloud . Получено 15 сентября 2021 г.
  23. ^ "Google Cloud Platform Tokyo region now open for business". Блог Google Cloud . Получено 10 июля 2023 г.
  24. ^ "Google - Сингапур". www.streetdirectory.com . Получено 11 июля 2023 г. .
  25. ^ "Google Cloud Platform теперь открыта в Лондоне". Блог Google Cloud . Получено 10 июля 2023 г.
  26. ^ "Новый регион Google Cloud в Мадриде, Испания, уже открыт". Блог Google Cloud . Получено 10 июля 2023 г.
  27. ^ "Регион Google Cloud в Мельбурне теперь открыт". Блог Google Cloud . Получено 10 июля 2023 г.
  28. ^ "Добро пожаловать". Agriport A7 (на голландском) . Получено 10 июля 2023 г.
  29. ^ "Google потратит 1,1 млрд долларов на новые центры обработки данных в Нидерландах". Data Center Knowledge . 24 июня 2019 г.
  30. ^ "Регион Google Cloud теперь доступен в Далласе, штат Техас". Блог Google Cloud . Получено 10 июля 2023 г.
  31. ^ «Огромный центр обработки данных Google стоимостью 600 млн долларов обретает форму в округе Эллис, поскольку технологический гигант расширяет свое присутствие в Техасе». Dallas News . 14 июня 2019 г. Получено 12 февраля 2021 г.
  32. ^ "Открыт новый регион Google Cloud в Милане, Италия". Блог Google Cloud . Получено 10 июля 2023 г.
  33. ^ «Проект по расширению деятельности Google в Квебеке — Будущий центр обработки данных компьютеров в Богарнуа». www.quebec.ca (на французском) . Получено 10 мая 2021 г.
  34. ^ "GCP прибывает в Канаду с запуском региона Монреаль". Блог Google Cloud . Получено 10 июля 2023 г.
  35. ^ "Продолжающиеся обязательства Google в Квебеке". Блог Google - Новости компании . Получено 12 февраля 2021 г.
  36. ^ Стайвер, Дэйв (1 ноября 2017 г.). «GCP прибывает в Индию с запуском региона Мумбаи». Блог Google Cloud . Получено 30 июля 2019 г.
  37. ^ Уильямс, Марк. «Google присоединяется к высокотехнологичной толпе Нью-Олбани с центром обработки данных стоимостью 600 миллионов долларов». The Columbus Dispatch . Архивировано из оригинала 30 декабря 2020 г. Получено 12 февраля 2021 г.
  38. ^ "Нью-Олбани, Огайо – Центры обработки данных – Google". Центры обработки данных Google . Получено 12 февраля 2021 г.
  39. ^ "Google Cloud запускает новый регион Осака для поддержки растущей клиентской базы в Японии". Блог Google Cloud . Получено 10 июля 2023 г.
  40. ^ "GCP прибывает в Южную Америку с запуском региона Сан-Паулу!". Блог Google Cloud . Получено 10 июля 2023 г.
  41. ^ "Google подтверждает, что стоит за проектом центра обработки данных Papillion стоимостью 600 млн долларов". www.datacenterdynamics.com . Получено 12 февраля 2021 г. .
  42. ^ "Papillion, Nebraska – Data Centers – Google". Google Data Centers . Получено 12 февраля 2021 г.
  43. ^ "Регион Google Cloud в Париже, Франция, теперь открыт". Блог Google Cloud . Получено 10 июля 2023 г.
  44. ^ Dawn-Hiscox, Tanwen (20 февраля 2018 г.). «Google потратит млн на расширение центра обработки данных Pryor». Data Centre Dynamics . Архивировано из оригинала 23 апреля 2019 г. Получено 23 апреля 2019 г.
  45. ^ "Google принял решение инвертировать миллионы долларов в центр данных в Чили" . Newtechmag.net (на испанском языке). 28 сентября 2018 года. Архивировано из оригинала 30 марта 2019 года . Проверено 8 декабря 2018 г.
  46. ^ Tanwen Dawn-Hiscox (18 апреля 2017 г.). «Google планирует построить огромный центр обработки данных в Неваде». Datacenterdynamics.com . Получено 8 декабря 2018 г. .
  47. ^ Джейсон Идальго (16 ноября 2018 г.). «Невада одобряет центр обработки данных Google M недалеко от Лас-Вегаса, M в налоговых льготах». Rgj.com . Получено 8 декабря 2018 г. .
  48. ^ Джейсон Идальго (16 сентября 2020 г.). «Google инвестирует 600 миллионов долларов в центр обработки данных около Рино, получает налоговые льготы». Reno Gazette Journal . Получено 26 октября 2020 г. С нашим новым центром обработки данных в округе Стори и нашими расширенными инвестициями в нашу площадку в Хендерсоне у Google будет два объекта в Неваде, в результате чего наши общие инвестиции превысят 1,88 миллиарда долларов.
  49. ^ "Регион Google Cloud в Солт-Лейк-Сити теперь открыт". Блог Google Cloud . Получено 10 июля 2023 г.
  50. ^ "Новый регион GCP в Сеуле". Блог Google Cloud . Получено 10 июля 2023 г.
  51. ^ "Google Cloud расширяется в Австралию с новым регионом Сидней". Блог Google Cloud . Получено 10 июля 2023 г.
  52. ^ "Google запускает регион GCP в Тель-Авиве, Израиль". datacenterdynamics.com .
  53. ^ "Регион Google Cloud в Тель-Авиве, Израиль, теперь открыт". Блог Google Cloud . Получено 10 июля 2023 г.
  54. ^ "Google Cloud Toronto region now open". Блог Google Cloud . Получено 10 июля 2023 г.
  55. ^ "Открыт новый регион Google Cloud в Турине, Италия". Блог Google Cloud . Получено 10 июля 2023 г.
  56. ^ "Google построит облачные центры обработки данных в Польше". Data Center Knowledge . 27 сентября 2019 г.
  57. ^ "Google начинает строительство центра обработки данных M Alabama". Сделано в Алабаме . 9 апреля 2018 г. Получено 19 августа 2019 г.
  58. ^ "Die Schweizer Google Cloud Platform zieht zu Green в Аргау" . Swiss IT Magazine (на немецком языке) . Проверено 10 июля 2023 г.
  59. ^ <<Ссылка на веб-сайт|url=https://www.datacenterknowledge.com/google-alphabet/google-building-cloud-data-centers-close-swiss-banks%7Ctitle=Google [ постоянная нерабочая ссылка ] Строительство облачных центров обработки данных рядом со швейцарскими банками||
  60. ^ abcde "Представляем 5 новых регионов Google Cloud". Блог Google Cloud . Получено 10 июля 2023 г.
  61. ^ "Google Plant ein großes Rechenzentrum südlich des Flughafens BER" ​​. Дер Шпигель (на немецком языке). 30 сентября 2022 г. ISSN  2195-1349 . Проверено 10 июля 2023 г.
  62. ^ "Google Cloud инвестирует в Германию с новой инфраструктурой и устойчивой энергетикой". Блог Google Cloud . Получено 10 июля 2023 г.
  63. ^ "Регион Google Cloud Берлин-Бранденбург теперь открыт". Блог Google Cloud . Получено 3 февраля 2024 г.
  64. ^ "Обновления региона Google Cloud Platform". Блог Google Cloud . Получено 10 июля 2023 г.
  65. ^ "Последний шаг филиала Google сигнализирует о выборе KC для центра обработки данных стоимостью 600 млн долларов". www.bizjournals.com . Получено 12 февраля 2021 г. .
  66. ^ "Bringing a new Google Cloud region to Kuwait". Блог Google Cloud . Получено 10 июля 2023 г.
  67. ^ abc "Объявление о новых регионах Google Cloud в Азиатско-Тихоокеанском регионе". Блог Google Cloud . Получено 10 июля 2023 г.
  68. ^ "Анонс нового региона Google Cloud в Мексике". Блог Google Cloud . Получено 10 июля 2023 г.
  69. ^ "Google покупает землю для нового центра обработки данных в Тайнане". Taipei Times . 12 сентября 2019 г. Получено 20 декабря 2019 г.
  70. ^ "Google создаст центр обработки данных в Тайнане". Focus Taiwan . 11 сентября 2019 г. Получено 20 декабря 2019 г.
  71. ^ "Google создаст второй центр обработки данных на Тайване". Новости Тайваня . 11 сентября 2019 г. Получено 20 декабря 2019 г.
  72. ^ "Google подтверждает планы построить третий центр обработки данных на Тайване". Новости Тайваня . 3 сентября 2020 г. Получено 3 сентября 2020 г.
  73. ^ «Наша работа по построению более устойчивого будущего в Аризоне». Google . 14 марта 2024 г. . Получено 5 октября 2024 г. .
  74. ^ «Наши инвестиции в размере 1 миллиарда долларов в новый центр обработки данных в Великобритании». Google . 18 января 2024 г. . Получено 19 января 2024 г. .
  75. ^ "Новый центр обработки данных в Латинской Америке". Google . 29 августа 2024 г. . Получено 5 октября 2024 г. .
  76. ^ «Google и фундаментальная пьедра (comenzó la construcción del centro de datos en Parque de las Ciencias)» (на испанском языке). 30 августа 2024 г. . Проверено 5 октября 2024 г.
  77. ^ ""Google Stanford Hardware"". Архивировано из оригинала 9 февраля 1999 года . Получено 23 марта 2017 года .{{cite web}}: CS1 maint: бот: исходный статус URL неизвестен ( ссылка ). Стэнфордский университет (предоставлено Internet Archive ). Получено 10 июля 2006 г.
  78. ^ Мерлин, Марк (2013). «Исследование случая: обновление в реальном времени многих тысяч серверов со старого дистрибутива Red Hat до более нового на базе Debian, выпущенного 10 лет назад» (PDF) . Linux Foundation . Получено 9 июня 2017 г.
  79. ^ Тауфик Джеласси; Альбрехт Эндерс (2004). "Пример 16 — Google". Стратегии для электронного бизнеса . Pearson Education. стр. 424. ISBN 978-0-273-68840-2.
  80. ^ ab Computer Architecture, Fifth Edition: A Quantitative Approach, ISBN 978-0123838728 ; Глава шесть; 6.7 «Компьютер масштаба Google Warehouse», страница 471 «Проектирование материнских плат, которым требуется только один источник питания 12 В, чтобы функция ИБП могла обеспечиваться стандартными батареями, связанными с каждым сервером» 
  81. ^ Секретные источники питания Google на YouTube
  82. ↑ Google раскрывает некогда секретный сервер, 1 апреля 2009 г.
  83. ^ "Устойчивое развитие Google". Устойчивое развитие Google .
  84. ^ "Analytics Press Growth in data center electrical use 2005 to 2010". Архивировано из оригинала 11 января 2012 г. Получено 22 мая 2012 г.
  85. ^ Google превосходит суперкомпьютерное сообщество, незаметно? Архивировано 5 декабря 2008 г., на Wayback Machine , 20 мая 2008 г.
  86. ^ Лам, Седрик Ф.; Лю, Хонг; Колей, Бикаш; Чжао, Сяосюэ; Камалов, Валей; Джилл, Виджай (2010), «Технологии волоконно-оптической связи: что необходимо для работы сетей центров обработки данных», Исследования, т. 48
  87. ^ Лэм, Седрик Ф. (2010), Взгляд в будущее FTTH — технологии и архитектуры (PDF) , стр. 4
  88. ^ "kumara ASN15169", Пиринговая база данных
  89. ^ "Urs Holzle", Спикеры, Open Network Summit, архивировано из оригинала 10 мая 2012 г. , извлечено 22 мая 2012 г.
  90. ^ abc Поиск в Интернете для планеты: Архитектура кластера Google (Луис Андре Баррозу, Джеффри Дин, Урс Хёльцле)
  91. ^ "Компьютеры складского размера" (PDF) . Архивировано из оригинала (PDF) 19 июня 2012 г. . Получено 22 мая 2012 г. .
  92. ^ Денис Абт Высокопроизводительные сети центров обработки данных: архитектуры, алгоритмы и возможности
  93. ^ abc Fiach Reid (2004). "Исследование случая: поисковая система Google". Сетевое программирование в .NET . Digital Press. стр. 251–253. ISBN 978-1-55558-315-6.
  94. ^ ab Rich Miller (27 марта 2008 г.). "Часто задаваемые вопросы о центре данных Google". Data Center Knowledge . Архивировано из оригинала 13 марта 2009 г. Получено 15 марта 2009 г.
  95. ↑ Бретт Винтерфорд (5 марта 2010 г.). «Найдено: секретная сеть данных Google Australia». ITNews . Получено 20 марта 2010 г.
  96. ^ Сингх, Арджун; Онг, Джун; Агарвал, Амит; Андерсон, Глен; Армистед, Эшби; Бэннон, Рой; Бовинг, Себ; Десаи, Гаурав; Фелдерман, Боб; Джермано, Поли; Канагала, Ананд (2015). «Восход Юпитера: десятилетие топологий Clos и централизованного управления в сети центров обработки данных Google». Труды конференции ACM 2015 года по специальной группе по передаче данных . стр. 183–197. doi : 10.1145/2785956.2787508 . ISBN 978-1-4503-3542-3. S2CID  2817692.
  97. ↑ Маркофф, Джон; Ханселл, Сол. «Скрываясь на виду, Google стремится к большей власти». New York Times . 14 июня 2006 г. Получено 15 октября 2008 г.
  98. ^ Google "The Dalles, Oregon Data Center" Получено 3 января 2011 г.
  99. ^ Стрэнд, Джинджер. "Google Data Center" Harper's Magazine . Март 2008. Получено 15 октября 2008. Архивировано 30 августа 2012, на Wayback Machine
  100. ^ "Stora Enso продает помещения Summa Mill в Финляндии за миллион". Stora Enso . 12 февраля 2009 г. Архивировано из оригинала 13 апреля 2009 г. Получено 2 декабря 2009 г.
  101. ^ [ неработающая ссылка ] «Stooora yllätys: Google ostaa Summan tehtaan». Кауппалехти (на финском языке). Хельсинки. 12 февраля 2009 года. Архивировано из оригинала 14 февраля 2009 года . Проверено 12 февраля 2009 г.
  102. ^ "Google Investmenti 200 миллионов евро в Хаминаане" . Талуссаномат (на финском языке). Хельсинки. 4 февраля 2009 года . Проверено 15 марта 2009 г.
  103. ^ "Хамина, Финляндия" . Получено 23 апреля 2018 г.
  104. ^ Финляндия – лучший выбор для размещения вашего центра обработки данных облачных вычислений. Архивировано 6 июля 2013 г. на Wayback Machine. Доступно 4 августа 2010 г.
  105. ↑ Рори Кэрролл (30 октября 2013 г.). «Самый охраняемый секрет Google: плавучие центры обработки данных у берегов США». Theguardian.com . Получено 8 декабря 2018 г. .
  106. ^ Рич Миллер (29 апреля 2009 г.). «Google получает патент на баржи для центров обработки данных». Datacenterknowledge.com . Получено 8 декабря 2018 г. .
  107. ^ Мартин Ламоника (8 сентября 2008 г.). «Google подает патент на плавучий центр обработки данных, работающий на энергии волн». Cnet.com . Получено 8 декабря 2018 г.
  108. ^ "Появилась заявка на патент на центр обработки данных на судне от Google". Datacenterdynamics.com . 7 сентября 2008 г. Получено 8 декабря 2018 г.
  109. ^ «Загадка баржи Google раскрыта: они предназначены для «интерактивных учебных центров». Theguardian.com . 6 ноября 2013 г. Получено 8 декабря 2018 г.
  110. ↑ Брэндон Бейли (1 августа 2014 г.). «Google подтверждает продажу загадочной баржи». San Jose Mercury News . Получено 7 апреля 2015 г.
  111. ^ Крис Морран (7 ноября 2014 г.). «Что случилось с этими баржами Google?». Consumerist . Получено 15 января 2017 г. .
  112. ^ Марк Левин (2005). Введение в поисковые системы и веб-навигацию . Pearson Education. стр. 73. ISBN 978-0-321-30677-7.
  113. ^ "Обновление статуса Python". Artima. 10 января 2006 г. Получено 17 февраля 2012 г.
  114. ^ "Warning". Panela . Blog-city. Архивировано из оригинала 28 декабря 2011 г. Получено 17 февраля 2012 г.
  115. ^ "Цитаты о Python". Python . Получено 17 февраля 2012 г. .
  116. ^ "Архитектура Google". Высокая масштабируемость. 22 ноября 2008 г. Получено 17 февраля 2012 г.
  117. ^ abc Файкс, Эндрю (29 июля 2010 г.), «Архитектура хранения и проблемы», TechTalk (PDF)[ постоянная мертвая ссылка ]
  118. ^ "Colossus: наследник Google File System (GFS)". SysTutorials. 29 ноября 2012 г. Получено 10 мая 2016 г.
  119. ^ Дин, Джеффри «Джефф» (2009), «Проектирование, уроки и советы по созданию крупных распределенных систем», Лэдис (основной доклад) , Корнелл
  120. ^ Шут, Джеффри «Джефф»; Оанча, Мирча; Эллнер, Стефан; Хэнди, Бенджамин «Бен»; Роллинз, Эрик; Сэмвел, Барт; Вингралек, Радек; Уипки, Чад; Чэнь, Синь; Джегерленер, Бит; Литтлфилд, Кайл; Тонг, Феникс (2012), «F1 — отказоустойчивая распределенная СУРБД, поддерживающая рекламный бизнес Google», Исследования (презентация) , Sigmod{{citation}}: CS1 maint: отсутствует местоположение издателя ( ссылка )
  121. ^ "Выпускники Google запускают новую поисковую систему". Los Angeles Times . 28 июля 2008 г. Получено 15 сентября 2021 г.
  122. ^ ab The Register. Google Caffeine потрясает всемирную поисковую машину
  123. ^ "Официальная заметка о выпуске Google" . Получено 28 сентября 2013 г. .
  124. ^ ab "Google разрабатывает систему хранения кофеина | TechWeekEurope UK". Eweekeurope.co.uk. 18 августа 2009 г. Архивировано из оригинала 15 ноября 2011 г. Получено 17 февраля 2012 г.
  125. ^ "Руководство разработчика – Протокольные буферы – Google Code" . Получено 17 февраля 2012 г.
  126. ^ http://static.googleusercontent.com/media/research.google.com/en/us/archive/bigtable-osdi06.pdf [ пустой URL-адрес PDF ]
  127. ^ windley on (24 июня 2008 г.). "Технометрия Фила Уиндли | Скорость 08: Хранение в масштабе". Windley.com . Получено 17 февраля 2012 г. .
  128. ^ "Ограничение сообщений – Буферы протоколов | Группы Google" . Получено 17 февраля 2012 г. .
  129. ^ "Основной доклад Джеффа Дина на WSDM 2009" (PDF) . Получено 17 февраля 2012 г. .
  130. ^ Дэниел Пэн, Фрэнк Дабек. (2010). Крупномасштабная инкрементальная обработка с использованием распределенных транзакций и уведомлений. Труды 9-го симпозиума USENIX по проектированию и внедрению операционных систем.
  131. ^ The Register. Google Percolator – глобальный поисковый толчок без MapReduce падение
  132. ^ Чандлер Эванс (2008). "Платформа Google". Будущее Google Earth . Madison Publishing Company. стр. 299. ISBN 978-1-4196-8903-1.
  133. ^ Крис Шерман (2005). «Как работает Google». Google Power. McGraw-Hill Professional. стр. 10–11. ISBN 978-0-07-225787-8.
  134. ^ Майкл Миллер (2007). «Как работает Google». Googlepedia. Pearson Technology Group. стр. 17–18. ISBN 978-0-7897-3639-0.
  135. ↑ Gellman, Barton; Soltani, Ashkan (30 октября 2013 г.). «АНБ внедряется в связи с центрами обработки данных Yahoo и Google по всему миру, говорится в документах Сноудена». The Washington Post . Получено 1 ноября 2013 г.
  136. ↑ Savage, Charlie; Miller, Claire Cain; Perlroth, Nicole (30 октября 2013 г.). «АНБ заявило о намерении прослушивать Google и Yahoo за рубежом». The New York Times . Получено 9 марта 2017 г.
  137. ↑ Галлахер, Шон (31 октября 2013 г.). «Как MUSCULAR из АНБ прослушивал частные сети Google и Yahoo». Ars Technica . Condé Nast . Получено 9 марта 2017 г.
  138. ↑ Миллер, Клэр Кейн (31 октября 2013 г.). «Разгневанные надзором США, технологические гиганты усиливают оборону». The New York Times . Получено 9 марта 2017 г.
  139. ^ Хамфрис, Мэтью (27 марта 2012 г.). «Самый эффективный центр обработки данных Google работает при температуре 95 градусов». geek.com . Архивировано из оригинала 13 июня 2016 г. . Получено 13 июня 2016 г. .
  140. ^ Hölzle, Urs (6 декабря 2016 г.). «Мы собираемся достичь 100% возобновляемой энергии — и это только начало». Ключевое слово Google Blog . Получено 8 декабря 2016 г.
  141. ^ Статт, Ник (6 декабря 2016 г.). «Google только что одержал большую победу в борьбе с изменением климата». The Verge . Vox Media . Получено 8 декабря 2016 г. .
  142. ^ Этерингтон, Даррелл (7 декабря 2016 г.). «Google заявляет, что к 2017 году перейдет на 100% возобновляемую энергию». TechCrunch . AOL . Получено 8 декабря 2016 г. .

Дальнейшее чтение

Внешние ссылки