Google потребляет 184 петабайта в месяц / Google / Хабрахабр

Google потребляет 184 петабайта в месяц

Компания NetCompetition.org провела первое в мире исследование, сколько трафика расходует компания Google и сколько она за него платит (27-страничный PDF). Результаты поразительные.

Оказывается, одна-единственная компания потребляет 16,5% всего американского трафика в коммерческом потребительском сегменте по итогам 2008 года (если читать легальный трафик, то доля Google ещё выше). Более того, потребности Google растут огромными темпами. В наступающем году, по прогнозу, этот процент увеличится до 25%, а в 2010 году — аж до 37%!

Всего же американские потребители ежемесячно генерируют 1,1 эксабайта трафика (статистика Cisco), из которых 718 петабайт — это легальный трафик (остальное — пиратский контент).

+58

5 декабря 2008, 14:42

alizar

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.

комментарии (69)

+17

0n1y_0ne 5 декабря 2008, 14:54 #

… А к 2020 году Google захватит весь трафик мира!

Morozhko 5 декабря 2008, 23:09 # ↑

Сам себе Google будет запросы слать, и письма писать сам себе будет, будет фильтровать эти письма своими спам фильтрами, вставлять в письма контекстную рекламу, разговаривать в Googletalk…

Morozhko 5 декабря 2008, 23:11 # ↑

а мы будем на всё это смотреть… Web 3.0

–5

Smasher 5 декабря 2008, 14:57 #

Голова от цифр закружилась :)
Наверное больше всего трафика генерирует GMail, так остальные сервисы Гугля с тяжеловесными файлами не работают.

DileSoft 5 декабря 2008, 15:00 # ↑

А жаль, открыли бы Google.Disc. :)

–4

Smasher 5 декабря 2008, 15:03 # ↑

Пора уж выпускать книжку «мифы и Легенды сервисов Google». Google Disk займет там достойное место :)

НЛО прилетело и опубликовало эту надпись здесь

–2

Smasher 5 декабря 2008, 15:13 # ↑

Ах… да. Ваша правда. Забыл ЮТьюб. Еще и Пикасу в принципе можно добавить.

khim 5 декабря 2008, 15:40 # ↑

Пикасу — копейки. Я боюсь что количество картинок и видеороликов сравнимо (так как PicasaWeb — не самый популярный хостинг картинок, а вот YouTube — самый популярный хостинг видео), но по весу — отличия безумные. Плюс картинки браузер кеширует, видео — нет.

dioneo 5 декабря 2008, 16:24 # ↑

несущественно: На самом деле flash-видео с YouTube разумеется также сохраняется в кеше браузера.

iRobot 5 декабря 2008, 20:43 # ↑

а как же блокнот?

Mr_Floppy 5 декабря 2008, 15:12 # ↑

Да какой GMail? YouTube! Да, к тому же миллионы страниц, которые индексирует гугл, тоже в сумме немало весят.

Joka 5 декабря 2008, 16:45 # ↑

согласно официальному отчету гугла он обрабатывает до миллиарда страниц в сутки :)

PART 5 декабря 2008, 17:42 # ↑

По идее, больше всего трафика должен генерировать Googlebot.

kostitsyn 5 декабря 2008, 18:49 # ↑

Earth, Maps?

andreyurich 6 декабря 2008, 01:30 # ↑

По идее больше всего жрет поисковик который регулярно сливает «пол интернета» :)

habralex 5 декабря 2008, 15:08 #

хорошо было бы если бы они запросили у провайдеров детализацию трафика за месяц. на бумаге…

Bondonello 5 декабря 2008, 16:22 # ↑

Google сам себе провайдер

Nikitostik 5 декабря 2008, 16:35 # ↑

не совсем так, он в том числе использует магистрали других провайдеров

+10

TiGR 5 декабря 2008, 16:57 # ↑

А потом экологи засудили бы их за это :)

UndCon 5 декабря 2008, 15:25 #

Интересно, а как они отличают легальный трафик от пиратского контента?

Smasher 5 декабря 2008, 15:42 # ↑

Трафик Р2Р-сететй по умолчанию наверное считается пиратским :)

alizar 5 декабря 2008, 15:56 # ↑

Они считают, что на 90%.

nooze 5 декабря 2008, 16:18 # ↑

Довольно оптимистично

ni4 5 декабря 2008, 16:21 #

Интересно бы посмотреть соотношение входящего/исходящего трафика гугла.

darchik 5 декабря 2008, 16:26 #

Жесть.
Зато 50% мирового траффика принадлежит торрентам. )))

nooze 5 декабря 2008, 16:33 # ↑

Ну не только торрентам, а п2п в целом

almaz 6 декабря 2008, 09:42 # ↑

уже менее 40% ;) дальше-меньше 28% ;) надеюсь они там intranet траф с внешнимы ip не считали

Mitesha 5 декабря 2008, 16:34 #

Надо гуглу самому стать своим провайдером. Делов-то.

nooze 5 декабря 2008, 16:36 # ↑

Да чего мелочиться, надо просто сделать Googlenet (с блекджеком и шлюхами) и подключать к нему пользователей

Mitesha 5 декабря 2008, 17:25 # ↑

Сделать по инвайтам и раздавать на бложеках, которые элитне

Veshij 5 декабря 2008, 16:37 #

По приблизительным оценкам, только за американский трафик Google платит своему провайдеру $344 млн в год. Кстати, в процентном выражении это всего лишь 0,8% от 44-миллиардного рынка доступа в интернет. Таким образом, для компании Google трафик обходится дешевле всех в мире.

Имхо, бред.
Все-таки гугл не мальенькая контора, которая арендует 100Мбит канал у провайдера, а порядочный трафикогенератор в мире.
Да и трафик-то суть бесплатный. Платно проложить канал, его обслуживать, присутствие на точках обмена трафиком, но, имхо, это другие порядки.

ahromenko 5 декабря 2008, 16:44 # ↑

Согласен. Google на то и Google, чтобы столько потреблять

almaz 6 декабря 2008, 11:00 # ↑

все поняли что он платит за поддержку/обеспечение каналов наружу и разруливание затыков у других

Shoom 5 декабря 2008, 16:57 #

Как-то многовато. Я против чтобы одна компания потребляла до 37% трафика в 2010.
Действительно какой-то гуглнет получается.

mordet 5 декабря 2008, 17:18 # ↑

Скажем, потребляет она лишь немногим более того, сколько пользуются этой компанией обычные люди, поэтому ничего антидемократичного в этом нет. ;-)

Shoom 5 декабря 2008, 17:38 # ↑

Ну так я и не утверждаю, что Гугл ворует трафик у других )
Как раз настораживает, что это все — законный трафик гугла.

mordet 5 декабря 2008, 19:14 # ↑

Если подумать, чего в Гугле незаконного? Контент он не генерирует, а значит, прав не нарушает. Большинство его сервисов — обработка пользовательских данных…
Лично мне сложно себе представить масштабы индексирования страниц сайтов инета. :)

Shoom 5 декабря 2008, 19:17 # ↑

Я не имел в виду что подозреваю гугл в нарушении закона. На данный момент.
Настораживают именно размеры трафика и возможности какие эти размеры дают, сконцентрировавшись в одних руках.

mordet 5 декабря 2008, 19:26 # ↑

Согласен, монополии редко бывают честными…

GaloGenuS 5 декабря 2008, 19:30 # ↑

А меня настораживают возможности сконцентрированные в руках тех лиц, которые нашей нефтью торгуют, вот там «объемы траффика»! ::))

Shoom 5 декабря 2008, 19:34 # ↑

Меня тоже ) Но тут есть небольшая разница.
Перераспределить потоки в сети значительно легче, чем перестроить пару десятков тысяч километров нефтепроводов )

atomicxp 6 декабря 2008, 01:09 # ↑

Возможности вполне очевидные, в распределённых сетевых атаках на отказ в обслуживании им не будет равных. Они наверное любой сервис смогут убить, тупо зафлудив его всяким мусором.

Shoom 6 декабря 2008, 01:24 # ↑

Мелко, слишком мелко смотрите. Ну зачем гуглу терять лицо из-за какой-то мелкой атаки? Если уж так надо будет (сомневаюсь) у них хватит денег купить через подставных лиц любой ботнет.

Возможности куда круче. Например, в разгар игры на бирже начать выкидывать ссылки на новости, освещающие события только с одной стороны или только на определенных аналитиков.
Или для жителей какой-либо страны показывать контекстную рекламу, склоняющую к определенному отношению к другой стране. Например, ищут в Венесуэле что-то про ремонт двигателя машины — а им в выдаче сплошные ссылки на соображения, что нефтью делиться надо )
Или лично для вас, например вся контекстная реклама будет рекламировать что-нибудь одно, постоянно. 90% что через неделю вы сдадитесь и это купите )
В общем, при таких возможностях — фантазировать можно бесконечно долго

–1

atomicxp 6 декабря 2008, 04:17 # ↑

>В общем, при таких возможностях — фантазировать можно бесконечно долго

Фантазировать можно долго, только я не замечаю рекламу гугла. Да и вообще, сейчас посмотрел, ни в поиске, ни в гмаиле её нет, впрочем на хабре рекламы тоже нет. В общем, рекламой меня не достать, потому что она отсутствует, ну не прелесть, бесплатный сервис без рекламы :)

>Например, в разгар игры на бирже начать выкидывать ссылки на новости, освещающие события только с одной стороны или только на определенных аналитиков.

Аналитики гуглом что-ли рынок анализируют…

>Например, ищут в Венесуэле что-то про ремонт двигателя машины — а им в выдаче сплошные ссылки на соображения, что нефтью делиться надо )

Это примитивно, потому и пользуюсь гуглом, что когда что-то ищу, ищу именно это, а не другое, потому остальные поисковики пока «гуляют лесом».

>Мелко, слишком мелко смотрите.

Возможно, если уж решили пофантазировать, то они создадут браузер и назовут его х.., а потом на основе его сделают ещё более мощный ботнет.

spleaner 5 декабря 2008, 17:23 # ↑

Ну дак чего же вы ждете :)
делайте вторую компанию и потребляйте 37% вдвоём :)

Shoom 5 декабря 2008, 17:37 # ↑

Абсолютно нелогичный коммент.
Если я против дракона, это не значит что я хочу стать драконом.

Fanamura 5 декабря 2008, 17:23 # ↑

А почему против-то? Что такого? Это же не означает, что интернет станет одним гуглом))))

Shoom 5 декабря 2008, 17:36 # ↑

Потому, что я не верю в добрые компании )
37% — это слишком много для идеи децентрализованной сети. Нужно понимать, что где-то есть люди, которые могут принять решение как поступить с этим трафиком. Например, начать немного изменять, фильтровать, излишне усердно анализировать. В конце концов, какая-либо катастрофа, приведшая к гибели руководства Гугла может с легкостью перерасти в хаос, т.к. новые управляющие далеко не сразу смогут взять на себя обязанности.
Для людей, верящих в прекрасную компанию гугл эти слова могут звучать кощунственно, но не надо питать иллюзий, гугл — это просто компания.

nrdcp 5 декабря 2008, 17:21 #

Судя по таблице, прогноз для P2P на ближайшие три года положителен :)

FRAGIL3 5 декабря 2008, 17:54 #

Интересно, а какова доля трафика Яндекса и Гугла в России?

punk 5 декабря 2008, 18:22 #

Честно говоря, то что американцы перескочили за экзабайт в год для меня новость.

GaloGenuS 5 декабря 2008, 19:15 #

Пишется не экзабайт, а эксабайт. Поправьте пожалуйста.

n1tra 5 декабря 2008, 20:04 #

Лихо они количество «пиратского» контента подсчитали… попаживает данными «отбалды»

fleshy 5 декабря 2008, 20:16 # ↑

Почему ж от балды? Большой Брат видит все. Кстати, к вам уже выехали :) и ко мне тоже выехали

bdsoft 5 декабря 2008, 21:51 #

Google потребляет 184 петабайта в месяц, но мы тоже можем у нас же хостинги с «безлимитным» трафиком :D

pr0r0k_d 5 декабря 2008, 22:29 #

так у них же датацентры не только в америке, если по всему миру посчитать, то еще больше получиться наверное

mace 5 декабря 2008, 23:05 # ↑

Я был на семинаре гугла, где говорили, что более 90% серверов находится в Америке. Так что не так уж и больше.

wvw 5 декабря 2008, 23:21 #

Пришлось освежить память
Петабайт = 1000 Терабайт
Эксабайт = 1000 Петабайт

Glip 5 декабря 2008, 23:39 # ↑

1024?

icCE 6 декабря 2008, 00:37 # ↑

Ахха

1 Петабайт равен 1024 Тб, а 1 Тб — 1024 Гб и т.д., следовательно, 1 Пт = 1073741824 Мб, или же 1024 жестких дисков по 1 Тб каждый.

а вот пебибайт, да…

петабайт PB 1015 пебибайт PiB Пбайт 250

Ну и корень всех проблем всем думаю известен с 1024 и 1000 :)
а если нет загляните в википедию

wvw 6 декабря 2008, 01:09 # ↑

ru.wikipedia.org/wiki/Эксабайт

Название «Эксабайт» общепринято, но неверно, так как приставка экса- означает умножение на 10^18. Правильной для 2^60 является двоичная приставка эксби-.

ru.wikipedia.org/wiki/Петабайт

Название «Эксабайт» общепринято, но неверно, так как приставка экса- означает умножение на 10^18. Правильной для 2^60 является двоичная приставка эксби-.

wvw 6 декабря 2008, 01:10 # ↑

Название «петабайт» общепринято, но формально неверно, так как приставка пета-, означает умножение на 10^15, а не 2^50. Правильной для 2^50 является двоичная приставка пеби-.

fix

atomicxp 6 декабря 2008, 04:24 # ↑

А ещё правильно говорить «ёби» (и это не шутка). Если так и дальше пойдёт, то в скором будущем нас ожидают лесбибайты. Впрочем для меня мегабайт навсегда останется равным 1024 килобайтам, так как я учился задолго до того, как кое-кто обманывая клиентов опасаясь судебных исков поменял систему единиц.

fedorov 6 декабря 2008, 01:36 #

ну что сказать… Парни молодцы!

angry_elf 7 декабря 2008, 11:47 #

15 центов за гигабайт? Нормально, впринципе.

HEm 10 декабря 2008, 10:18 #

Интересно, сколько трафика из этого генерируется сканированием интернета гугловскими ботами?

Google