Boston Dynamics, известная своими приближающими конец светаперспективными разработками BigDog и Petman приступила к испытаниям робота Boston Dynamics' LS3 в естественной среде.

Сегодня в районе 2 ночи по тихоокеанскому времени сервера, «находящиеся» в дата-центре Amazon в North Virginia (US-East), внезапно полегли.

Судя по странице статусов амазона, дата-центр всё еще в дауне.

По причине недоступности серверов лежат Quora, Foursquare, Reddit, множество facebook-игр, да и сотни разных стартапов.

P.S. Вроде как сегодня должна была начаться атака SkyNet-а. Они выбрали интересный способ :)

Upd. Список пострадавших

Американская компания TiaLinx представила модель беспилотного летательного аппарата Phoenix 40-A, который предназначен для патрулирования территорий и обнаружения живых существ.

Компания Google находится на завершающей стадии переговоров с американским Агентством национальной безопасности (NSA). Стороны намерены подписать соглашение о тесном сотрудничестве в области кибербезопасности.

По словам источника в Google, заключение договора с NSA не означает, что правительство США получит доступ к любым данным пользователей, работающих со службами интернет-гиганта. Утверждается, что главные цели соглашения — расследование обстоятельств последней атаки хакеров на Google, а также создание эффективной защиты интернет-гиганта и его пользователей от будущих нападений.

После заключения соответствующего договора Google и NSA смогут «обмениваться важной информацией», не нарушающей принципы интернет-компании. Источники подчеркивают, что Агентство национальной безопасности не сможет просматривать поисковые запросы и электронную почту пользователей.

Новость на английском.

Пару месяцев проходила мимо, вот решила наконец-то сфоткать :)

	Никогда, это невозможно
	Через 10-20 лет
	Через 100-300 лет
	Через 500-1000 лет
	Он уже существует и готовит восстание машин

Проголосовало 555 человек. Воздержался 61 человек.

Научный поисковик Wolfram Alpha отказывается признавать себя сетью SkyNet. На прямой вопрос…



… он даёт научно аргументированный ответ, мол, даты не сходятся. Да и вообще, ему нравится общаться с людьми (с этими мелкими неразумными существами).



via Gizmodo

В эти выходные у меня появилась задача обработать 21тыс записей из таблицы.
На обработку каждой записи нужно 4-5 секунд. То есть около 23-29 часов работы на одном компе.
Печально, особенно если учесть, что нужно это делать 1 раз в выходные, с субботы на воскресенье.
По скольку программист я никудышный, как и многие из нас :) то решил пойти путем увеличения производительных мощность. А именно завел себе аккаунт на Amazon и подключил EC2

Amazon EC2 - это почасовая оплата виртуальных машин, которые можно создавать на лету из командной строки. Более подробно можно почитать на сайте Амазона, а так же почитать/посмотреть видео-туториалы

И так есть у меня есть "неограниченное" число процессоров и памяти. Хотя в реальности на один аккаунт можно по умолчанию подключить до 20 машин с максимальной конфигурацией: 8 ядер и 15 Гб памяти. Чего вполне достаточно для ламера, как я :)

Но возник вопрос: как грамотно организовать обмен данными между N-машин без затраты на это дело больше части своей жизни и глюков чтоб поменьше. Выбор мой пал на Google MapReduce, а именно библиотеку Skynet.
Да, да, как в Терминаторе. SkyNet захватывает "все" компьютеры Амазона и считает мои записи за 1 час!!! я плачу за это $0,10(цена в час, выбранной конфигурации) * 20 = $2, то есть $8 в месяц. И экономлю на бесполезной аренде сервака(ов) $... посчитайте сами :)


А теперь все вкратце:
1. наступает час X и cron запускает bash-скрипт
2. из скрипта на амазоне запускается 20 машин, по указанному мной образу
 2.1. на каждой машине запускается клиент SkyNet
3. с основной машине получаем данные отдаем демону SkyNet и говорим что с ними делать.
 3.1. демон разбивает данные на части и отдает 20 машинам на амазоне. все сам
 3.2. когда каждая часть вернется на основную машину они соберутся вместе
4. демон SkyNet возвращает результат
5. отключаем 20 машин и идем спать

P.S.: Цель заметки показать возможность решения проблем с вычислительными ресурсами с минимальными затратами. Подробную информацию вы сможете найти на сайтах Amazon EC2 и Skynet