Хабрахабр: Метки / базы данных http://habrahabr.ru/rss/tag/базы данных/ ru editor@habrahabr.ru habrahabr.ru Sat, 11 Feb 2012 22:32:13 GMT http://habrahabr.ru/ http://habrahabr.ru/i/logo.gif Хабрахабр <![CDATA[PHP / Готовим ActiveRecord из PDO. Часть 0]]> http://habrahabr.ru/blogs/php/138001/ http://habrahabr.ru/blogs/php/138001/ ActiveRecord, чуть меньше человек согласиться, что это действительно очень удобно, примерно столько же понимает, что это далеко не всегда лучшее решение для проекта из соображений производительности. И это действительно так, но можно много чего придумать для избавления от этих проблем: кеширование всего и вся, различные архитектурные ухищрения и т.д.

Именно различными улучшениями AR мы и займемся на протяжении всего цикла этих статей :)
Узнать подробности
]]> Sat, 11 Feb 2012 10:33:03 GMT RiderSx PHPARActiveRecordPDOбазы данных <![CDATA[MySQL / Немного о SELECT… FOR UPDATE и GET_LOCK]]> http://habrahabr.ru/blogs/mysql/137979/ http://habrahabr.ru/blogs/mysql/137979/ У нас есть MySQL база, в которой есть таблица queue. В эту таблицу поступают задания для выполнения.
Задания должны распределяться между процессами. Одна и та же задача не должна попасть к разным процессам.
Читать дальше →
]]> Fri, 10 Feb 2012 19:09:56 GMT ReMaker mysqlбазы данных <![CDATA[PostgreSQL / Аудит таблиц с пространственными объектами в PostGIS/PostgreSQL]]> http://habrahabr.ru/blogs/postgresql/137161/ http://habrahabr.ru/blogs/postgresql/137161/ В предыдущей статье был рассмотрен пример с пространственными объектами и разделением доступа к ним по пользователям.
Теперь рассмотрим пример аудита данной базы. Нас интересует: кто, когда и что сделал с таблицей. Какую запись (читай «объект») добавил, какую удалил, какую изменил, чтобы в дальнейшем не было различных «недоразумений».
Читать дальше →
]]> Wed, 01 Feb 2012 05:41:43 GMT pashtet51 базы данныхpostgresqlкартографиягис <![CDATA[PostgreSQL / [Перевод] EnterpriseDB: мы заберём «свой кусок пирога» рынка СУБД у Oracle!]]> http://habrahabr.ru/blogs/postgresql/137183/ http://habrahabr.ru/blogs/postgresql/137183/ Неделю назад компания EnterpriseDB анонсировала свой новый продукт — Postgres Plus Cloud Database Я подумал, что неплохобы по этому поводу перевести что-нибудь о компании и её продуктах. Тем более, что с амбициями у руководителей там всё нормально — изображение справа с официального сайта enterprisedb. ;-) В некотором роде, данный перевод написан«в догонку» к «Oracle на пути к упадку».

В конце декабря компания Oracle сообщила о падении своих акций на 9%. Но мне эта новость не показалась удивительной, потому что всего за пару дней до её появления я беседовал с Эдом Бояджаном (Ed Boyajian), президентом и CEO компании EnterpriseDB.
Читать дальше →
]]> Sun, 29 Jan 2012 16:32:45 GMT mister_fog postgresqlenterprisedboracleсубдбазы данныхsql <![CDATA[PostgreSQL / [Из песочницы] Организация хранения пространственных данных в PostGIS/PostgeSQL]]> http://habrahabr.ru/blogs/postgresql/137121/ http://habrahabr.ru/blogs/postgresql/137121/ По приходу в одну контору, которая занимается разработкой карт, схем и планов, меня очень удивила одна вещь: не было централизованного хранилища всех материалов. Пользователи работали каждый со своими наработками. И если возникала потребность что-то взять из другого проекта – приходилось или бежать с «флэшечкой», или копировать файлы по сети. Что создавало неимоверное количество «мусора» в виде дубликатов разной свежести на множестве рабочих станций.

После наблюдения всего этого хаоса, я решил все это дело «причесать» и сделать централизованным хранение картографического материала, с разграничением прав доступа к отдельным проектам, да еще и с мониторингом изменений, внесенных в проекты.
Читать дальше →
]]> Fri, 27 Jan 2012 10:12:23 GMT pashtet51 базы данныхpostgresqlкартографиягис <![CDATA[Python / Gephi как средство визуализации данных]]> http://habrahabr.ru/blogs/python/136575/ http://habrahabr.ru/blogs/python/136575/
В виду того, что курс читается в основном для ИТ-шников, лектор сделал ставку на то, чтобы дать достаточно теории с минимумом математики и большим количеством практики. Для большинства вышеупомянутых задач подходит программа NetLogo. Она включает собственный язык программирования высокого уровня, который позволяет с лёгкостью моделировать различные случайные процессы. Для визуализации разнообразных данных была выбрана программа Gephi.

На основе опыта использования последней и была написана статья, в которой рассматривается получение входных данных для ПО с последующей их визуализацией.

Собственно постановка задачи была таковой: визуализация каких-либо реальных данных средствами Gephi.

Читать дальше →
]]> Thu, 19 Jan 2012 22:33:48 GMT okazymyrov gephiсетиpythondatabaseiacr <![CDATA[Высокая производительность / Базы данных. Yet another DB testing]]> http://habrahabr.ru/blogs/hi/134779/ http://habrahabr.ru/blogs/hi/134779/
Тестирование проводилось так сказать в лоб. Никаких тонких настроек и прочих оптимизаций. Все ставилось и тестировалось как есть из коробки. Тестировались только простейшие выборки и вставки. В качестве клиента использовался PHP 5.3

На вертикальной оси отображено к-во операций/сек

Читать дальше →
]]> Thu, 22 Dec 2011 21:40:17 GMT zim32 базы данных <![CDATA[SQL / CryptDB: обработка информации в БД без её дешифрования]]> http://habrahabr.ru/blogs/sql/134966/ http://habrahabr.ru/blogs/sql/134966/

Архитектура CryptDB

Подход, реализованный в CryptDB, называется полным гомоморфным шифрованием. Первую полностью гомоморфную модель для СУБД предложил в 2009 году криптограф из IBM Research Крейг Джентри (Craig Gentry), она является гомоморфной для операций умножения и сложения одновременно, что даёт возможность выразить любую математическую функцию. Правда, была одна проблема: скорость операций по сравнению с обычной СУБД возрастала примерно в триллион раз.
Читать дальше →
]]> Tue, 20 Dec 2011 12:21:09 GMT alizar CryptDBбазы данныхSQLКрейг Гентригомоморфное шифрованиеphpBB <![CDATA[SQL / [Из песочницы] DigestSDK — автоматизация работы с MSSQL на Delphi]]> http://habrahabr.ru/blogs/sql/134901/ http://habrahabr.ru/blogs/sql/134901/ Вступление
Несколько лет назад мне пришлось реализовать работу с таблицами базы данных MSSQL сервера. После написания некоторого количества, фактически однотипного кода, пришла мысль автоматизировать эти «рутинные» действия.
Согласитесь, что написание одного и того же кода, отличающегося только структурой таблиц БД, не может никого вдохновить. К тому же, если кол-во таблиц, с которыми приходиться работать переваливает за десяток, то занятие из разряда скучное — переходит в разряд трудоемкое.
Поиск в интернете на тот момент не дал результатов, поэтому реализацию пришлось взять на себя. .
В результате был создан набор модулей (в дальнейшем DigestSDK) на языке Delphi, позволяющих избавить программиста от написания «стандартного» кода по работе с БД и сосредоточиться на логике самого приложения. .
Демонстрационные примеры, исходные коды и видео по работе с DigestSDK выложил на SourceForge (авось еще кому да и пригодится, заодно и хабр эффект проверим в очередной раз:-))..

Читать дальше →
]]> Mon, 19 Dec 2011 21:26:41 GMT dgatsura ПрограммированиеБДMSSQLDelphi <![CDATA[Дистанционное обучение в IT / Итоги курса по базам данных от Стэнфордского Университета]]> http://habrahabr.ru/blogs/elearning/134700/ http://habrahabr.ru/blogs/elearning/134700/
Читать дальше →
]]> Thu, 15 Dec 2011 22:25:08 GMT volum_separatum Stanfordбазы данныхонлайн курсы <![CDATA[MySQL / [Из песочницы] Использование бинарного поиска для оптимизации запроса на выборку данных]]> http://habrahabr.ru/blogs/mysql/134417/ http://habrahabr.ru/blogs/mysql/134417/ Введение
Сейчас очень популярна тем оптимизации работы с различными СУБД. На многочисленных форумах ведутся дискуссии о «самой лучшей СУБД в мире», но часто все это перетекает в необоснованные выкрики о том, что «я познал смысл жизни и понял, что самое лучшее хранилище данных — Х».

Да, несомненно, сейчас мы можем наблюдать активное развитие NoSQL решений, которые позволяют делать многое. Но данная статья не о них. Так вышло, что я сменил работу и в нагрузку мне достался один очень интересный проект на связке php+MySQL. В нем есть много хороших решений, но он писался без расчёта на большую аудиторию. За несколько лет существования количество активных пользователей начало приближаться к числам с 7 нулями. Так как проект представляет из себя подобие социальной сети с игровыми элементами, то таблица с пользователями оказалась не самой «тяжёлой» из всех. В наследство мне достались таблицы с десятками миллионов вещей пользователей, личных сообщений, биллинговыми записями и т. п. Проект начали рефакторить, разбивать на несколько серверов и достигли значительных результатов. Сейчас все стабильно.

Но недавно мне на почту прислали новую задачу. Суть заключалась в сборе статистики. Проанализировав требования я понял, что для выполнения достаточно написать один единственный запрос, выполняющий 3 INNER JOIN'а на таблицы, размеры которых впечатляли. Каждая таблица в среднем содержала 40 миллионов записей. Получается, что временная таблица состояла бы из 4*4*4*10^21 = 64*10^21 записей. Это колоссальная цифра. И загружать СУБД таким запросом для сбора статистики — непозволительная роскошь.

Далее, собственно, я и хочу представить решение данной абстрактной задачи, которое пришло мне в голову, когда я вспоминал занятия по информатике на первом курсе университета.

Читать дальше →
]]> Mon, 12 Dec 2011 01:56:57 GMT kazmiruk mysqlбазы данныхбинарные деревьяоптимизацияалгоритмы <![CDATA[Блог компании BrandMaker Russia / Побеждаем «эффект домино»]]> http://habrahabr.ru/company/BrandMaker/blog/134292/ http://habrahabr.ru/company/BrandMaker/blog/134292/
Думаю, очень многие из нас сталкивались при работе с информацией с так называемым «эффектом домино» — когда из-за изменения какого-то одного элемента рушится вся выстроенная система. Примеров таких ситуаций можно привести сколько угодно.

Представьте себе, например, банк, у которого, скажем, 10 видов вкладов, и во многих из них еще и дифференцированная шкала процентов, зависящая от срока вклада и от размера первоначального взноса. Для всей этой линейки есть куча рекламной продукции – общие буклеты по вкладам, отдельные буклеты по каждому вкладу, листовки для информационных стендов, плакаты для вывешивания в офисах. Плюс информация на сайте. Естественно, все рекламные макеты и контент на сайте на десять рядов перепроверены и согласованы, чтобы везде отображалась одна и та же информация.

И тут – ВНЕЗАПНО — меняется ставка рефинансирования, и банк срочно меняет свои проценты по вкладам.


Соответственно, нужно в кратчайшие сроки поменять информацию о ставках во всех источниках, где она упоминается.

Какие есть способы?
Читать дальше →
]]> Fri, 09 Dec 2011 06:08:16 GMT vladvoron веб-сервисы для бизнесабазы данныхредактированиеавтоматизация бизнесаавтоматизация предприятий <![CDATA[Блог компании Microsoft / Выпущен релиз-кандидат SQL Server 2012]]> http://habrahabr.ru/company/microsoft/blog/133048/ http://habrahabr.ru/company/microsoft/blog/133048/

На прошлой неделе состоялся важный выпуск новой предварительной версии сервера баз данных SQL Server 2012, который ранее был известен под кодовым именем Denali. Новая предварительная версия носит статус Release Candidate (релиз-кандидат), что во-первых, означает ее готовность для промышленного тестирования, а во вторых говорит нам о полнофункциональном статусе продукта, который на этом этапе уже укомплектован всеми функциями, которые будут доступны в финальном релизе.

Говорить про нововведения в SQL Server 2012 можно очень долго, новое поколение базы данных содержит массу новшеств во всех компонентах. Небольшая часть нововведений кратко описывается в этой статье посвященной первому анонсу Denali.

Загрузить SQL Server 2012 Release Candidate 0 (RC0) можно отсюда.

Читать дальше →
]]> Mon, 21 Nov 2011 09:32:00 GMT XaocCPS sql serversql server 2012denaliбазы данных <![CDATA[Oracle / [Из песочницы] Online redo logs или Событие контрольной точки в Oracle]]> http://habrahabr.ru/blogs/oracle/132107/ http://habrahabr.ru/blogs/oracle/132107/
Читать дальше →
]]> Tue, 08 Nov 2011 06:52:12 GMT mashuka базы данныхoracle <![CDATA[Резервное копирование / [Из песочницы] SQL Server 2008: бэкапим с умом. Часть 1: Теория]]> http://habrahabr.ru/blogs/backup/131300/ http://habrahabr.ru/blogs/backup/131300/
Читать дальше →
]]> Thu, 27 Oct 2011 08:01:40 GMT JustRoo mssqlsql serverбазы данныхбэкапы <![CDATA[NoSQL / [Перевод] CAP-теорема простым, доступным языком]]> http://habrahabr.ru/blogs/nosql/130577/ http://habrahabr.ru/blogs/nosql/130577/ Kaushik Sathupadi на тему распределённых систем и существующих ограничений при их создании.

При разработке распределённых систем вы наверняка часто услышите упоминания об CAP-теореме. Давайте попробуем понять её через ситуацию, которая могла возникнуть в реальной жизни.

Часть №1: Идея нового сервиса — «Позвони, напомню!»


Вчера, когда ваша супруга в очередной раз оценила тот факт, что вы вспомнили о её дне рождения и подарили шикарный подарок, в голове всплыла забавная идея. «Хм, а ведь люди вечно всё забывают». А у вас просто блестящая память! Почему бы не сделать новый сервис, который позволит полностью раскрыться вашему таланту? С каждой мыслью об этой идее вам всё больше и больше она нравится. Вы уже даже придумали рекламу, которую можно было бы напечатать в газете:
«Позвони, напомню» — Никогда не забывайте, даже если вы не помните, что забыли!
Плохо себя чувствуете из-за того, что вы что-то забыли? Не переживайте. Помощь на расстоянии одного телефонного звонка!
Если вам нужно что-то запомнить, просто позвоните и сообщите нам об этом! Допустим, позвоните нам и сообщите телефон вашего босса. Забудьте про него. Когда вам нужно будет вспомнить его, перезвоните, и мы вам обязательно напомним.
Всего 3 рубля за звонок.

Типичное обращение в ваш сервис выглядело бы вот так:
Читать дальше →
]]> Mon, 17 Oct 2011 10:03:30 GMT system29a CAP theoremCAP-теоремаNoSQLбазы данныхраспределенные системыavailabilitypartition toleranceconsistency <![CDATA[CodeIgniter / Альтернатива mysql_pconnect для драйвера mysqli в php 5.3]]> http://habrahabr.ru/blogs/codeigniter/129482/ http://habrahabr.ru/blogs/codeigniter/129482/ 
$db['default']['pconnect'] = TRUE;

что должно было означать, что подключение происходит через постоянное соединение.
Читать дальше
]]> Fri, 30 Sep 2011 08:21:34 GMT Zabatov mysqlimysqlбазы данных <![CDATA[.NET / [Из песочницы] FluentMigrator — система версионных миграций]]> http://habrahabr.ru/blogs/net/129242/ http://habrahabr.ru/blogs/net/129242/
Здравствуйте. Что такое миграции и зачем они нужны хорошо рассказано в статье Версионная миграция структуры базы данных: основные подходы.
Я же хочу вам рассказать о системе версионных миграций: FluentMigrator. Почему мне нравится именно этот проект? Из-за приятного синтаксиса миграций и поддержки различных СУБД. Заинтересовались? Добро пожаловать под кат.
Читать дальше →
]]> Wed, 28 Sep 2011 02:36:38 GMT tabushi версионная миграцияверсионированиебазы данныхсистемы контроля версийcontinuous integration.net