Amazon Redshift – это высокоскоростное, полностью управляемое, масштабируемое до петабайтов хранилище данных, которое делает анализ всех данных с помощью имеющихся инструментов бизнес-аналитики проще и дешевле. Вы можете начать всего лишь с 0,25 USD за час без каких-либо обязательств и выполнять масштабирование до нескольких петабайт по цене 1000 USD за терабайт в год. Это в десять раз меньше стоимости других решений. Как правило, за счет трехкратного сжатия клиенты получают ежегодную экономию в 333 USD на каждый терабайт без сжатия.
Скорость
Amazon Redshift обеспечивает высокую скорость обработки запросов, используя колоночную технологию хранилища для повышения эффективности ввода-вывода и распределения запросов по нескольким узлам.Скорость загрузки данных линейно масштабируется с ростом размера кластера. Сервис поддерживает интеграцию с Amazon S3, Amazon DynamoDB, Amazon Elastic MapReduce, Amazon Kinesis и любым хостом с доступом по SSH.
Низкая цена
Вы платите только за то, что используете. Любое количество пользователей может запускать любые объемы аналитических задач по всем вашим данным всего за 1000 USD за терабайт в год, что в 10 раз дешевле традиционных решений для хранения данных.
Простота
Amazon Redshift позволяет без труда автоматизировать большинство типичных административных задач и упростить мониторинг и масштабирование вашего хранилища, а также управление им. Взяв на себя все эти трудоемкие, затратные по времени задачи, Amazon Redshift освобождает ресурсы пользователей для работы с данными и решения бизнес-задач.
Эластичность
Размер кластера можно увеличивать или уменьшать в соответствии с требованиями к ресурсам и производительности всего за пару минут с помощью Консоли управления или простых вызовов API.
Безопасность
Встроенная система безопасности. Вы можете шифровать данные при хранении и передаче с помощью шифрования AES-256 с аппаратным ускорением и SSL, изолировать кластеры, используя Amazon VPC, и даже управлять ключами с помощью службы AWS Key Management Service (KMS) и аппаратных модулей безопасности (HSM).
Совместимость
Amazon Redshift поддерживает стандартный клиент SQL и предоставляет настраиваемые драйверы JDBC и ODBC в консоли. Это позволяет использовать большинство знакомых SQL-клиентов. Доступны также стандартные драйверы PostgreSQL JDBC и ODBC.
Оптимизировано для хранения данных
В Amazon Redshift используется множество инноваций для достижения максимально высокой производительности при обработке запросов в наборах данных, размер которых составляет от сотен ГБ до петабайта и больше. В данном сервисе реализовано колоночное хранилище, сжатие данных и карты зоны для сокращения количества вводов-выводов, требуемых для выполнения запросов. Сервис Amazon Redshift основан на массово-параллельной архитектуре хранилища данных (MPP), распараллеливая и распределяя операции SQL для максимального использования всех доступных ресурсов. Базовое оборудование предназначено для высокопроизводительной обработки данных с помощью локально подключенного хранилища для обеспечения максимальной пропускной способности между ЦПУ и дисками, а также узловой сети 10GigE для максимальной пропускной способности между узлами.
Петабайты данных
Чтобы изменить количество и тип узлов в хранилище данных или расширить объем хранилища сжатых пользовательских данных до петабайта и выше, достаточно пары щелчков мышью в консоли или простого вызова API. Узлы Dense Storage (DS) позволяют создать очень крупные хранилища данных с помощью жестких дисков (HDD) – и все это по крайне низкой цене. С помощью узлов Dense Compute (DC) можно создать хранилища данных с очень высокой производительностью, в которых используются ЦП, большие объемы ОЗУ и твердотельные накопители (SSD). В процессе масштабирования Amazon Redshift продолжает поддерживать обработку запросов к хранилищу в режиме чтения, пока новый кластер не будет полностью выделен и готов к работе.
Никаких авансовых платежей
Вы оплачиваете только используемые ресурсы. Вы можете выбрать цены по требованию без авансовых платежей или долгосрочных обязательств либо получить существенно сниженные тарифы благодаря ценам на зарезервированные инстансы. Цены по требованию начинаются всего с 0,25 USD в час за узел DC1.Large на 160 ГБ или 0,85 USD в час за узел DS2.XLarge на 2 ТБ. С помощью зарезервированных инстансов с частичной предоплатой вы можете снизить фактическую цену до 0,10 USD за узел DC1.Large (5500 USD за ТБ в год) или 0,228 USD в час за узел DS2.XLarge (999 USD за ТБ в год). Подробности см. на странице расценок Amazon Redshift.
Отказоустойчивость
В Amazon Redshift предусмотрено несколько возможностей, которые повышают надежность кластера хранилища данных. Все данные, записанные на узел в кластере, автоматически копируются на другие узлы в кластере, и для всех данных непрерывно создаются резервные копии, передаваемые в Amazon S3. Amazon Redshift выполняет непрерывный мониторинг состояния кластера, автоматически реплицирует данные с неисправных дисков и по мере необходимости заменяет узлы.
Автоматическое резервное копирование
Amazon Redshift непрерывно создает резервные копии новых данных в автоматическом режиме и сохраняет их в Amazon S3. Там снимки состояния хранятся в течение указанного пользователем периода, от 1 до 35 дней. Можно также сделать снимок состояния вручную; такие снимки хранятся, пока не будут удалены пользователем. Сервис Amazon Redshift может также асинхронно копировать снимки состояния в хранилище S3 другого региона для аварийного восстановления. После удаления кластера снимки состояния системы также удаляются, но снимки состояния, сделанные пользователем, остаются доступными до того момента, пока не будут явно удалены.
Быстрое восстановление
Чтобы восстановить кластер с помощью Консоли управления AWS или API Amazon Redshift, можно использовать любые снимки состояния системы, в том числе пользовательские. Кластер становится доступным, как только будут восстановлены метаданные системы. Вы сможете начать отправку запросов, при этом остальные данные будут загружаться в фоновом режиме.
Шифрование
С помощью всего нескольких параметров вы можете настроить сервис Amazon Redshift на использование сертификата SSL с целью обеспечения безопасности транзитных данных и шифрования AES-256 с аппаратным ускорением для данных в местах хранения. Если активировать шифрование данных в местах хранения, все данные, записанные на диск, а также их резервные копии будут зашифрованы. По умолчанию управление ключами осуществляет сервис Amazon Redshift, но вы можете выбрать вариант управления ключами с помощью собственных аппаратных модулей безопасности (HSM), AWS CloudHSM или AWS Key Management Service.
Изолирование сети
Amazon Redshift позволяет настроить правила брандмауэра для управления сетевым доступом к кластеру хранилища данных. Amazon Redshift можно запустить в Amazon VPC, чтобы изолировать кластер хранилища данных в своей виртуальной сети и подключить его к имеющейся ИТ-инфраструктуре с помощью зашифрованного по стандартному протоколу IPsec VPN-подключения.
Аудит и соответствие требованиям
Amazon Redshift интегрируется с AWS CloudTrail, чтобы обеспечить возможность аудита всех вызовов API Redshift. Сервис Amazon Redshift также вносит в журнал все операции SQL, включая попытки подключения, запросы и изменения вашей базы данных. Доступ к этим журналам можно получить с помощью запросов SQL в системные таблицы. Вы также можете загрузить их в надежное расположение в Amazon S3. Amazon Redshift соответствует требованиям SOC1, SOC2, SOC3 и PCI DSS уровня 1. Подробнее см. на странице Соответствие облака AWS нормативным требованиям.
Больше историй клиентов Amazon Redshift из компаний разных размеров и разных отраслей см. на странице Истории успеха клиентов »
Публикация недостоверных результатов оценки производительности – классический прием маркетинговых кампаний «старой школы». Одно дело, когда к подобным методам прибегают компании-консерваторы (такие как Oracle), но мы были удивлены тем, что Google тоже решила воспользоваться таким подходом. Поэтому когда Google представила результаты сравнительной оценки производительности сервисов BigQuery и Amazon Redshift на закрытом мероприятии в Сан-Франциско 29 сентября 2016 г., мы не смогли побороть любопытство и решили разобраться в ситуации подробнее.
В этой публикации Periscope рассказывает о результатах сравнительного исследования Amazon Redshift, Snowflake и Google BigQuery.
Многих клиентов AWS давно интересовал способ программно анализировать отчеты о расходах и использовании. Такие клиенты используют разнообразные сервисы AWS для множества бизнес-процессов, зачастую в разных регионах. Мы предоставляем подробную информацию о ценах и расходах, и этот вопрос можно рассматривать с точки зрения больших данных, с которыми замечательно справляются сервисы AWS! Пока я был в отпуске в начале месяца, начала работать новая возможность загрузки отчетов о расходах и использовании в Amazon Redshift и Amazon QuickSight. Я успел разобраться с этим и готов поделиться с вами.
Полный список публикаций в блоге, посвященных Amazon Redshift, приведен на странице блога »
Информацию о всех новых возможностях сервиса Amazon Redshift см. на странице новых возможностей »
Попробуйте Amazon Redshift бесплатно. Получите 750 бесплатных часов работы узла DC1.Large в месяц в течение 2 месяцев. Чтобы попробовать Amazon Redshift бесплатно, зарегистрируйте аккаунт AWS и откройте консоль Amazon Redshift. Запустите кластер Amazon Redshift и выберите DC1.Large в качестве типа узла.
