О сервисе MapReduce Service

MapReduce Service (MRS) один из базовых сервисов, используется для управления и анализа массивами данных.

MRS представляет собой надежную, безопасную и простую в использовании платформу для эксплуатации и технического обслуживания. Платформа предоставляет аналитические и вычислительные возможности для массива данных и отвечает потребностям компаний в хранении и обработке данных.

Пользователи могут самостоятельно использовать размещенные компоненты, такие как Hadoop, Spark, HBase и Hive, для быстрого создания кластеров.

MapReduce Service располагает следующими отличительными особенностями:

  • Сервис прост в использовании. MRS не только поддерживает такие компоненты как Hadoop, HBase, Hive, Spark и Spark SQL, но также и унифицированные интерфейсы взаимодействия SQL во всем процессе, что упрощает разработку приложений с участием больших данных.

  • Низкая стоимость. Для сервиса MRS не требуются расходы на эксплуатацию и техническое обслуживание. Стоимость за вычисление рассчитывается отдельно от стоимости за хранение данных. Вычислительный кластер создается по мере необходимости, а после выполнения задания его можно удалить.

  • Стабильность работы сервиса. MRS сокращает время, затрачиваемое на ввод в эксплуатацию и мониторинг кластеров, а также обеспечивает высокую надежность и доступность ресурсов.

  • Прозрачность. Сервис MRS основан на открытом исходном коде и совместим с другими сервисами облачной платформы. К MapReduce Service можно получить доступ через интерфейсы REST API и JDBC.

MapReduce Service основан на программном обеспечении с открытым исходным кодом Hadoop, на вычислительном механизме Spark in-memory, распределенной базе данных HBase и на хранилище данных Hive.

MRS предоставляет единую платформу для хранения, поиска и анализа больших данных корпоративного уровня, чтобы помочь компаниям быстро создать систему обработки и управления данными.

Платформа используется в следующих целях:

  • Анализ и вычисление массива данных.

  • Хранения больших данных.

  • Потоковая обработка массива данных.

Процесс использования сервиса MRS можно представить следующим образом:

../_images/image42.jpeg

  1. Загрузите программу и файлы с данными на облачную платформу.

  2. В MapReduce Service создайте кластер с нужными параметрами и запустите задание.

  3. Проверьте результат выполненного задания.