Термины и сокращения

SSH

Secure Shell — сетевой протокол для удаленного управления операционной системой и туннелирования TCP-соединений. Шифрует весь трафик, включая передаваемые пароли.

API

Application Programming Interface — программный интерфейс приложений, описание способов для обмена данными между приложениями.

CSV

Comma-Separated Values — текстовый формат для представления табличных данных.

HDFS

Hadoop Distributed File System — файловая система, предназначенная для хранения файлов больших размеров, поблочно распределенных между узлами вычислительного кластера.

HTTP

HyperText Transfer Protocol — протокол передачи данных по схеме «запрос-ответ».

GPU

Graphics processing unit — графический процессор, предназначенный для обработки графики и высокопроизводительных вычислений.

JSON

JavaScript Object Notation — текстовый формат обмена данными, основанный на JavaScript.

REST

Representational State Transfer — набор архитектурных принципов для построения распределенных масштабируемых веб-сервисов.

NFS

Горячее хранилище на кластере Christofari. Точкой монтирования NFS и кластера по умолчанию является текущая рабочая директория пользователя /home/jovyan.

Бакет

Верхнеуровневая сущность для хранения и организации объектов.

Источник

Сегмент, из которого передается информация.

Коннектор

Драйвер для подключения к базам данных и файловым системам.

Место назначения

Сегмент, в который осуществляется перенос информации.

Объект

Единица хранения данных. Объектами могут быть отдельные файлы (один или несколько) и папки.

Перенос

Процесс подключения к источнику и перемещение данных в место назначения согласно заданным правилам и с определенной периодичностью.

Правило переноса

Задача на выгрузку данных из указанного источника и трансфер этих данных в предполагаемое место назначения с возможностью настройки периодичности переноса.

Регион размещения вычислительных ресурсов

Кластер, на котором будет развернуто окружение. Регионы различаются по типу и количеству предоставляемых ресурсов, подключенным хранилищам и тарификации.