Руководство: Создание конвейера данных

Узнайте, как создавать рабочий процесс для подготовки и интеграции данных из различных источников в набор данных, доступный в вашей ГИС-среде.

Получить входные данные

1. Перейдите по следующему URL-адресу элемента ArcGIS Online и для загрузки выберите файл: https://arcgis.com/home/item.html?id=5516ef1c4db846fab0a34a34626c263e

   Будет загружен файл с именем CHRA_FERRY_ROUTES_SP.geojson.

Открыть приложение ArcGIS Data Pipelines и создать конвейер данных

Чтобы открыть приложение Data Pipelines и приступить к созданию конвейера данных, выполните следующие шаги:

1. Войдите в ArcGIS Enterprise под своей учетной записью и получите доступ к приложению Data Pipelines (бета) с помощью средства запуска приложений .

   Откроется страница коллекции Data Pipelines.

2. Щелкните Создать конвейер данных.

   Откроется редактор конвейера данных.

   

   Примечание:

   Если вы открываете редактор конвейера данных впервые, появится пошаговая инструкция. Выберите Начать тур или Пропустить.

Добавьте источник данных

Источник данных загружает данные в конвейер данных для подготовки. Чтобы добавить источник данных на схему, выполните следующие действия:

1. Щелкните Входные данные на панели инструментов редактора.

   Откроется панель Входные данные.

2. Щелкните пункт меню Файл.

   Появится модальное окно Выбрать файл.

3. Выберите Загрузить новый, затем щелкните Далее.

   Откроется модальное окно Новый элемент.

4. В модальном окне Новый элемент щелкните Ваше устройство.

   Откроется обозреватель файлов.

5. Найдите и выберите ранее загруженный файл с именем CHRA_FERRY_ROUTES_SP.geojson.

   Вы вернетесь к модальному окну Новый элемент.

6. Введите имя нового элемента и щелкните Сохранить.

   Вы вернетесь в редактор конвейера данных с элементом Файл, добавленным на канву, и открытой панелью Файл.

7. На панели Файл щелкните Предварительный просмотр.

   Загрузится предварительный просмотр.

8. Изучите входной набор данных, выполнив любое из следующих действий:

   • Щелкните вкладку Предварительный просмотр , чтобы просмотреть табличное представление набора данных.

   • Щелкните вкладку Предварительный просмотр карты , чтобы просмотреть расположение набора данных на карте. В режиме предварительного просмотра карты вы можете перемещать, масштабировать карту и изучать атрибуты.

   • Щелкните вкладку Схема , чтобы проверить схему набора данных.

   • Щелкните вкладку Сообщения , чтобы просмотреть сообщения, возвращенные в результате действия предварительного просмотра.

Подготовка данных

Data Pipelines содержит инструменты для очистки и преобразования данных. Два из этих инструментов — это инструмент Фильтр по атрибуту, который используется для выбора чаще всего используемых маршрутов, и инструмент Выбрать поля, который используется для сохранения указанных полей в итоговых выходных данных.

Чтобы подготовить данные с помощью инструментов Фильтр по атрибуту и Выбрать поля, выполните следующие действия:

1. Щелкните кнопку закрыть в верхней части панели предварительного просмотра.

2. Щелкните Инструменты на панели инструментов редактор и выберите Фильтр по атрибуту.

   Элемент Фильтр по атрибуту добавляется на канву.

3. Настройте Фильтр по атрибуту для использования набора данных файла в качестве входных данных, выполнив одно из следующих действий:

   • Перетащите указатель от выходного порта элемента Файл к входному порту элемента Фильтр по атрибуту.

   • На панели Фильтр по атрибуту выберите набор данных файла, используя параметр Входной набор данных.

4. Щелкните кнопку + Построить новый запрос на панели этого инструмента.

   Появится диалоговое окно Конструктор запросов.

5. Щелкните Выражение, затем Далее.

6. В окне выбора полей выберите FREQUENCY_OF_USE_IND. Введите значение High в текстовое поле.

   

7. Щелкните Добавить в диалоговом окне Конструктор запросов.

8. Щелкните кнопку Инструменты на панели инструментов редактор и щелкните Выбрать поля.

   Элемент Выбрать поля добавляется на канву.

9. Подключите выходной порт элемента Фильтр по атрибуту к входному порту элемента Выбрать поля, используя одну из опций, описанных выше в шаге 3.

10. На панели Выбрать поля щелкните кнопку + Поле и выберите геометрия, FERRY_ROUTE_ID, ROUTE_NAME и MANIFEST_TYPE. Щелкните Готово, чтобы сохранить выбранное поле.

    Вы можете использовать текстовое окно поиска, чтобы быстро найти поля.

    

11. Щелкните Предварительный просмотр и просмотрите результат.

Экспорт данных в ArcGIS Enterprise

Теперь входной набор данных Coastal Ferry Routes отфильтрован так, чтобы содержать только маршруты с высокой частотой использования и набор полей, содержащих интересующую информацию. Для экспорта этого набора данных в векторный слой в ресурсах ArcGIS Enterprise, выполните следующие шаги:

1. Щелкните Выходные данные на панели инструментов редактор и выберите Векторный слой.

   Элемент Векторный слой добавляется на канву.

2. Подключите выходной порт элемента Выбрать поля к входному порту элемента Векторный слой.

3. Убедитесь, что поле Геометрия заполнено значением geometry.

4. В качестве Выходного имени укажите уникальное название выходного векторного слоя.

   

5. В меню действий со схемой щелкните кнопку Автокомпоновка схемы .

   Элементы схемы автоматически перемещаются в чистую компоновку.

6. На панели действий в верхней части канвы щелкните Запустить .

   Теперь конвейер данных запущен и появляется консоль Информация о последнем запуске. Как только процесс будет завершен, векторный слой отобразится на вкладке Выходные результаты.

   

7. Дополнительно можно щелкнуть векторный слой, чтобы открыть его страницу элемента в ArcGIS Enterprise.

8. При необходимости, нажмите Сохранить и открыть на панели инструментов редактора и выберите Сохранить как, чтобы сохранить конвейер данных как новый элемент в ваших ресурсах.