Учебники

Apache NiFi — провенанс данных

Apache NiFi регистрирует и хранит каждую информацию о событиях, произошедших в загруженных данных в потоке. Хранилище данных о происхождении хранит эту информацию и предоставляет пользовательский интерфейс для поиска информации об этом событии. Доступ к данным можно получить как на уровне NiFi, так и на уровне процессора.

Провенанс данных

В следующей таблице перечислены различные поля в списке событий NiFi Data Provenance, имеющие следующие поля:

S.No. Имя поля Описание
1 Дата / время Дата и время события.
2 Тип Тип события, как «CREATE».
3 FlowFileUuid UUID файла потока, для которого выполняется событие.
4 Размер Размер потока файла.
5 Имя компонента Имя компонента, который выполнил событие.
6 Тип компонента Тип компонента.
7 Показать родословную В последнем столбце есть значок show lineage, который используется для просмотра линии потока файла, как показано на рисунке ниже.

Значок Lineage

Чтобы получить больше информации о событии, пользователь может щелкнуть значок информации в первом столбце интерфейса пользователя NiFi Data Provenance.

В файле nifi.properties есть некоторые свойства, которые используются для управления хранилищем данных NiFi Data Provenance.