Apache NiFi - Bản quyền dữ liệu
Apache NiFi ghi nhật ký và lưu trữ mọi thông tin về các sự kiện xảy ra trên dữ liệu đã nhập trong luồng. Kho dữ liệu xuất xứ lưu trữ thông tin này và cung cấp giao diện người dùng để tìm kiếm thông tin sự kiện này. Nguồn gốc dữ liệu có thể được truy cập cho cấp NiFi đầy đủ và cả cấp bộ xử lý.
Bảng sau liệt kê các trường khác nhau trong danh sách sự kiện NiFi Data Provenance có các trường sau:
Không. | Tên trường | Sự miêu tả |
---|---|---|
1 | Ngày giờ | Ngày và thời gian của sự kiện. |
2 | Kiểu | Loại sự kiện như 'CREATE'. |
3 | FlowFileUuid | UUID của tệp lưu lượng mà sự kiện được thực hiện. |
4 | Kích thước | Kích thước của tệp lưu lượng. |
5 | Tên thành phần | Tên của thành phần đã thực hiện sự kiện. |
6 | Loại thành phần | Loại thành phần. |
7 | Hiển thị dòng dõi | Cột cuối cùng có biểu tượng dòng dõi hiển thị, được sử dụng để xem dòng lưu lượng như thể hiện trong hình dưới đây. |
Để biết thêm thông tin về sự kiện, người dùng có thể nhấp vào biểu tượng thông tin có trong cột đầu tiên của giao diện người dùng NiFi Data Provenance.
Có một số thuộc tính trong tệp nifi.properties, được sử dụng để quản lý kho lưu trữ NiFi Data Provenance.
Không. | Tên tài sản | Giá trị mặc định | Sự miêu tả |
---|---|---|---|
1 | nifi.provenance.repository.directory.default | ./provenance_repository | Để chỉ định đường dẫn mặc định của nguồn gốc dữ liệu NiFi. |
2 | nifi.provenance.repository.max.storage.time | 24 tiếng | Để chỉ định thời gian lưu giữ tối đa của nguồn gốc dữ liệu NiFi. |
3 | nifi.provenance.repository.max.storage.size | 1 GB | Để chỉ định lưu trữ tối đa nguồn gốc dữ liệu NiFi. |
4 | nifi.provenance.repository.rollover.time | 30 giây | Để chỉ định thời gian di chuyển của nguồn gốc dữ liệu NiFi. |
5 | nifi.provenance.repository.rollover.size | 100 MB | Để chỉ định kích thước cuộn qua của nguồn gốc dữ liệu NiFi. |
6 | nifi.provenance.repository.indexed.fields | EventType, FlowFileUUID, Filename, ProcessorID, Relationship | Để chỉ định các trường được sử dụng để tìm kiếm và lập chỉ mục nguồn gốc dữ liệu NiFi. |