jjh0119 님의 블로그

  • 홈
  • 태그
  • 방명록

2025/07/08 1

Apache NiFi 고급 활용 가이드: 증분 수집부터 다중 전송까지

Apache NiFi는 시각적 데이터 흐름 자동화 도구로서, 단순한 수집과 전송을 넘어 다양한 고급 기능을 통해 유연하고 확장 가능한 데이터 파이프라인을 구성할 수 있다. 본 문서에서는 실무 현장에서 자주 활용되는 네 가지 고급 기능을 중심으로, 구체적인 Processor 구성과 설정 방법을 정리하였다.증분 수집 (Incremental Ingestion)데이터 전처리 (Data Transformation)다중 전송 대상 구성 (Multi-Sink Routing)정기 실행 (Scheduled Execution)1. 증분 수집 (Incremental Ingestion)1.1 기능 설명증분 수집이란, 이미 수집된 데이터를 제외하고 새롭게 생성되거나 갱신된 데이터만을 추출하는 방식이다.이는 중복 수집을 방지하고..

Develop/Data Engineering 2025.07.08
이전
1
다음
더보기
프로필사진

jjh0119 님의 블로그

jjh0119 님의 블로그 입니다.

  • 분류 전체보기 (69)
    • CS (28)
      • 소프트웨어 공학 (1)
      • 운영체제 (0)
      • 데이터베이스 (0)
      • 정보처리산업기사 (27)
    • Develop (29)
      • Java & Spring (22)
      • Python (0)
      • JavaScript (0)
      • Data Engineering (5)
      • CMS (2)
      • Mendix (0)
    • Algorithm (10)
      • Algorithm 개념 (0)
      • Problem solving (10)

Tag

java, 애플리케이션 테스트 및 배포, 언어의 특성 활용, 네트워크 기초 활용, 애플리케이션 설계, 인터넷과 ip 주소 체계, 백준, sw 기초 기술 활용, 운영체제 기초 활용, CMS, 게시판 프로젝트, 공통 모듈 설계, 소프트웨어 아키텍처, 프로그래밍 언어의 개요, 객체지향 설계, 애플리케이션 테스트 수행, MSA, 오답노트, 프로그래밍 언어 활용, spring boot,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

  • 티스토리 이전

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/07   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바