목록Build-up/NiFi (2)

취미생활에 진심인편

[NiFi] 1.Get File -> 데이터 정제 -> DB INSERT

1.목적 CSV 파일을 가져와서 약간의 데이터 정제를 거친 이후에 DB Insert 하기 2.프로세스 GetFile -> UpdateRecord -> UpdateAttribute -> Replace -> ConvertJSONToSQL -> PutSQL 3.상세프로세스 1)GetFile 2)UpdateRecord 데이터 정제를 위해 CSV로 읽어서 JSON으로 Write하기 ㄴConfiguration에 들어가 Reader,Writer 생성해줘야 함 추가로, 날짜 필드 포맷 변경 JSON으로 Write할 때 Schema를 이용해서 데이터 필드 형식 지정하기 우선 Write할 때 Schema를 사용한다고 설정을 해주고, Schema도 생성해야 함 +눌러서 Property 추가해주고 그 옆에 체크박스로 Vali..
Build-up/NiFi 2022. 2. 4. 11:27
(나중에 해보려고 쓰는) NiFi 설치_Window

대리님이 알려주신대로 기록하기... 1.JDK 설치 2.NiFi 설치 https://nifi.apache.org/download.html nifi-1.15.3-bin.zip 설치 Apache Downloads We suggest the following site for your download: https://dlcdn.apache.org/nifi/1.15.3/nifi-1.15.3-bin.zip Alternate download locations are suggested below. It is essential that you verify the integrity of the downloaded file using the PGP signature (.asc f www.apache.org 3.nifi pr..
Build-up/NiFi 2022. 2. 4. 10:12
이전 Prev 1 Next 다음