2020-09-20 06시 개발자 글 모음 | "진로" 외 1개 이야기

nifi 로 API 수집 및 오브젝트 스토리지에 저장하기 by 한지수 about Python

• api 를 호출하여 데이터를 매일 수집하고 저장하는 파이썬 소스들을 인터넷에서 쉽게 찾을 수 있지만 nifi 의 invokehtttp processor 를 사용하면 flowfile 을 통해 어떻게 작업이 진행되고 있는지
• 위 이미지에서 AWSCredentialsProviderControllerService 컨트롤러 설정에서 입력한 Key 값은 sensitive value 로 보여지지는 않지만 클릭해서 보면 저 부분에 Access/Secret Key 값을 입력하면 된다
• 연결된 flowfile 을 실행 시키면 제일 마지막 PutS3Object 프로세서에서 Data Provenance 를 확인해보면 오브젝트 스토리지로 drop 한 것을 확인할 수 있다

---

진로 by 김학진

• 적당한 양의 돈으로 살아가는 것일텐데
• '그 적당한 양의 돈을 버는데 도움을 줄까?'라는 생각이 든다
• 되지도 않는 일에 목매고 기다리는 것보다 어떻게든 선택을 하는 것이 낫겠지

---