파일전송을 KAFKA PRODUCER 쪽으로 보내기위한 AGENT 단의 구현이 필요 했다.
보통 JDBC 등의 소스에서는 kafkaconnector 가 지원하는데,
단순 경로에서 spool 하여 Producer 쪽에 쏴주는 kafkaconnector 는 존재 하지 않기 때문에 ,
직접구현하고 github 에 구현하였다.
https://github.com/Sangil55/SimpleFileConnetor
'spark,kafka,hadoop ecosystems > apache.kafka' 카테고리의 다른 글
| kafka connect (0) | 2018.11.20 |
|---|---|
| kafka vs flink vs esper vs storm vs spark (0) | 2018.11.20 |
| kafka-개요 (0) | 2018.11.20 |
| kafka 로그 설정 에 대하여 (0) | 2018.10.17 |
| 1. Kafka 설치 및 producer & Consumer test (0) | 2018.06.21 |