하루노트

  • 홈
  • 태그
  • 미디어로그
  • 위치로그
  • 방명록

hdfs 1

Kafka connect를 활용하여 HDFS에 데이터 넣기

이전에는 Kafka 데이터를 Elasticsearch에 넣어봤는데, 이번에는 HDFS에 넣어보고자 한다. 이전글: Kafka connect를 활용하여 Elasticsearch에 데이터 넣기 Kafka connect를 활용하여 Elasticsearch에 데이터 넣기 Kafka, Elasticsearch 설치는 본문에서 다루지 않는다. (개념은 생략하며 sink connector만 다룬다.) 개요 아주 간략하게 Kafka Connect에 대해서만 설명하고 넘어가도록 한다. Kafka Connect를 사용하기 위해서는. inoino9.tistory.com 설정 connect-distributed.properties 파일을 사용한다. (기본으로 제공된 파일 그대로 사용) 실행 bin/connect-distrib..

BigData/Kafka 2023.03.14
이전
1
다음
더보기
프로필사진

빅데이터를 탐구하는 개발자입니다.

  • 분류 전체보기 (40)
    • 하루노트 (15)
      • 리눅스 (3)
      • 기술 트렌드 (6)
    • BigData (21)
      • Kafka (5)
      • Hadoop (3)
      • Spark (1)
      • ElasticSearch (8)
      • Kibana (1)
    • Honey Pot (4)
      • Cuckoo Sandbox (3)

최근글과 인기글

  • 최근글
  • 인기글

Calendar

«   2025/06   »
일 월 화 수 목 금 토
1 2 3 4 5 6 7
8 9 10 11 12 13 14
15 16 17 18 19 20 21
22 23 24 25 26 27 28
29 30

Copyright © Kakao Corp. All rights reserved.

티스토리툴바