데이터 엔지니어 기술 블로그

데이터 엔지니어 기술 블로그

  • 분류 전체보기 (73)
    • 데이터 엔지니어링 (48)
    • Infrastructure (1)
    • 기술 (3)
    • AWS (4)
    • 데이터 엔지니어링 위클리 (8)
  • 홈
  • 태그
  • 방명록
RSS 피드
로그인
로그아웃 글쓰기 관리

데이터 엔지니어 기술 블로그

컨텐츠 검색

태그

스파크 카프카 Data engineering spark docker 에어플로우 MySQL kafka AWS spark streaming 데이터 엔지니어 Redshift Ai 데이터 엔지니어링 data engineering weekly airflow delta lake Data Engineer 데이터 s3

최근글

댓글

공지사항

아카이브

failOnDataLoss(1)

  • [🔥Spark] StreamingQueryException: Cannot find earliest offsets of Set(topic-name-0)

    전체 에러 메세지 StreamingQueryException: Cannot find earliest offsets of Set(topic-name-0). Some data may have been missed. Some data may have been lost because they are not available in Kafka any more; either the data was aged out by Kafka or the topic may have been deleted before all the data in the topic was processed. If you don't want your streaming query to fail on such cases, set the source opt..

    2021.11.02
이전
1
다음
아이템즈
© 2025 Items. All rights reserved.

티스토리툴바