[ETL] 이기종 DBMS 데이터 타입 매핑 표준 정리: PostgreSQL, Iceberg, Spark
여러 DBMS의 데이터 타입을 표준 타입으로 정규화하고 PostgreSQL, Iceberg, Spark 타입으로 변환하는 매핑 표를 정리한다.
Recent posts
[Review] 『그로킹 동시성』 : 데이터엔지니어 관점에서 동시성 이해하기
데이터엔지니어링 필수 개념인 동시성과 병렬성에 대한 이해
[Spark] 스파크 JDBC 파티셔닝 최적화
스파크에서 JDBC 파티셔닝을 활용해 데이터 읽기 최적화 하기
[Iceberg] 아파치 아이스버그 주요 개념 정리
Apache Iceberg가 데이터 레이크의 파일을 테이블로 관리하는 방식과 카탈로그, 스냅샷, 매니페스트, 데이터 파일의 계층 구조를 정리한다.
[Data] 아파치 씨터널을 활용한 CDC 데이터 동기화
데이터 통합 플랫폼 씨터널을 활용한 CDC 데이터 동기화