embulk
-
Embulk Maria DB TimeZone 에러 해결법(docker 환경)Data Engineering/Embulk 2021. 6. 4. 16:16
Embulk를 사용하다가 MariaDB -> Postgresql 로 데이터를 이관하는 작업을 진행을 맡았다.. 그리고 테스트로 도커 환경에서 시작했고, 처음에 jdbc 오류부터 해서 오만가지 에러가 떴다.. 1번 에러 java.lang.RuntimeException: java.lang.ClassNotFoundException: com.mysql.jdbc.Driver 아니 이건 path 설정을 몇번을 하고, docker 내에 넣어도 안되고, 외부에 빼놔도 인식을 못했다. 그래서 그냥 embulk 옵션에서 driver_path 옵션을 빼 버렸다..ㅋㅋㅋ 2번 에러 The server time zone value 'KST' is unrecognized or represents more than one time..
-
데이터의 이동을 쉽게 해보자! Embulk 사용하기 (Test용 DB설치 포함, postgresql)Data Engineering 2021. 5. 21. 10:35
Homebrew(홈브류) 설치 및 사용법, MacOS에서 프로그램을 쉽게 다운로드 및 삭제할 수 있는 패키지 관리자 설치전 사이트 참고 바랍니다. postgresql은 Homebrew를 이용해서 설치를 진행합니다. 바로 테스트용 brew install postgresql initdb /usr/local/var/postgres pg_ctl -D /usr/local/var/postgres start createdb test1 # login db psql test1 Embulk란? 출처 : https://jungwoon.github.io/bigdata/2017/08/31/Embulk_Setup.html Embulk 설치 및 기본 사용법 | Jungwoon Blog Embulk 설치 및 기본 사용법에 대해서 알..