S3의 csv를 RDS로 읽기(데이터 Pipeline을 통해)

885 단어 DataPipelineAWS
AWS의 Data pipeline을 사용하여 S3의 csv를 RDS(상)에서 간단하게 찾았기 때문이다.

설정


AWS의 DataPipeline 대시보드에서create new piperline을 눌러 다음을 설정합니다.
  • name: 적절한 이름
  • description: 적절
  • source:load S3data into RDS MySQL
  • 선택
  • RDS MySQL pass: mysql pass
  • inputs3 file path: 가져올 csv 파일
  • insert sql query: 쿼리 삽입
  • INSERT INTO log_test (col1, col2, col3, col4) VALUES (?, ?, ?, ?);
  • values 다음은안 그러면 안 움직여.플레이스홀더죠?
  • RDS MySQL connection string: 목적지 mySql 호스트 정보 연결
  • 예: jdbc:mysql://hoge.fuga.ap-northeast-1.rds.amazonaws.com:3306/table_name
  • 원하는 대로
  • logging:enabled를 강력히 추천합니다.로그를 토로할 s3 디렉터리 지정
  • 10분 정도 인내심을 가지고 기다리면 테이블에 csv 데이터가 있습니다.

    좋은 웹페이지 즐겨찾기