docker logstash
docker pull docker.elastic.co/logstash/logstash:6.6.2
폴더 만들기(컨테이너 파일 마운트에 사용)
mkdir /opt/sns/logstash/config
관련 프로파일 생성
다음 파일을/opt/sns/logstash/config 아래에 놓으십시오
logstash.yml(빈 파일이면 됨)
log4j2.properties
logger.elasticsearchoutput.name = logstash.outputs.elasticsearch
logger.elasticsearchoutput.level = debug
pipelines.yml
- pipeline.id: my-logstash
path.config: "/usr/share/logstash/config/*.conf"
pipeline.workers: 3
*.conf 파일
input {
jdbc {
jdbc_connection_string => "jdbc:mysql://***.***.***.***:3306/***?useUnicode=true&characterEncoding=utf-8&autoReconnect=true&failOverReadOnly=false&serverTimezone=GMT%2B8"
jdbc_user => "****"
jdbc_password => "*****"
jdbc_driver_library => "/usr/share/logstash/config/mysql-connector-java.jar"
jdbc_driver_class => "com.mysql.jdbc.Driver"
jdbc_paging_enabled => "true"
jdbc_page_size => "5000"
use_column_value => true
tracking_column => "sid"
record_last_run => true
lowercase_column_names => "false"
last_run_metadata_path => "/usr/share/logstash/config/*****_last.txt"
statement => "select *
from **** table
where table.sid > :sql_last_value
ORDER BY table.sid"
schedule => "* * * * *"
type => "TYPE_NAME"
}
}
output {
if[type] == "TYPE_NAME"{
elasticsearch {
hosts => ["***.***.***.***:9200"]
index => "***"
document_type => "TYPE_NAME"
document_id => "%{sid}"
}
}
}
만약 conf 파일에서 위에서 연결 데이터베이스를 사용해야 한다면 jdbc 패키지가 필요합니다.jdbc 패키지를 마운트된/opt/sns/logstash/config 아래에 놓을 수 있습니다
컨테이너 생성 및 시작
docker run -d --name logstash --network host --restart=always -it -v /opt/sns/logstash/config:/usr/share/logstash/config docker.elastic.co/logstash/logstash:6.6.2
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
Swarm의 도커 비밀이 게시물에서는 Redis를 사용한 실제 시나리오 예제를 제공하여 사용 방법을 보여주고자 합니다. Docker 기술에 대한 기본 지식 Docker Swarm 오케스트레이터에 대한 기본 지식 "Docker Swarm ...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.