목록configure (2)

Gibbs Kim's playground

[ElasticStack-8] Elasticsearch indexing json through Logstash

서울지하철 데이터(JSON)를 가지고 로그스태시(Logstash)를 사용하여 엘라스틱서치(Elasticsearch)에 인덱싱한 과정을 기록합니다. (Version based 7.6.2) ### json 파일의 key-value pair status example { "DESCRIPTION" : {"STN_PHONE":"전화번호","STN_LINE":"호선""STN_NM":"역명","STN_ZIP_CODE":"우편번호","STN_ADDR":"지번주소","STN_IDX":"연번","STN_ROAD_ADDR":"도로명주소"}, "DATA" : [ {"stn_zip_code":"157-857","stn_nm":"방화역","stn_line":"5","stn_phone":"02-6311-5101","stn_road..
Tech 기록지/Elastic Stack 2020. 5. 29. 10:48
[ElasticStack-1] Logstash configure file form (based on 5.x ~ 6.x versions)

Logstash는 raw data를 Elasticsearch로 업로드하는 기능을 수행한다.기본 구조는 다음과 같다.(input, filter, output) # Context is written in configure file (ex: test.conf)input { file { path => "FILE_PATH" # can use asterisk (*) beside file name; e.g. test_1234.csv, test_23456.csv -> test_*.csv start_position => "beginning" sincedb_path => "/dev/null" }}filter { csv { separator => "," ..
Tech 기록지/Elastic Stack 2018. 10. 31. 17:15
이전 Prev 1 Next 다음