Data/ELK41 [2021.07.27] 인턴 +148 How to run elasticsearch and kibana in the background on Linux servers?(daemon run) [2021.07.27] 인턴 +148 How to run elasticsearch and kibana in the background on Linux servers?(daemon run) 해당 게시글은, elasticsearch 와 kibana를 리눅스 서버에서, 백그라운드(데몬)으로 실행하는 방법이다. 이 방법을 사용하면 편리한점은, 항상 부팅시 elk 실행경로로 이동하여, 실행해줘야 한다는 번거로움이 사라지며, 언제든지 24시간내에 사용자들이 접속할 수 있다는 것이 장점이다. 자, 이제 백그라운드로 실행하는 방법에 대해 알아 보도록 하자. -------------------------------------------------------------------------------------------.. 2021. 7. 27. [2021.07.26] 인턴 +147 Tips)How to display on a map using latitude and longitude in elasticsearch?(+ 공기질 데이터 수집 하는 방법(포스트맨 POSTMAN), geoip 변환 시 중요한점) [2021.07.26] 인턴 +147 Tips)How to display on a map using latitude and longitude in elasticsearch?(+ 공기질 데이터 수집 하는 방법(포스트맨 POSTMAN), geoip 변환 시 중요한점) 해당 게시글은, 아파치 로그(apache log) 또는 IP로 maps에 표시하는 것이 아니다. 단지, 위도와 경도로만 maps(geoip) 에 표시하는 방법을 알아보자. ---------------------------------------------------------------------------------------------------------------------------- 우선, kibana에 접속하여 dev tools에 아.. 2021. 7. 26. [2021.07.23] 인턴 +144 How to solve error : index [.async-search] blocked by: [TOO_MANY_REQUESTS/12/disk usage exceeded flood-stage watermark, index has read-only-allow-delete block] ? [2021.07.23] 인턴 +144 How to solve error : index [.async-search] blocked by: [TOO_MANY_REQUESTS/12/disk usage exceeded flood-stage watermark, index has read-only-allow-delete block] ? 해당 에러는 logstash로 데이터를 넣을 때 발생하는 에러이다. index [.async-search] blocked by: [TOO_MANY_REQUESTS/12/disk usage exceeded flood-stage watermark, index has read-only-allow-delete block] 발생 원인 -> ELK가 깔린 Linux 서버에서, root 저장소를.. 2021. 7. 23. [2021.07.22] 인턴 +143 How to create Multiple tables conf file in logstash? (+xpack elasticsearch include id & password ) [2021.07.22] 인턴 +143 How to create Multiple tables conf file in logstash? (+xpack elasticsearch include id & password ) 해당 게시글은, 다중 테이블을 넣기 위한 conf 파일을 파이썬 코드로 짠 것이다. + Xpack을 설정하면, jdbc -> elasticsearch로 보낼 때, id & password 가 필요하다. * 해당 게시글은 elasticsearch id & password가 포함되어 있음. db_tables = [ "Classification_diseases", "Highblood_pressure ", "aged_disease ", "blood_pressure_sugar ", "blood_test.. 2021. 7. 23. [2021.07.22] 인턴 +143 Tips) How to save mysql data only once in logstash without duplicate data? [2021.07.22] 인턴 +143 Tips) How to save mysql data only once in logstash without duplicate data? 해당 게시글은, logstash를 이용하여, mysql db에 접근하여, elasticsearch로 중복 데이터 없이 단 한번만 보내는 방법이다. 예를 들자면 db 데이터의 row 행 값이 960이라면, 960만 들어가게 한다. why ? -> 정확한 데이터로 분석을 해야 하기 때문에 중복 값이 필요가 없다. 그럴려면, conf 파일에 해당 기능을 추가 해줘야 한다. test.conf input { jdbc { jdbc_driver_library => "/usr/share/java/mysql-connector-java-8.0.25.ja.. 2021. 7. 23. [2021.07.22] 인턴 +143 How to solve error : Could not index event to Elasticsearch? [2021.07.22] 인턴 +143 How to solve error : Could not index event to Elasticsearch? 해당 에러는 logstash를 이용하여, elasticsearch에 데이터를 넣는 과정에서 발생하는 에러이다. Could not index event to Elasticsearch Could not index event to Elasticsearch 해결방법 -> 이것은 db에 담겨진 컬럼(속성) 값이 한글이기 때문에, 에러가 발생하는 것임. -> 컬럼(속성)을 꼭 영어로 해주자 2021. 7. 23. 이전 1 2 3 4 5 ··· 7 다음