본문 바로가기

Data/ELK41

[2021.05.20] 인턴 +80 Tag Cloud(WordCloud) 시각화 방법 [2021.05.20] 인턴 +80 Tag Cloud(WordCloud) 시각화 방법 Visualize Library -> Create visualization -> Aggredgation based -> Tag Cloud 클릭해줍니다. -> 나원단, 홍길동, 사이타마 등 단어로 나타난 것이, 워드 클라우드(Tag Cloud)이다. MAPS (여러개를 추가 해야 예쁘게 꾸밀 수 있음) * 배경 검은색 버전 EMS Basempas -> RoadMAP - Dark(Title service) * Tracks 지도에 라인 선긋기 * heat_map -> 주변에 분포 형광색으로 나타냄 2021. 5. 20.
[2021.05.17~20] 인턴 +77 최종본 jdbc_plugin multi_table loop in Python (CSV변환 및 editplus 꿀팁 포함) [2021.05.17~20] 인턴 +77 최종본 jdbc_plugin multi_table loop in Python (CSV변환 및 editplus 꿀팁 포함) 회사에 다니게 되면, 하나의 스키마(데이터베이스)로 정의되어 있는 곳에 수 많은 table 값들이 저장되어있다. * 예를들면 food_database(스키마)에 136개의 tables 값이 저장된 상태 -> 그러면, 하나하나 select * from tables1, select * from tables2 ~~~ select * from tables136 까지 할 수는 없다. -> 이 수 많은 반복 작업을 하지 않기 위해, 파이썬으로 코드를 작성하였다. -> 1. 해당 데이터베이스의 테이블을 드래그 하여 컨트롤 + C 로 복사한다. -> 2. E.. 2021. 5. 17.
[2021.05.14] 인턴 +74 AWS Linux(Ubuntu:20.04) ELK 설치 및 실행방법 [2021.05.14] 인턴 +74 AWS Linux(Ubuntu:20.04) ELK 설치 및 실행방법 처음에는, localhost(PC) -> AWS RDS로 접근하여 모든 데이터를 가져오려고 했다. 1. AWS 터미널에서 MYSQL 접속 2. 권한을 부여할 계정만듬 3. 방금 만들어진 새로운 계정에 모든 권한 부여, -> 에러발생(stackoverflow에 올린 질문) https://stackoverflow.com/questions/67517572/how-do-i-grant-permissions-to-users-in-mysql How do I grant permissions to users in mysql? How do I grant permissions to users in MySQL? This i.. 2021. 5. 14.
[2021.05.06] 인턴 +66 Query DSL을 통해 원하는 필드 값만 추출 하는 방법 [2021.05.06] 인턴 +66 Query DSL을 통해 원하는 필드 값만 추출 하는 방법 www.elastic.co/guide/en/elasticsearch/reference/current/query-filter-context.html Query and filter context | Elasticsearch Guide [7.12] | Elastic Use query clauses in query context for conditions which should affect the score of matching documents (i.e. how well does the document match), and use all other query clauses in filter context. www.e.. 2021. 5. 6.
[2021.05.04] 인턴 +64 Elasticsearch Query DSL 개념 및 사용법 [2021.05.04] 인턴 +64 Elasticsearch Query DSL 개념 및 사용법 * 해당 게시글은 아래의 document를 참고하여, 중요한 내용을 주황색으로 풀어다 씀 esbook.kimjmin.net/05-search/5.1-query-dsl 5.1 풀 텍스트 쿼리 - Full Text Query 이 문서의 허가되지 않은 무단 복제나 배포 및 출판을 금지합니다. 본 문서의 내용 및 도표 등을 인용하고자 하는 경우 출처를 명시하고 김종민(kimjmin@gmail.com)에게 사용 내용을 알려주시기 바랍 esbook.kimjmin.net -> Elasticsearch Query DSL document * Elasticsearch Query DSL란? -> Elasticsearch 는 검색을.. 2021. 5. 4.
[2021.04.16] 인턴 +46 Linux(Ubuntu18.04) - Apache log analysis (geoip 사용) [2021.04.16] 인턴 +46 Linux(Ubuntu18.04) - Apache log analysis (geoip 사용) * Linux 복사하기 명령어 cp 파일명 경로 cp geoip_test1.conf /usr/share/logstash/bin * Linux 삭제하기 명령어 rm -rf 파일명 * PC 와 Linux(Ubuntu)에서 ELK를 설치 및 사용 하면서 느낀점 -> 같은 사양이라도 ELK를 Linux(Ubuntu)에서 깔아서 출력하는게 PC보다 렉이 훨 안걸린다. 결론, ELK를 Linux(Ubuntu)에 설치 할 줄 알면, Linux를 적극적으로 사용하자. * PC 와 Linux(Ubuntu)에서 geoip를 하기 위해선? 1. kibana에 들어가서 dev tools 검색 후 들.. 2021. 4. 16.