본문 바로가기

Data72

[2022.04.28] How to set env ELK Stack on Ubuntu 20.04 ? (v7.x.x) [2022.04.28] How to set env ELK Stack on Ubuntu 20.04 ? (v7.x.x) elasticsearch.yml path.data: /var/lib/elasticsearch path.logs: /var/log/elasticsearch network.host: 0.0.0.0 http.port: 9200 discovery.type: single-node xpack.security.enabled: true # 실행 안된다면 7번 line 주석처리 vmadmin@vmadmin-virtual-machine:/usr/share/elasticsearch/bin$ ./elasticsearch-setup-passwords auto Initiating the setup of passwo.. 2022. 4. 28.
[2022.04.27] How to install MySQL on ubuntu20.04? (+ Mount & mysql external connect) [2022.04.27] How to install MySQL on ubuntu20.04? (+ Mount & mysql external connect) MySQL 설치 (PASS) wget dev.mysql.com/get/mysql-apt-config_0.8.20-1_all.deb sudo dpkg -i mysql-apt-config_0.8.20-1_all.deb sudo apt-get update sudo apt-get install mysql-server sudo apt-get update 실행 시 발생하는 에러 1 Err:1 http://repo.mysql.com/apt/ubuntu focal InRelease The following signatures couldn't be verified bec.. 2022. 4. 27.
[2022.04.26] How to Install ELK Stack on Ubuntu 20.04 ? (v8.x.x) [2022.04.26] How to Install ELK Stack on Ubuntu 20.04 ? (v8.x.x) ELK 시스템 구축 * 2022-04-26 ELK (version:8.1.3) * Ubuntu_20.04_amd64 1. Linux(Ubuntu20.04)에서 JAVA 및 vim 설치 sudo apt-get update sudo apt-get upgrade sudo apt-get install openjdk-11-jdk java -version + 파일 편집기 sudo apt-get install vim sudo apt install curl 2. wget 으로 ELK 파일 가져오기 wget https://artifacts.elastic.co/downloads/elasticsearch/el.. 2022. 4. 26.
[2022.01.12] How to solve DeprecationWarning on jupyter notebook? [2022.01.12] How to solve DeprecationWarning on jupyter notebook? 해당 게시글은 데이터를 크롤링 할 때 아래와 같은 경고창을 없애기 위한 방법이다. :9: DeprecationWarning: executable_path has been deprecated, please pass in a Service object driver = webdriver.Chrome('C:\/chromedriver.exe') # 제어하기 위해 변수 선언 -> selenium을 jupyter notebook 에서 실행 하면 webdriver는 정상적으로 실행 되는데 경고창이 자꾸 발생 한다. 해결 방법 import warnings warnings.filterwarnings(act.. 2022. 1. 12.
[2022.01.12] 잡플래닛 특정기업 면접 데이터 크롤링 [2022.01.12] 잡플래닛 특정기업 면접 데이터 크롤링 이번 게시글은 면접 준비를 위해, 데이터를 모으기 위해 크롤링을 할 것이다. from selenium import webdriver import time # login screen move def login_screen_url() : global driver driver = webdriver.Chrome('C:\/chromedriver.exe') # 제어하기 위해 변수 선언 driver.maximize_window() ### 창의 해상도 크기 최대화 (전체화면) ### url = "https://www.jobplanet.co.kr/users/sign_in?_nav=gb" # 이동할 링크주소를 변수에 저장 driver.get(url) # 해당 링.. 2022. 1. 12.
[2021.09.09] How to solve Error: Port 5601 is already in use. Another instance of Kibana may be running! [2021.09.09] How to solve Error: Port 5601 is already in use. Another instance of Kibana may be running! Port 5601 is already in use. Another instance of Kibana may be running! 해당 게시글은, kibana를 실행 하였을 때 위와 같은 에러를 해결하기 위해 작성하였다. 해결방법 1 * lsof -i :port번호 (실행중인 port번호 검색) ubuntu@ip-172-31-5-244:/usr/share/kibana/bin$ sudo lsof -i :5601 -> 위의 명령어로 5601 포트를 어떤 프로세스가 사용하고 있는지 확인할 수 있다. COMMAND PID USE.. 2021. 9. 9.