티스토리

뚠뚠

검색하기

블로그 홈

뚠뚠

blog.namthplayground.com/m

새로 것, 궁금한 것을 기록한 블로그입니다.

구독자: 0

방명록 방문하기

주요 글 목록

AWS EC2 인스턴스 볼륨추가 서버를 구축하고 데이터를 저장해놓는 인스턴스의 하드디스크 용량을 추가하는 글을 작성해보려고 한다. 환경 EC2: t2.micro volume: ext4 포맷 5GB 볼륨 생성 1. AWS console에 접속한다. https://console.aws.amazon.com/ec2/ 2. 사이드 메뉴에서 볼륨을 선택한다. 3. 볼륨 생성 버튼을 누른다. t2.micro 인스턴스의 기본 볼륨 크기는 8GB이다. 기존 서버 두 개를 돌리고 있으므로 8GB가 2개 있으며 16GB는 main서버에 전에 추가했던 볼륨이다. 4. 볼륨 설정을 하고 생성한다. 해당 글을 작성하기 위해서 볼륨을 추가하므로 작은 크기의 볼륨을 생성했다. 볼륨 유형: 볼륨의 유형을 설정 가능 크게 성능을 요하지 않아 gp2로 설정 크기: 볼륨.. 공감수 0 댓글수 0 2022. 10. 12.
[ubuntu]Flask 서버 service 등록 작성한 Flask 서버를 부팅 시 자동으로 실행하기 위하여 service에 등록하기로 하였다. Service이란 linux에서 서비스란 백그라운드에서 실행되며, 시스템이 시작할 때 동작하는 것을 의미한다. 그래서 주로 시스템과 관련된 프로그램이 서비스에 등록되어있으며, 서드파티 서비스들(nginx, mysql)은 사용자가 시스템이 시작할 때 작동 여부를 선택할 수 있다. 부팅 시 자동적으로 실행되길 원해 Flask 서버도 service등록하려고 한다. Service 파일 생성 서비스에 등록을 하기위해서 service 파일을 작성해야 한다. 이번 서버의 service 파일이다. root 권한으로 작성한다. 옵션 전체를 설명하기에는 너무 많아 사용한 옵션들만 작성하였다. service 섹션만은 반드시 필요하.. 공감수 0 댓글수 0 2022. 10. 7.
[Flask] Flask 객체 생성시 __name__은 왜 넣을까 Flask 객체를 생성할 때 생각 없이 __name__을 넣는다. 다른 글을 쓰다가 __name__을 왜 넣어야 하는지를 몰라서 이번 글을 적으며 조사했다. __name__ 이란 파이썬으로 코드를 작성하다 보면 __name__이란 bulit-in 변수를 사용할 때가 있다. 내 생각으로는 가장 많이 사용할 때는 처음 시작하는(entry point) 코드에서 사용을 할 때가 가장 많지 않나 싶다. python으로 직접 실행 시 처음 실행되는 파일의 __name__ 값은 __main__이 되고 나머지 불러온 값들의 __name__ 값은 파일의 이름이 되는 원리를 이용하여서 주로 사용한다. 그 외에도 blueprint 객체를 생성할 때처럼 사용하는 경우를 많이 보았다. blueprint의 경우 아래와 같이 설명.. 공감수 1 댓글수 0 2022. 10. 5.
주식 뉴스 프로젝트 Flask 서버 주식 뉴스 분석 프로젝트 Flask 주제부터는 저장되어있는 분석 데이터와 해당 날짜의 실제 주식거래금액을 같이 출력하는 웹 서버를 제작할 예정이다. 개발환경 OS: ubuntu 20.04 언어: python 3.8.10 python 의존성 yfinance==0.1.74 # 실제 주식 가격을 가져오기 위한 모듈 Flask==2.2.2 # 웹 서버 프레임워크 gunicorn==20.1.0 # WSGI python-dotenv==0.21.0 # .env 파일 읽기 위해 pytz==2022.2.1 # KST(대한민국 표준시) 시간대를 불러오기 위해 pymongo==4.2.0 # mongodb 연결을 위한 모듈 pyflakes==2.5.0 # 코드 검사용 모듈 PyJWT==2.4.0 # jwt 토큰을 위한 모듈(.. 공감수 0 댓글수 0 2022. 10. 2.
[mysql] mysql 삭제시 관련 파일 모두 삭제 mysql을 삭제 후 다시 설치해서 실행하는데 삭제 전 데이터들이 남아있어서(root 암호) 해결하기 위해 찾아본 결과를 기록한다. mysql service 정지 삭제 전 안전하게 서비스부터 정지시킨다. # service 정지 sudo systemctl stop mysql.service mysql 삭제 설정 파일까지 같이 삭제되도록 'purge' 옵션을 주어 삭제했다. 삭제 후 필요 없는 다른 의존성 패키지도 삭제한다. # mysql-server 삭제 sudo apt remove --purge mysql-server # 의존 패키지 삭제 sudo apt autoremove --purge 설정 파일 삭제 남아있던 두 개의 경로의 폴더를 삭제했다. /etc/mysql : 설정 파일이 존재했음. /var/li.. 공감수 0 댓글수 0 2022. 9. 30.
AWS EC2 Mysql, MongoDB 설치 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 이번 글에서는 데이터베이스 설치에 대해서 쓰려고 한다. 설치할 데이터 베이스는 Mysql, MongoDB 두 개를 설치하려고 한다. DB 버전 mysql: 8.0.30 mongo: 5.0.9 MySql MySql 설치 패키지 매니저(apt)를 사용할 것이므로, 매니저를 업데이트해준다. # 패키지 매니저 업데이트 sudo apt update mysql 서버를 설치를 할 예정이므로, 'mysql-server'을 설치해준다. 특정 버전의 mysql 서버를 설치 시 아래의 명령어로 치면 된다. # mysql-server 설치 sudo apt install mysql-server # 특정 버전 mysq.. 공감수 4 댓글수 1 2022. 9. 30.
AWS EC2 nginx + letsencrypt 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 이번 글에는 고정된 IP와 도메인을 구매, 연결하였으니 이제 ssl을 설정하려고 한다. 서버는 nginx을 사용하였고, ssl 인증서 발급은 letsencrypt을 사용하였다.(nginx + letsencrypt) NGINX Nginx 설치 ssl인증서를 발급 전 nginx을 설치한다. # 패키지 리스트 업데이트 sudo apt update # nginx 설치 sudo apt install nginx # nginx 상태 확인 systemctl status nginx Nginx 리버스 프록시 설정 구입한 도메인의 특정 경로로 http 요청이 올 때, 미리 생성한 주식 뉴스 서버에게 요청을 전달하.. 공감수 0 댓글수 0 2022. 9. 29.
AWS EC2 IP고정(탄력적IP) 및 도메인 등록 및 연결 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 이번 글에서는 생성된 EC2 인스턴스에게 고정된 IP을 부여하고, 해당 IP를 통해 도메인을 등록하는 방법을 적으려고 한다. 생성된 2개의 인스턴스 중 프록시와 DB서버 역할을 하는 서버에게만 해당 내용을 적용할 예정이다. IP와 DNS등록은 aws에서 진행했다. IP: aws 탄력적 IP DNS: aws Route53 IP 고정(탄력적 IP) 1. 탄력적 IP 할당 aws console -> EC2 서비스 -> 네트워크 및 보안 -> 탄력적 IP로 들어간다. 탄력적 IP화면에서 탄력적 IP 할당 버튼을 누른다. 정보를 입력하고 할당을 누른다. 딱히 수정할 내용이 없어 바로 할당을 눌렀다. .. 공감수 3 댓글수 2 2022. 9. 28.
AWS EC2 인스턴스 생성 및 접속하기 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 주식 분석 프로젝트에 사용할 서버 1개와, 프록시 서버 및 DB서버로 사용할 서버 1개. 총 2개의 서버를 구축하기로 하였다. 서버는 aws의 EC2를 사용하여서 구축을 하였다. EC2 생성 1. 콘솔 로그인 해당 링크를 통하여 aws콘솔에 로그인을 진행한다. https://aws.amazon.com/ko/console/ 2. 콘솔 EC2 생성 콘솔에서 EC2 서비스를 선택한다. 왼쪽 사이드 바에서 인스턴스를 클릭해준다. 인스턴스 화면에서 우측 위 인스턴트 시작 버튼을 눌러준다. 누르면 여러 가지 선택 및 입력화면이 나타나는데 크게 6부분을 입력하면 된다. 인스턴스 이름 프록시 서버의 경우 .. 공감수 1 댓글수 2 2022. 9. 26.
[apt] apt upgrade시 특정 패키지만 업그레이드 하기 서버 운영 중 특정 패키지만 업그레이드를 하고 싶어 찾아본 결과를 기록합니다. 서버 환경 ubuntu 20.04 aws ec2, t2 micro 특정 패키지 업그레이드 명령어 apt install의 --only-upgrade 옵션을 사용하여 특정 패키지만 업그레이드합니다. 패키지의 리스트는 띄어쓰기로 구분됩니다. sudo apt install --only-upgrade pack1 pack2 ... 업그레이드 가능한 패키지 목록 apt list --upgradable 패키지 리스트 업데이트 sudo apt update 업그레이드 가능한 모든 패키지 업그레이드 sudo apt upgrade -y 필요 없는 패키지 삭제 sudo apt autoremove 공감수 0 댓글수 0 2022. 9. 26.
구글 클라우드 빌드(GCP build + GitHub)을 사용한 지속적 배포(CD) 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 news crawl 단계의 마지막 단계이다. 배포에 필요한 dockerfile까지 작성이 완료되었으므로 GCP cloudrun에 배포를 하고자 한다. 현재 보유 중인 서버는 너무 작아서 docker image를 빌드를 할 수가 없고, 자동적으로 빌드 배포되는 것을 원해서 GCP build를 이용하기로 했다. 빌드 및 배포는 아래와 같이 동작한다. GitHub main브랜치에 push GCP build에서 해당 브랜치의 push 이벤트 발생 시 빌드 시작(cloudbuild.yaml) GCP build에서 빌드가 완료되면 GCP cloud run에 배포(cloudbuild.yaml) GITHUB 트리.. 공감수 1 댓글수 0 2022. 9. 26.
크롤링, 감정분석 서버 작성 및 dockerfile 작성 작성 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 핵심적인 로직들을 작성하였으므로 이제 http 요청에 응답 가능하게 웹 서버를 작성하고, 배포를 위해 dockerfile을 작성할 것이다. 웹 서버 웹 서버 프레임워크는 Flask를 사용하여 작성하였다. 구동은 gunicorn으로 구동할 예정이다. POST body의 데이터에서 크롤링할 주제의 이름과 언어의 코드를 가져온다. (subject, source_lang) 라우팅 되는 함수의 데코레이터 중 abstract_request 함수가 있는데, 원래는 cors 및 jwt토큰 검사를 위해 request객체를 추출하는 함수였지만, 여기서는 제대로 사용하지 않고 있다. (modules/req_.. 공감수 0 댓글수 0 2022. 9. 23.
결과 저장(GCP Storage, MongoDB) 결과 저장 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 크롤링 및 예측을 하였으므로 이번 글에는 결과를 저장하는 코드 및 방법에 대해서 작성해보려고 한다. 크롤링, 분석 결과는 2가지 장소에 저장되는데, 구글 스토리지(GCP Storage), mongodb에 저장이 된다. 구글 스토리지에는 크롤링 결과와 분석 결과가 같이 저장되며, mongodb에는 분석 결과만 저장이 된다. 구글 스토리지 구글 스토리지에 크롤링 결과와 분석 결과가 저장되는데, 저장 경로는 아래와 같이 저장했다. # 경로 예시 원본 뉴스 제목: tesla/en/2022-02-02_01:00:00/en_header.txt 영어로 번역된 뉴스 제목: tesla/en/202.. 공감수 0 댓글수 0 2022. 9. 21.
뉴스 제목 감정분석(sentiment analysis) 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 이전 단계에서 특정 주제에 대한 뉴스 제목들을 가져왔으므로 뉴스 제목을 분석하는 단계를 적으려고 한다. 사용한 모델은 https://github.com/ProsusAI/finBERT 을 사용하였다. 분석 결과로는 긍정, 부정, 중립의견 정도(실수 값)가 나온다. 분석 코드 https://github.com/ProsusAI/finBERT 저장소의 예측 코드를 바탕으로 작성했다. 모델에 입력으로 받은 문자열(뉴스 제목)을 넣고 결과 값을 파싱 하여 반환하는 코드이다. 내가 결과 값을 파싱한 결과는 아래 사진과 같다. seentence: 입력한 문장 positive: 긍정적인 의견 negative:.. 공감수 0 댓글수 0 2022. 9. 20.
구글 뉴스 제목 크롤링 주식 뉴스 분석 프로젝트 프로젝트 개요 및 각 글들의 링크: https://namth.tistory.com/18 구글 미국 뉴스의 제목을 크롤링하는 python코드를 작성해보려 한다. 원래 기능에는 뉴스 내용도 크롤링하려고 하였으나, 각각의 뉴스마다 내용에 들어가는 html태그들이 다르고 광고 때문에 제목만 크롤링하기로 변경했다. 전체 코드 크롤링 로직 크롤링 진입부(Http 트리거) 코드 설명(로직) 2~6 줄 모듈을 import 하는 코드들로 작성되어있다. 크롤링을 위한 bs4, requests 모듈 객체 복사에 필요한 copy 모듈 번역을 위한 translator 모듈 google translate api을 이용하여 작성한 모듈 type 명시를 위한 typing 모듈 54 ~ 56 줄 우선 크롤링 .. 공감수 0 댓글수 0 2022. 9. 20.
주식 뉴스 분석 프로젝트 2021년 한창 돈이 복사될 때 만들었던 프로젝트를 기록하려고 한다. 큰 틀은 아래와 같다. 뉴스 크롤링 코드 작성(구글 뉴스) 감정 분석 코드 작성(제목에대한 긍정, 부정, 중립 의견 예측) 크롤링, 분석 결과저장(mongodb, GCP storage) 서버 구축 그래프 출력 웹 서버 작성 실행 환경 및 사용 언어 및 프레임워크와 구조는 아래와 같다. 뉴스 크롤링 및 감정 분석: 언어는 python을 사용했고, 웹 서버 프레임워크는 Flask, 크롤링은 bs4을 사용했다. 배포는 GCP cloud run에 배포하였고, cloud run에 배포하기 위해 웹 서버를 docker image로 만들어서 배포했다. 크롤링한 결과를 https://github.com/ProsusAI/finBERT 의 모델을 이용하.. 공감수 1 댓글수 0 2022. 9. 16.
[python] GCP Storage저장소와 파일 동기화 <3> 동기화 프로그램 작성의 마지막 단계로 파일의 hash값을 판단하여 생성 및 삭제 목록을 생성하도록 했다. GCP Storage에서 업로드된 객체들의 hash값을 계산해서 저장하고 있으므로 해당 값을 가져와 비교를 했다. GCP Storage에서 제공하는 hash 값들 중 md5해시값이 있으므로 해당 값을 이용했다. 기존에 변경된 파일을 감지하지 못하여 overwrite라는 플래그를 사용하였는데, 이번 변경으로 overwrite플래그를 삭제했다. 로컬 파일들의 hash값 구하기 로컬 파일들의 hash값은 md5 알고리즘을 이용하여서 가져왔다. 지정된 디렉토리의 하위 파일들의 리스트를 얻어오고 각각의 파일들을 열어서 hash값을 구하였다. 스토리지 파일들의 hash값 구하기 스토리지 파일들의 hash값은 구.. 공감수 0 댓글수 0 2022. 9. 13.
[python] GCP Storage저장소와 파일 동기화 <2> 이전 글에서 작성했던 코드를 개선하는 작업을 진행했다. 우선 실행 속도를 개선 시기키 위해 스토리지 api 호출 및 파일 입출력을 비동기적으로 실행시키기 위해 쓰레드를 사용하였다. 실행시 ignore 인자를 추가했다. 해당 인자에 파일 폴더의 이름을 입력하면, 해당 파일 및 폴더는 제외된 상태로 리스트가 작성된다. 변경점 작업 분할 각각의 쓰레드에 작업을 분할하기 위해 1차원 배열을 길이가 일정한 2차원 배열로 변환하는 코드를 작성하였다. 지정된 값에 맞추어 2차원 배열을 생성하고 배열 내부의 배열(일정한 길이의 문자열)을 각각의 쓰레드에 전달하였다. 작업 실행 파일 생성, 파일 삭제에 맞추어 각각 작업목록(2차원배열)을 생성하고 현재의 focus에 맞추어 쓰레드가 실행시킬 함수들을 설정하였다. 파일.. 공감수 0 댓글수 0 2022. 9. 13.
[python] GCP Storage저장소와 파일 동기화 <1> 지난번에 작성했던 ubuntu서버와의 코드 동기화처럼 스토리지도 코드를 간편하게 동기화하고자 작성하게 되었다. 기능 목차 1. 동기화를 위해 로컬 및 스토리지의 파일들의 리스트를 가져오는 기능 2. 중점을 맞춘 파일 리스트를 기준으로 필터링 3. 업로드, 다운로드 및 파일 삭제 4. 프로그레스바 출력 사용자 입력 1. 중점(focus): 스토리지 혹은 로컬을 지정 가능하며, 지정한 것을 기준으로 파일을 동기화 2. 목표(target): 동기화할 폴더 혹은 파일을 지정, 해당 파일 혹은 폴더를 동기화 3. 덮어쓰기(overwrite): True, False에서 지정 가능하며, True일 경우 삭제되지 않는 파일의 경우 덮어 씌움 로컬 및 스토리지 파일리스트 가져오기 1. 로컬 파일리스트 가져오기 미리 지정.. 공감수 0 댓글수 0 2022. 9. 7.
[bash] 로컬의 코드와 서버의 코드를 동기화 해보자. <3> Motivation ! 코드와 서버의 코드를 동기화하는 작업의 세 번째 글이다. 이전 단계까지는 미리 정의한 디렉토리들을 제외하고 파일들을 전송하는 단계까지 진행이 되었다. 이번에는 파일이 변경되었는지를 체크하고 파일을 옮기는 작업을 해보려고 한다. 효율성 파일이 변경되어 있던 되어있지 않던 무조건 덮어쓰기를 하고 있는 문제가 있다. 속도 하나의 파일마다 연결을 열고 파일을 전송하다 보니 너무 느리다. todo ! 파일이 변경되었는지는 hash값을 이용해서 판단하려고 한다. source -> target 전송 -> 수신 우선 전송하는 디렉토리의 파일 리스트를 얻는 단계에서 ssh를 이용해 수신하는 쪽 파일들의 hash값을 얻어올 생각이다. 그 후 hash값을 비교하고 hash값이 다르면 배열에 넣어 sc.. 공감수 0 댓글수 0 2022. 8. 31.
[bash] 로컬의 코드와 서버의 코드를 동기화 해보자. <2> Motivation ! 코드와 서버의 코드를 동기화하는 작업의 두 번째 글이다. 이전 단계에서는 원하는 기능은 이루었지만, 3개의 문제를 발견했다. 이번 에는 1번 문제를 해결해 보려고 한다. 필요 없는 데이터 패키지와 git 정보 같은 데이터들도 같이 넘어가는 문제가 있다. 효율성 파일이 변경되어 있던 되어있지 않던 무조건 덮어쓰기를 하고 있는 문제가 있다. 속도 하나의 파일마다 연결을 열고 파일을 전송하다 보니 너무 느리다. todo ! 우선 특정 경로의 파일들을 제외하고 파일을 옮기기 위해 2가지 방법을 사용해 보았다. bash script 스크립트에서 해당 경로를 if 문으로 제외하는 방법이다. find 명령어 filter 파일들의 목록을 불러오는 find명령어에서 걸러내는 방법이다. 우선 첫 번.. 공감수 0 댓글수 0 2022. 8. 26.
[bash] 로컬의 코드와 서버의 코드를 동기화 해보자. <1> Motivation ! 작업 중 상당히 귀찮은 부분은 작성한 코드를 서버에 옮겨서 실행시키는 부분이다. 그 전에는 복붙 아무 생각 없이 시도했던 방식으로, 머리보다 손이 먼저 움직여서 실행했던 방법이다. 말 그대로 코드를 복사해서 서버에 텍스트 에디터로 열고 붙여 넣기를 하는 방법이었다. github(git) 파일 한 두 개 정도를 넘어서 많아지니 1번 방법으로는 도저히 엄두가 나지 않아서 사용했던 방법이다. 사실 가장 좋은 방법 같긴 한데 자잘한 테스트에 늘어나는 커밋 로그를 보니 다른 방법을 찾기 시작했다. todo ! scp 명령어를 순차적으로 실행시키는 스크립트를 작성하여서 프로젝트 디렉토리의 파일들을 한꺼번에 옮겨 보려고 한다. 우선 scp 명령을 위해 필요한 값들을 리스트를 적어 보았다. os.. 공감수 0 댓글수 0 2022. 8. 25.
Google search console Tistory 등록 기록 Google 검색에서 내 블로그가 노출 되려면 Google search console에서 색인을 등록해야 한다는 것을 알게되었다. 색인을 등록하는 방법을 기록하려고 한다. 도메인 등록 1. https://search.google.com/search-console/ 위 페이지로 이동을 하면 위와 같은 화면이 나온다. 2. 도메인을 입력한다. 나는 도메인등록을 하려고 하므로 도메인 입력란에 도메인을 적어준다. 3. 이미 진행해서 사진을 찍지는 못했지만 도메인 인증방법과 값을 준다. 해당 값을 복사 한다. 4. 도메인을 route53에서 등록했기에 해당 페이지로 이동한다. https://us-east-1.console.aws.amazon.com/route53/v2/hostedzones# 5. 내가 등록한 도메.. 공감수 0 댓글수 0 2022. 8. 23.
[Flask] Flask에 middleware을 넣어보자 규모, 단위가 작은 api 개발 시 주로 Flask를 사용한다. 규모가 조금 더 커지면 Express를 사용하는데, 사용하다 보면 middleware의 편리함을 많이 느끼게 된다. 그러면 middleware을 Flask에 넣는 게 가능한지 테스트해보려 한다. Flask Flask는 파이썬의 경량 웹 프레임 워크이다. 잘 알려진 Django와의 차이점은 프레임워크에서 기본적으로 지원하는 기능이 적다는 것이고, 기능이 적은 만큼 튜닝 자유도 및 메모리 사용량이 적다는 장점이 있다. 요즘 클라우드에서 작은 단위의 api를 작성하는 일이 많아, 유용하게 사용하고 있다. Express MiddleWare express middleware란 아래의 공식문서 정의처럼 요청-응답 사이에서 실행되는 함수이다. 미들웨어 .. 공감수 0 댓글수 0 2022. 8. 23.
[Javascript] const, let, var 궁금점 호이스팅에 관해서 찾아보다 궁금한 점을 발견했습니다. 변수에 언제 접근하는지에 따라서 결과가 달라지는 것을 확인하였고, var을 제외하고 let과 const는 에러가 발생했습니다. var // case 1 console.log(foo); var foo = 12; // result undefined let // case 2 console.log(foo); let foo = 12; //result Cannot access 'foo' before initialization const // case 2 console.log(foo); const foo = 12; //result Cannot access 'foo' before initialization javascript variable lifecycle.. 공감수 0 댓글수 0 2022. 8. 18.
[TypeScript] Class method Compile시 this 개요 Class 내부에 선언했던 객체를 호출하려던 차 함수 내부의 this가 undefined라는 오류를 발견했습니다. 아래는 에러가 발생한 코드와 비슷한 샘플 코드입니다. 해결 방법 에러를 해결하기 위해 검색하던 중 해결가능해 보이는 글을 발견했습니다. https://stackoverflow.com/questions/55088050/ts-class-method-is-undefined-in-callback TS - class method is undefined in callback I think that code is worth a thousand words. Take this example class Cat { constructor() { this.meow("roar", this.sound) } meo.. 공감수 1 댓글수 0 2022. 8. 18.
[pm2] pm2 cluster node communication pm2 cluster 사용 시 node간의 통신(상태 동기화) 목표 Node-Es 서버를 pm2 cluster 모드로 실행시켜 여러 개의 노드를 실행시키고 있는 상황에서 특정 노드의 상태가 변할시 다른 노드에게 상태를 전이시키는 게(알림) 목표입니다. 방법 같은 서버에서 동작하며 pm2라는 부모 프로세스에 같이 묶여 있으므로 ipc를 이용하여 동기화가 필요한 Node들에게 상태를 알리려고 합니다. pm2 cluster로 실행시 node의 process.send를 통해 다른 Node들에게 보내려고 하였는데, 메시지를 보내면 다른 노드들에게 가는 게 아니라 pm2에게 전달되었습니다. https://engineering.linecorp.com/ko/blog/pm2-nodejs PM2를 활용한 Node.js 무.. 공감수 0 댓글수 0 2022. 8. 12.
[Server] Cannot assign requested address 와 ephemeral port 문제 사내에서 Node - ES 서버의 부하 테스트를 진행하였습니다. 테스트 중 Node 데이터를 넣는 python 코드에서 에러가 발생했습니다. OSError: [Errno 99] Cannot assign requested address 상황은 1. 에러 발생 직후 실행이 되지 않으나, 시간이 지나면 다시 실행이 가능하였고 2. 요청을 보내는 코드(python requesets)에서만 에러가 발생하였고 3. 받는 서버(node express)에는 어떠한 요청도 수신이 안 되었습니다. Node서버에는 문제가 없고 python코드가 문제인 것을 확인하였습니다. ES에서 생성된 문서의 개수는 매 실행시마다 28,231개까지 생성되었습니다. 문제 확인 문서가 계속 같은 개수로 생성되는 것을 바탕으로 검색하던 .. 공감수 0 댓글수 0 2022. 8. 11.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.