기본 콘텐츠로 건너뛰기

Nginx.LoadBalancer-Nodejs : 엔진엑스로 nodejs에 로드밸런싱하기

Nginx.LoadBalancer-Nodejs : 엔진엑스로 nodejs에 로드밸런싱하기

이 포스팅 분류는 Docker를 정확히 어떻게 사용할지를 다루지 않는다. 대신 Docker로 특정 상황에 어떻게 환경을 구축해야하는지의 예제를 담고 있다. 만약 이 Docker에 대해서 어떻게 관리하는 지를 알고싶다면 인터넷을 검색을 활용하거나 필자의 블로그에서 Software-Docker를 확인해주기를 바란다. 현재 여기 업로드 되어있는 모든 예제들은 필자의 github repository에 올라와있다. 그 주소는 아래와 같다.

https://github.com/kukaro/Eris-DockerExampleTemplate 예제를 직접 확인하고 싶다면 해당 repository를 참조하라.

nginx는 로드 밸런서로도 많이 사용한다. 위의 경우 nginx에 두개의 nodejs(두 서버는 완벽하게 동일)서버에 붙혀져있다.

위를 명령어 하나로 실행하고 싶다면??

바로 필자처럼 하는 방법이 있다.

프로젝트 구조는 위와 같다.

필요없는 소스가 많으니 필요한것만 보도록하자.

#!/usr/bin/env bash

MY_ADDRESS1= ` ipconfig getifaddr en0 `

MY_ADDRESS1= $ {MY_ADDRESS1}

PORT_NUMBER1= 4000

MY_ADDRESS2= $ {MY_ADDRESS1}

PORT_NUMBER2= 5000

#run myubuntu instance

docker build -t mynginx --build-arg PORT_NUMBER1= $ {PORT_NUMBER1} --build-arg MY_ADDRESS1= $ {MY_ADDRESS1} --build-arg PORT_NUMBER2= $ {PORT_NUMBER2} --build-arg MY_ADDRESS2= $ {MY_ADDRESS2} ./mynginx/

docker build -t myserver ./myserver/

PORT_NUMBER1= $ {PORT_NUMBER1} MY_ADDRESS1= $ {MY_ADDRESS1} PORT_NUMBER2= $ {PORT_NUMBER2} MY_ADDRESS2= $ {MY_ADDRESS2} docker-compose up -d

init.sh에서는 현재 ip와 각각의 was(nodejs)에서 사용할 포트번호를 선택해준다.

하나는 4000으로, 하나는 5000으로 정했다.

나의 주소는 ipconfig로 가져오는데 이는 맥에만 있고 리눅스의 경우 ifconfig에서 적당히 가져와주면된다.

docker build -t mynginx --build-arg PORT_NUMBER1= $ {PORT_NUMBER1} --build-arg MY_ADDRESS1= $ {MY_ADDRESS1} --build-arg PORT_NUMBER2= $ {PORT_NUMBER2} --build-arg MY_ADDRESS2= $ {MY_ADDRESS2} ./mynginx/

nginx쪽을 빌드한다.

조금 긴데 잘라서 보자.

--build-arg PORT_NUMBER1= $ {PORT_NUMBER1} --build-arg MY_ADDRESS1= $ {MY_ADDRESS1} --build-arg PORT_NUMBER2= $ {PORT_NUMBER2} --build-arg MY_ADDRESS2= $ {MY_ADDRESS2}

--build-arg는 변수를 던질 수 있다.

이러면 Dockerfile에서는 ARG로 변수를 받을 수 있다.

PORT_NUMBER1= $ {PORT_NUMBER1} MY_ADDRESS1= $ {MY_ADDRESS1} PORT_NUMBER2= $ {PORT_NUMBER2} MY_ADDRESS2= $ {MY_ADDRESS2} docker-compose up -d

docker-compose를 동작할 때는 사용할 변수를 앞에 적어줘야한다.

마찬가지로 docker-compose에서 던진 변수는 docker-compose.yml에서 ${}로 사용할 수 있다.

먼저 nginx를 보도록 하자.

FROM ubuntu:latest

MAINTAINER kukaro < justkukaro@naver.com >

RUN apt-get update

RUN apt-get install - y openssh-server

RUN mkdir / var / run / sshd

#set password

RUN echo 'root:root' |chpasswd

#replace sshd_config

RUN sed - ri 's/^#?PermitRootLogin\s+.*/PermitRootLogin yes/' / etc / ssh / sshd_config

RUN sed - ri 's/UsePAM yes/#UsePAM yes/g' / etc / ssh / sshd_config

#make .ssh

RUN mkdir / root / .ssh

RUN apt-get clean && \

rm - rf / var / lib / apt / lists /* / tmp /* / var / tmp /*

#install git, vim

RUN apt-get update && apt-get install - y git

RUN apt-get install - y vim

#install nodejs

RUN apt-get install - y nodejs

RUN apt-get install - y npm

RUN apt-get install - y curl

#setting vim

RUN git clone https: // github.com / VundleVim / Vundle.vim.git

RUN mkdir - p / root / .vim / bundle

RUN mv Vundle.vim / root / .vim / bundle

ADD . / .vimrc / root /

RUN vim - c 'PluginInstall' - c 'qa!'

RUN cd / root / .vim / bundle / vim-prettier && npm install

#install nginx

RUN apt-get install - y nginx

ADD . / config / default / etc / nginx / sites-available

ADD . / run / / root

#install js beautify

RUN npm - g install js-beautify

ARG PORT_NUMBER1

ARG MY_ADDRESS1

ARG PORT_NUMBER2

ARG MY_ADDRESS2

RUN sed - ri 's/MY_ADDRESS1/' ${ MY_ADDRESS1 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/PORT_NUMBER1/' ${ PORT_NUMBER1 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/MY_ADDRESS2/' ${ MY_ADDRESS2 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/PORT_NUMBER2/' ${ PORT_NUMBER2 } '/' / etc / nginx / sites-available / default

EXPOSE 22 80 8080

CMD [ "/usr/sbin/sshd" , "-D" ]

길기는 한데 필자는 vim이나 ssh처럼 다른 필요없는것도 있어서 필요한 부분만보자.

FROM ubuntu:latest

MAINTAINER kukaro < justkukaro@naver.com >

기본 이미지는 우분투로 동작한다.

RUN apt-get update

업데이트 한번하고

#install nodejs

RUN apt-get install -y nodejs

RUN apt-get install -y npm

nodejs와 npm을 설치한다.

#install nginx

RUN apt-get install - y nginx

ADD . / config / default / etc / nginx / sites-available

ADD . / run / / root

그 다음 nginx를 설치하고 필자가 만든 설정파일인 default와 run의 쉘 스크립트를 이미지로 붙혀넣는다.

그럼 sites-available의 defualt를 보자.

upstream myserver {

server MY_ADDRESS1:PORT_NUMBER1;

server MY_ADDRESS2:PORT_NUMBER2;

}

server {

listen 80;

location / {

proxy_pass http://myserver;

}

}

upstream으로 서버를 선언하고 서버에는 proxypass를 해준다.

보면 host가 다른 MY_ADDRESS1과 PORT_NUMBER1으로 되어있는데 이 문자열을 대체하줄 것이다.

ARG PORT_NUMBER1

ARG MY_ADDRESS1

ARG PORT_NUMBER2

ARG MY_ADDRESS2

init.sh에서 던졌던 변수를 지정한다.

RUN sed - ri 's/MY_ADDRESS1/' ${ MY_ADDRESS1 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/PORT_NUMBER1/' ${ PORT_NUMBER1 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/MY_ADDRESS2/' ${ MY_ADDRESS2 } '/' / etc / nginx / sites-available / default

RUN sed - ri 's/PORT_NUMBER2/' ${ PORT_NUMBER2 } '/' / etc / nginx / sites-available / default

그 다음 sed 명령어를 실행해준다. 위의 경우 r옵션은 정규표현식, i옵션은 백업을 하는것을 의미한다.

그래서 위를 해석하자면 앞의 문자열을 뒤의 문자열로 대체하라는 것이다.

그래서 실제 실행할때는 default는 고쳐져서 대체된다.

#!/usr/bin/env bash

# Run nginx

nginx

# Start sshd

/usr/sbin/sshd -D

나중에 docker-compose에서는 init.sh를 실행한다.

nginx를 데몬으로 켠다음에 ssh를 켜는건데 사실 우리가 ssh안쓰면 안켜도된다.

이제 서버쪽을 보자. nodejs로 만들었다.

FROM ubuntu:latest

MAINTAINER kukaro < justkukaro@naver.com >

RUN apt-get update

RUN apt-get install - y openssh-server

RUN mkdir / var / run / sshd

#set password

RUN echo 'root:root' |chpasswd

#replace sshd_config

RUN sed - ri 's/^#?PermitRootLogin\s+.*/PermitRootLogin yes/' / etc / ssh / sshd_config

RUN sed - ri 's/UsePAM yes/#UsePAM yes/g' / etc / ssh / sshd_config

#make .ssh

RUN mkdir / root / .ssh

RUN apt-get clean && \

rm - rf / var / lib / apt / lists /* / tmp /* / var / tmp /*

#install git, vim

RUN apt-get update && apt-get install - y git

RUN apt-get install - y vim

#install nodejs

RUN apt-get install - y nodejs

RUN apt-get install - y npm

RUN apt-get install - y curl

RUN npm install pm2 - g

#setting vim

RUN git clone https: // github.com / VundleVim / Vundle.vim.git

RUN mkdir - p / root / .vim / bundle

RUN mv Vundle.vim / root / .vim / bundle

ADD . / .vimrc / root /

RUN vim - c 'PluginInstall' - c 'qa!'

RUN cd / root / .vim / bundle / vim-prettier && npm install

#install js beautify

RUN npm - g install js-beautify

#set server

ADD . / run / / root

RUN cd / root / server && npm install

EXPOSE 22 80 8080

CMD [ "/usr/sbin/sshd" , "-D" ]

이것도 길지만 중요한것만 보자.

FROM ubuntu:latest

MAINTAINER kukaro < justkukaro@naver.com >

RUN apt-get update

여기도 서버는 우분투로 해준다.

run안에는 서버(nodejs express) 코드들이 있다.

이를 옮겨서 실행해줘야한다. 여기서 bin.www를 잠시보자.

var port = normalizePort(process.argv[2] || '3000');

app.set('port', port);

bin/www에서 앞부분을 process.argv[2]로 받아놓자.

이는 실행할때 변수를 받는데 3번째(0번부터 카운트)거를 받는다는 뜻이다.

우리는 포트를 직접 던져줄꺼기에 이렇게 사용한다.

#install nodejs

RUN apt-get install -y nodejs

RUN apt-get install -y npm

RUN npm install pm2 -g

nodejs와 npm과 pm2를 설치한다.

nodejs를 데몬으로 실행해야하게 때문에 pm2를 사용한다.

#set server

ADD . / run / / root

RUN cd / root / server && npm install

그 다음 root에 run아래의 스크립트(init.sh)와 server코드들을 전달한다.

그 다음 서버로 이동해서 npm install을 해준다.

서버쪽의 init.sh를보자.

#!/usr/bin/env bash

PORT_NUMBER=$1

MY_ADDRESS=$2

# run server

cd /root/server && pm2 start bin/www server -- $ {PORT_NUMBER}

# Start sshd

/usr/sbin/sshd -D

보면 파라메터로 $1,$2를 받는다. 즉 우리는 쉘스크립트를 실행할 때 파라메터를 넣어줄 것이다.

근데 사실 ADDRESS는 필요없는데 어쩌다보니까 넣게 되었다.

그리고 pm2를 실행할 때 -- 후에 변수를 넣어주는데 그게 아까 위에서 bin/www에 process.env로 들어간다.

처음것이 2로시작하는데 그 이유는 [0]과 [1]은 명령어와 스크립트 이름이 들어가기 때문이다.

당연하지만 ssh는 없어도 된다.

이제 docker-compose.yml을 보자.

version : '3.3'

services :

mynginx :

image : mynginx

container_name : mynginx

command : /root/init.sh

ports :

- '10022:22'

- '10080:80'

- '18080:8080'

expose :

- '10022'

- '10080'

- '18080'

myserver1 :

image : myserver

container_name : myserver1

command : /root/init.sh ${PORT_NUMBER1} ${MY_ADDRESS1}

ports :

- '20022:22'

- '20080:80'

- '28080:8080'

- ${PORT_NUMBER1}:${PORT_NUMBER1}

expose :

- '20022'

- '20080'

- '28080'

- ${PORT_NUMBER1}

myserver2 :

image : myserver

container_name : myserver2

command : /root/init.sh ${PORT_NUMBER2} ${MY_ADDRESS2}

ports :

- '30022:22'

- '30080:80'

- '38080:8080'

- ${PORT_NUMBER2}:${PORT_NUMBER2}

expose :

- '30022'

- '30080'

- '38080'

- ${PORT_NUMBER2}

전체가 긴데 필요없는것도 많다.

필요한것만 보자.

services :

mynginx :

image : mynginx

container_name : mynginx

command : /root/init.sh

ports :

- '10022:22'

- '10080:80'

- '18080:8080'

expose :

- '10022'

- '10080'

- '18080'

nginx는 먼저 우리가만든 mynginx이미지를 빌드한 후 마지막에 init.sh를 실행한다.

여기서 포트는 80만 열면된다. 너머지는 테스트용이다.

myserver1 :

image : myserver

container_name : myserver1

command : /root/init.sh ${PORT_NUMBER1} ${MY_ADDRESS1}

ports :

- '20022:22'

- '20080:80'

- '28080:8080'

- ${PORT_NUMBER1}:${PORT_NUMBER1}

expose :

- '20022'

- '20080'

- '28080'

- ${PORT_NUMBER1}

서버는 1번과 2번은 똑같다. image는 우리가 빌드한 myserver로 통일하면된다. 같은내용이기 때문이다.

대신에 변수들을 넣어주는데 마찬가지로 실행할 때 쉘 스크립트를 실행하면서 변수를 넣어준다.

그러면 위의 init.sh를 실행하면서 포트번호와 자기 주소를 받게된다.

또한 여는 포트역시 변수로 정해준다.

이제 모든 준비는 끝났다.

실행해보면 부하가 양쪽으로 분산되고 있음을 확인할 수 있다.

from http://kamang-it.tistory.com/636 by ccl(A)

댓글

댓글 쓰기

이 블로그의 인기 게시물

[Mac OS X] 데스크탑 응용프로그램 개발시작

[Mac OS X] 데스크탑 응용프로그램 개발시작 현재 회사에서 다음 프로젝트로 Mac OS X를 개발해야 하는 일정이 생겨 난생 처음 데스크탑 응용프로그램을 개발하기 공부를 시작했고 여러가지 플랫폼이 있다는것을 발견했다. 어떤 플랫폼을 사용해야할 지 먼저 고민해보자. 무엇으로 개발할것인가? Xcode & Swfit or Objective-C Mac OS X 는 objective-c를 기반으로 만들어졌다. apple에서 제공하는 Xcode와 objective-c 혹은 Swift로 응용 프로그램을 만들 수 있다. Electron Electron 프레임워크를 사용하면 javascript, HTML, CSS를 사용하여 크로스 플랫폼 데스크탑 응용 프로그램을 만들 수 있다. react-native-desktop Qt 프레임 워크를 기반으로하는 크로스 플랫폼이다. react-native 와 javascript로 응용 프로그램을 만들 수 있다. Qt는 컴퓨터 프로그래밍에서 GUI 프로그램 개발에 널리 쓰이는 크로스 플랫폼 프레임워크. 각 플랫폼의 장단점은 무엇인가? Xcode & Swfit or Objective-C - 장점 모든 OSX API에 직접 접근할 수 있다. Xcode를 통해 App Store에 쉽게 배포할 수 있다. - 단점 Windows 전용 응용 프로그램을 다시 개발해야한다. Swift언어를 모른다면 새로 공부해야 한다. Electron - 장점 웹스택을 가지고 빠르게 만들 수 있다. 다양한 플랫폼을 지원한다. - 단점 Native언어로 개발할때 보다 성능이 떨어질 이슈가있다. OS X API를 사용하는데 복잡하다. *API에 대한 JavaScript 래퍼가 없으면 자체 래퍼를 작성하지 않는 한 프로젝트에서 사용할 수 없습니다. React-native-desktop - 장점 현재 개발스택과 완전히 동일하므로 더 빠르게 개발 할 수 있다. 다양한 플랫폼을 지원한다. - 단점 N...
댓글 쓰기
자세한 내용 보기

AWS CI/CD 파이프라인에 Slack 알람 적용(Lambda, CloudWatch Events 연동)

AWS CI/CD 파이프라인에 Slack 알람 적용(Lambda, CloudWatch Events 연동) 이번 글에서는 구축된 CI/CD 파이프라인과 Slack 알람을 연동하는 방법에 대해서 알아볼 것이다. CI/CD 파이프라인 시작/종료(성공/실패) 시 Amazon CloudWatch Events에서 해당 이벤트를 감지한 후 AWS Lambda로 트리거 신호를 보내면 AWS Lambda에서 Slack채널로 알람을 보내는 프로세스다. 글의 순서는 다음과 같다. Amazon CloudWatch Events, AWS Lambda란? 실습 전 준비사항 Slack Webhook 생성 AWS Lambda 함수 생성 AWS CloudWatch Events 생성 테스트 위와 같은 방식으로 구축을 하면 최종 프로세스는 다음 그림과 같다 (우리가 이 글에서 진행하는 내용은 빨간색으로 표시된 부분) 1. Amazon CloudWatch Events, AWS Lambda란? 1-1. Amazon CloudWatch Events란? Amazon CloudWatch Event(혹은 AWS CloudWatch Events)는 AWS 상태 변경 등을 감시할 수 있는 기능이다. 만약 사용자가 만든 규칙에 맞는 이벤트가 발생하게 되면 해당 이벤트가 사정에 정의된 규칙과 일치할 경우 하나 이상의 대상 작업을 호출한다. 이벤트 유형에 따라 알람을 보내거나, 이벤트 정보를 캡쳐하거나, 교정작업을 수행하거나, 이벤트를 시작하거나, 기타 작업을 수행할 수 있다. 이벤트가 발생할 경우 대상 작업은 AWS Lambda함수, AWS Kinesis 스트림, AWS SQS, Amazon SNS 등이 있다. 사용되는 사례로는 1) 이벤트가 발생하면 Lambda함수를 사용하여 Slack채널로 알림을 전달하거나, 2) AWS 상태 이벤트가 발생하면 Lambda 및 CloudWatch Events를 사용하여 Amazon SNS로 사용자 지정 텍스트 또는 SMS 알림을 보내는 등...
댓글 쓰기
자세한 내용 보기

[2020-angstromCTF] web - A peculiar query write-up

[2020-angstromCTF] web - A peculiar query write-up English write-up UI seems like below. If you click the 'the source' link, you can get back-end source code. const express = require("express"); const rateLimit = require("express-rate-limit"); const app = express(); const { Pool, Client } = require("pg"); const port = process.env.PORT || 9090; const path = require("path"); const client = new Client({ user: process.env.DBUSER, host: process.env.DBHOST, database: process.env.DBNAME, password: process.env.DBPASS, port: process.env.DBPORT }); async function query(q) { const ret = await client.query(`SELECT name FROM Criminals WHERE name ILIKE '${q}%';`); return ret; } app.set("view engine", "ejs"); app.use(express.static("public")); app.get("/src", (req, res) => { res.sendFile(path.join(__dirname, "index.js")); }); app.get("/", async (req, res) => { if (req.query...
댓글 쓰기
자세한 내용 보기