티스토리

Be an Overachiever

검색하기

블로그 홈

Be an Overachiever

devs0n.tistory.com/m

ML + Back-end developer

구독자: 21

방명록 방문하기

주요 글 목록

[Docker Compose] depense_on으로 서비스 의존 관계 설정하기 대부분의 웹 애플리케이션은 DB나 Message Queue와 같은 외부 인프라에 종속을 갖게 된다.예를 들어 DB를 사용하는 Spring 애플리케이션은 실행 시에 DB datasource를 생성하기 위해서 먼저 DB 커넥션을 맺는다.이때 DB와 연결이 되지 않으면 Spring 애플리케이션이 실행되지 않는데,Docker Compose에서는 이렇게 서비스 간의 의존 관계를 명시해야하는 경우 healthcheck와 depense_on 옵션을 통해서 처리할 수 있다. healthcheck 옵션은 해당 서비스의 상태를 어떻게 확인할지를 명시한다.depends_on 옵션은 다른 서비스와의 의존 관계를 명시한다. 예시로 MySQL과 Redis를 의존하는 웹 애플리케이션의 경우 아래와 같이 docker-compose .. 공감수 0 댓글수 0 2024. 10. 30.
Github Actions self-hosted runner - Ubuntu 구성하기 Github Actions을 사용할 때 별다른 설정을 하지 않는다면 기본적으로 Github에서 제공하는 runner(Github-hosted runner)를 사용한다. 하지만 팀 내에서 Github Actions limit 금액을 너무 빨리 사용하거나, test나 build 속도가 너무 느리거나하면 자체 컴퓨팅 리소스를 사용하여 self-hosted runner 구성을 고려할 수 있다. 그러나 self-hosted runner 구성 무조건 옳은 선택이 아닐 수도 있다. self-hosted runner의 경우 사용 제한이 있기 때문에 self-hosted runner 구성 전에 이를 먼저 고려해야한다. 왠만한 케이스(CI/CD)에서는 Github에서 기본으로 제공하는 runner가 같은 성능의 AWS E.. 공감수 2 댓글수 1 2023. 8. 12.
[AWS CLI] S3 디렉토리 내 오브젝트 전체 복사 AWS console 상으로는 디렉토리 내에 있는 오브젝트 전체를 다운로드 받을 수 없고, 개별 오브젝트를 하나 씩만 다운로드 받을 수 있다. 디렉토리 내 오브젝트 전체를 다운받고자한다면 AWS CLI를 사용해서 복사를 해야한다. $ aws s3 cp s3:/// --recursive 위 커맨드는 / 내에 있는 모든 오브젝트를 에 복사한다는 의미이다. 참고: https://docs.aws.amazon.com/cli/latest/reference/s3/cp.html 공감수 0 댓글수 0 2023. 5. 24.
[AWS] EC2 인스턴스 스토리지 용량 Slack 알람 세팅하기 최근에 EC2 인스턴스에서 기동 중인 백오피스 툴이 스토리지 용량이 꽉차서 제대로 동작하지 않았던 적이 있다. 원인을 파악하고 EBS 용량을 증가시키는 동안 백오피스 툴을 사용할 수 없었는데 사후에 대처를 잘하는 것도 중요하지만, 사전에 미리 위험을 감지할 수 있는 시스템을 구축하는 것도 중요하다. 이번 포스팅에서는 crontab을 통해 주기적으로 파이썬 스크립트를 통해 EC2 인스턴스의 스토리지 용량을 확인하고 용량이 모자른다고 판단되면 Slack 알람을 보내는 예제에 대해 알아보겠다. (OS는 Ubuntu 기반으로 설명한다) EC2 인스턴스에 CloudWatch Agent를 설치하여 CloudWatch 알람을 받는 방식도 있지만, 단순히 스토리지 용량을 모니터링하기 위함이라면 어쩌면 배보다 배꼽이 더.. 공감수 1 댓글수 0 2023. 3. 12.
[SQS] 메세지 지연 시키기 (+ 15분을 넘어서) SQS 같은 경우 delay queues 라고하는 Consumer에게 메세지 노출을 지연시킬 수 있는 기능을 제공한다. 지연은 최대 15분까지 가능하다. (Visibility Timeout과는 다른 개념이기 때문에 명확하게 차이를 인지해야한다) 이 기능을 사용하면 메세지에 지연을 줄 수 있기 때문에 예약 실행 기능(정해진 시간 뒤에 특정 기능이 실행되어야하는 기능)을 개발할 때 사용될 수 있다. 예를 들어 '회원 가입 후 5분 뒤에 가입 축하 메세지를 보내기' 와 같은 기능이 있을 수 있는데, 회원 가입 도메인 이벤트에 대한 SQS 메세지 or 가입 축하 메세지 전송 SQS 메세지를 5분의 지연을 설정하고 enqueue 하면 5분 뒤에 메세지 핸들러에서 해당 메세지를 consume 하여 대상 유저에게 가.. 공감수 1 댓글수 0 2023. 2. 4.
[SQS] Visibility Timeout Consumer가 Queue에서 메세지를 consume 하고 처리를 한 뒤, 해당 메세지를 acknowledge(delete)를 하기 전까지는 메세지는 Queue에 계속 남아있는다. 특정 Consumer가 메세지를 consume 하고 모든 처리가 끝날 때까지 다른 Consumer에서 동일 메세지를 consume하는 것을 막기위해서 SQS에서는 Visibility Timeout을 설정한다. 메세지가 consume 된 뒤에 다른 Consumer에게 다시 보여지기 위한 시간이라고 생각하면 될 것이다. (하지만 이는 메세지가 두 번 전달되는 것을 막기 위함은 아니다) 기본값은 30초이며, 0초~12시간 까지 설정 가능하다. 관련하여 메세지 수의 제한을 확인해야하는데, 제한을 확인하기 전에 짧게 메세지의 상태에 .. 공감수 0 댓글수 0 2023. 2. 4.
Terraform으로 AWS Key Pair 등록하기 AWS에서 Key Pair를 생성하고 이를 다운받아 사용할 수 있지만, 반대로 내가 생성한 Key Pair를 AWS에 등록해서 사용할 수도 있다. 이번 포스팅에서는 Key Pair를 생성하고 Terraform을 통해 AWS에 Key Pair를 등록하는 과정에 대해 알아보도록 하겠다. ssh-keygen을 통한 Key Pair 생성 ssh-keygen을 통해 Key Pair를 생성한다. 나는 tf-key-pair라고 이름을 짓도록 하겠다. # -t: 암호화 타입 # -b: 비트 수 # -C: 코멘트 # -f: 파일 저장 경로 # -N: 암호화 옵션 $ ssh-keygen -t rsa -b 4096 -C "" -f "{저장하고자하는 경로}/tf-key-pair" -N "" # key pair 확인 $ ls .. 공감수 1 댓글수 0 2021. 11. 19.
Firebase Cloud Funtions 사용 시 EAI_AGAIN 오류 (2019-08-31에 작성된 글입니다) Firebase의 Cloud Functions를 사용하여 개발을 하는데, EAI_AGAIN 오류가 발생한 것에 대해 원인을 찾아보고 관련해서 정리한다. 로컬에서 함수를 실행하여 테스트할 때 node-fetch로 정상적으로 호출되던 것이 Firebase 서버로 배포를 하고나면 EAI_AGAIN 오류가 나는 것이었다. 아래는 해당 에러 로그이다. FetchError: request to https://foo.com/bar failed, reason: getaddrinfo EAI_AGAIN foo.com:443 at ClientRequest. (/srv/node_modules/node-fetch/lib/index.js:1455:11) at emitOne (events... 공감수 0 댓글수 0 2020. 12. 30.
쉽게 따라하는 Firebase Cloud Functions - 2. 함수 배포 (2019-08-30에 작성된 글입니다) 저번 글에서는 어떻게 프로젝트를 생성하는지를 알아보았고, 이번 글에서는 함수를 작성하고 배포하는 방법을 알아보도록 하겠다. 저번 글에서 CLI로 생성한 프로젝트 디렉토리를 보면 functions/index.js가 기본적으로 생성되어 있는데, index.js를 보면 함수 기본 템플릿이 주석 처리되어있다. // functions/index.js const functions = require('firebase-functions'); // // Create and Deploy Your First Cloud Functions // // https://firebase.google.com/docs/functions/write-firebase-functions // // exp.. 공감수 0 댓글수 0 2020. 12. 30.
쉽게 따라하는 Firebase Cloud Functions - 1. 프로젝트 생성 (2019-08-27에 작성된 글입니다) AWS나 Azure와 같은 클라우드 플랫폼이 제공하는 Serverless 플랫폼을 사용하면 개발자가 웹 애플리케이션을 만들고, 이를 VM 인스턴스에 올리고, CI/CD를 구성하는 등... 여러가지 신경쓸 것이 많은 백엔드 작업들을 비지니스 로직 코드만 작성하여 Firebase에 배포하면, 해당 Serverless 플랫폼이 스케일링이나 DB 접근 등을 알아서 전부 관리해줘 애플리케이션 개발 중 백엔드 개발 시간을 단축할 수 있다. (하지만 편리한 만큼 단점도 있기 때문에 잘 선택해서 써야한다.) 또 이번에 알아볼 Firebase Cloud Functions의 경우, Firebase의 Realtime DB, Authentication 등에 쉽게 접근하여 여러 백엔드 .. 공감수 0 댓글수 0 2020. 12. 30.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.