AWS67 Snapshot을 이용한 마이그레이션 진행하기 개인 사이드 프로젝트와 회사 내의 동아리 프로젝트, 현재 진행하고 있는 대학교 멘토로써 활동 하며 여러 데이터를 크롤링하고 모으게됐는데, 어떻게 보관하고 관리할지 항상 고민했다. 그래서 AWS S3에 게시판 형태처럼 리스트로 데이터를 관리하여 자체적인 Data Lake를 만들어 보는게 어떨까 하는 생각에 블로깅을 또 하게 되었다. elasticsearch 에서는 스냅샷을 찍어 인덱스를 저장하는 기능을 제공하고 이 스냅샷을 다른 클러스터에 복원시켜 데이터를 옮길 수도 있다. 아래 도큐먼트에 snapshot-restore 도큐먼트를 첨부한다. (https://www.elastic.co/guide/en/elasticsearch/reference/current/snapshot-restore.html ) 따라서 .. 2023. 4. 12. [Slack으로 점심 추천 Bot 만들기 with aws lightsail] - 1 기본세팅 AWS클라우드 업무를 올해 새롭게 접하게 되면서 기존에 카카오톡, 회사메신저, 오피스 등 여러 채널을 통해서 소통을 하던것에 답답함을 느껴, 모든 채널을 Slack으로 통일하게 되었다. 사실 비슷한 메신저들도 많은 기능을 담긴 했지만, 개인적으로 이력이 관리되고 쓰레드, 허들, 특히 다양한 앱과의 연계를 통한 기능을 사용 할 수 있다는 점이 매력적이었다. (기존 블로깅을 보면 slack을 통해 aws 과금 및 사용량 모니터링도 진행 중이다.) 2023.01.30 - [AWS/기능 소개 및 에러처리] - AWS 모니터링을 위한 Slack 연동(with AWS lambda, CloudWatch) AWS 모니터링을 위한 Slack 연동(with AWS lambda, CloudWatch) AWS에서 우리는 EC.. 2023. 4. 4. AWS 모니터링을 위한 Slack 연동(with AWS lambda, CloudWatch) AWS에서 우리는 EC2, EBS, Lambda, S3, RDS, DynamoDB등 정말 다양한 기능을 사용한다. 현재 내가 일하는 회사에서는 전체 Infra(홈페이지나 자체 솔루션, 협업 툴)와 외주 프로젝트에 대한 개발서버를 자체 AWS를 활용하여 개발하는 경우가 많다, 이런 경우 갑자기 DB가 죽거나 서버가 다운되는 현상이 종종 있어 개발자들이 당황하는 경우가 있다(물론..서버 스펙이 아주 높다면 이런 경우가 거의 없겠지만.. 적절한 자원의 서버를 운용하는것이 중요하기에) 그래서 CloudWatch기능에서도 SMS 기능을 사용하려고 했으나! 아직까지 테스트 단계에서의 과금이 부담되어 여러 서칭을 통해 Slack연동을 통해서도 해당 기능을 편하게 이용할 수 있다는 글들을 좀 찾았다. 내가 내린 결론은.. 2023. 1. 30. 이전 1 ··· 14 15 16 17 다음
