AWS/기능 소개 및 에러처리11 AWS SageMaker Immersion Day 학창시절 과제 및 실습등을 하고 회사에서 프로젝트를 뛰며 데이터 전처리 작업은 필수인데, 이때 labeling 작업을 했는데 너무나도 시간이 많이 소요 되어 매번 무척 힘들었다. 나름 다양한 방법들을 시도 했지만 보통은 시간을 많이 요하는 작업이라서 매번 적합한 방법을 찾아서 사용하곤했다. 이러한것을 해결해보려고 Auto-labeling 기능이란걸 검색하다보니 Amazon SageMaker를 찾게되었는데, ML에 필요한 수많은 기능들이 있었다. 어디서 부터 해야할지 모르겠어서 원래는..접근도 못하였다. (AWS라는 기본적인 개념도 없어서 아예 접근을 못함..) 심지어 블로그에도 많은 내용이 나와있지는 않았고.. 그런데 AWS에서 SageMaker Immersion Day를 한다고 하여 SageMaker가.. 2023. 2. 7. AWS 모니터링을 위한 Slack 연동(with AWS lambda, CloudWatch) AWS에서 우리는 EC2, EBS, Lambda, S3, RDS, DynamoDB등 정말 다양한 기능을 사용한다. 현재 내가 일하는 회사에서는 전체 Infra(홈페이지나 자체 솔루션, 협업 툴)와 외주 프로젝트에 대한 개발서버를 자체 AWS를 활용하여 개발하는 경우가 많다, 이런 경우 갑자기 DB가 죽거나 서버가 다운되는 현상이 종종 있어 개발자들이 당황하는 경우가 있다(물론..서버 스펙이 아주 높다면 이런 경우가 거의 없겠지만.. 적절한 자원의 서버를 운용하는것이 중요하기에) 그래서 CloudWatch기능에서도 SMS 기능을 사용하려고 했으나! 아직까지 테스트 단계에서의 과금이 부담되어 여러 서칭을 통해 Slack연동을 통해서도 해당 기능을 편하게 이용할 수 있다는 글들을 좀 찾았다. 내가 내린 결론은.. 2023. 1. 30. AWS Slack으로 Monitoring 중 invaild_payload 오류 해결법(Window) 다양한 AWS 기능을 둘러보다, 현재 Splunk를 통해 AWS 모니터링을 하고있었다(이는 추후 블로깅 예정) 근데 아쉬운 점은, Splunk는 매번 실행을 해야하고(과금이 나간다는...) 실시간으로 계속 켜놓고 확인하고 하기가 조금 불편하다고 느꼈을까?? Slack을 통해 Aws Cloud Watch를 연동하여 모니터링을 해보고자 했다. 자세한 내용은 추 후 블로깅 하겠지만 혹시나 비슷한 에러를 겪은 분들을 위해 해결 방법을 공유한다. 위 처럼 slack에서 제공한 테스트 curl을 보내도 invalid_payload에러가 나온다...이는 특수문자에 대한 처리가 안돼서 그러는 것이다. 아래 처럼 "Content-type:application/json" --data "{""text"":""Hello, W.. 2023. 1. 27. 이전 1 2 3 다음
