AWS67 EC2 G4DNlarge 인스턴스에 Tensorflow 및 Pytorch설치하기. 이번에 숙명여대 신빅해(신한은행 빅데이터 해커톤)에 멘토 및 과정 기획 설계자로 참여하며, 160개팀에 대해 EC2 학습환경을 세팅해야 하는 업무가 있었다. 160개를 하나하나 생성할 수 없었기에 AMI를 생성하여 나머지는 테라폼으로 일괄 처리하려고 계획을 세웠다. 그렇게 인공지능 서버를 구축하면서..수많은 글을 찾아보았지만 두 기술다 버전이슈가 너무 심각해서 고생을 많이했고, 성공한 버전과 설치과정을 블로그로 남기려고 한다. 먼저 내가 세팅한 환경은 아래와 같다. OS : Ubuntu 20.04 LTS GPU : RTX3090, Tesla T4등 Archi : x86_64 Cuda : 11.2 pytorch : 1.11.0+cu113 tensorflow : 2.8.0 cudnn : 11.2 이제 자세한.. 2023. 10. 12. Jupyter notebook 백그라운드 실행 및 겹치지 않게 종료하기(ubuntu & anaconda) 우분투 환경안에서 학습을 돌리거나 파이썬 모듈을 돌리기 위해, 주피터 노트북( jupyter notebook)을 많이 사용한다. 대부분의 사람들은 쉘 환경에서 자신이 쉘을 끄면 해당 작업이 종료되기 때문에 화면정리에 불편함을 겪는다. 그래서 오늘은 백그라운드로 실행하고 혹시나 팀 프로젝트를 통해 여러 프로세스를 실행시켜서 겹친 경우를 위해 해당 문제를 해결하기 위한 글을 써보려고 한다. 먼저 백그라운드로 실행시키는 방법은 아래처럼 명령을 실행하는 것 nohup jupyter notebook 그리고 해당 리스트를 확인 하는 방법은 위처럼 list 명령을 치면 확인이 가능하다. 여기서 지울수 있는 방법은 두 가지인데 1. 프로세스를 확인해서 지우는 법 2. 노트북 리스트의 포트를 확인해서 지우는 법 먼저 1.. 2023. 10. 6. 상명/인하 2023DataConcert를 마치며.... 올해 5월에 시작해서 9월 8일 금요일 최종 발표를 끝으로 상명/인하 DataConcert가 끝났다. 간단한 첫 시작 포스터를 먼저 보여주자면 처음에는 AWS, KT 각 섹터별로 팀을 모집하는데, 그냥 모집하는게 아니라 아이디어 제언서를 받고 그중에 TOP6를 선발해서 본선에 진출하는 구조였다. 나는 당연히 AWS 섹터의 멘토였고, TOP6만 뽑기에는 너무 아쉬웠는지 총 7팀의 멘토를 하게 되었다. 멘토링은 크게 온/오프라인으로 진행했는데, 우리 AWS 부문은 Slack 을 이용해서 관리 및 멘토링을 적극적으로 진행했다. 슬랙 Private 채널을 통해 팀별 관리를 했고 거의 1팀당 일주일에 1허들 이상은 진행했다. 나 말고도 다른 멘토들이 있었는데 다들 정말 성심성의껏 열정을 가지고 멘토링에 임했다. .. 2023. 9. 14. AWS SAP-C02 (AWS Solutions Architect - Professional) 온라인 시험 합격 후기 지난 7월쯤 AWS Certified Cloud Practitioner 합격 후기를 남겼었는데, 원래도 자격시험을 잘 보는 편이 아닌데 공부는 거의 6개월쯤 실무와 함께 하다가 기본 시험을 미루고 미루다 긴장을 너무 많이 해서 711점으로 턱걸이 합격을 했다... 그런데 왠지 한번 붙고 나니까 자신감이 생겨서 바로 SAA 건너뛰고 SAP 시험을 보고 싶다는 생각을했다. 막연히 기한을 두고 공부하지는 않았는데 CLF때 너무 기본 개념 공부를 열심히 해서 그런지 기본적으로 각 서비스의 개념이 잡혀있어 엄청나게 어렵게 공부를 하지는 않았다. 도움이 될 만한 공부의 순서는 아래와 같다. 1. VPC 2. EC2 3. ELB 4. AutoScaling 5. Storage 6. Database 의 순서로 기본 개념.. 2023. 9. 7. 이전 1 ··· 11 12 13 14 15 16 17 다음
