본문 바로가기

전체 글

(259)
22년 회고 - 길을 헤매다 제목 : 길을 헤매다 - 하고 싶은 것이 뭔가요? - 직업이 뭔가요? 저는 머신러닝 엔지니어입니다 머신러닝 엔지니어요? 그게 뭔가요?? 음.. 이 직업을 정의하는 게 사람마다, 회사마다 다른 거 같아요 본인이 생각하는 머신러닝 엔지니어는 뭔가요? AI 서비스를 사람들의 삶에 스며들게 하는 사람이요 낭만적인 대답이군요... 좀 더 구체적으로 말씀해 주실래요? 데이터 구축부터 학습 그리고 서비스 배포까지 필요한 여러 환경을 관리 및 구축하는 사람..이라고 생각합니다. 그렇군요. 그럼 현재 그러한 일을 하고 계신가요? 잘 모르겠습니다. 물론 언젠가 필요한 역량을 키우는 과정이다라고 생각하고 하고 있습니다. 잘 모른다고 하셨는데.. 지금 두 번째 회사가 아닌가요? 그럼 이직하신 이유가 뭔가요? 음.. 그때는 잘..
[CLOUD] Amazon S3? Amazon S3? 갑자기 s3 타령? MLops 하려면, 언젠가는 필요할 거라고 생각하기 때문.. Reference AWS 공식 문서의 Aws S3란? Amazon S3 S3? 3개의 S(Simple Storage Service), 즉 Amazon Simple Storage Service S3 기능 스토리지 클래스 S3는 여러 사용 사례에 맞춰 설계된 다양한 스토리지 클래스. S3의 각 객체는 그와 연결된 스토리지 클래스가 있음 쉽게 말하면, 자주 액세스 하냐 안 하냐?, 밀리초 단위마다 액세스 하냐? 와 같은 상황 별 클래스들이 존재하는데, 각 클래스는 비용이 다르기 때문에 쓸 용도에 맞게 선택해서 쓸 것(외울 필요는 없고 스토리지 존재 여부만 알자) 데이터 처리 데이터를 변환하고 워크플로를 트리거하..
[CLOUD] 인바운드 & 아웃 바운드 (Feat. 보안그룹) 인바운드 & 아웃 바운드 (Feat. 보안 그룹, 포트) 갑자기 바운드 타령? MLops 할라먼, 언젠가는 필요할 거라고 생각하기 때문.. Reference dkhan님의 인/아웃 바운드 정리 AWS doc의 인/아웃바운드 규칙 인/아웃 바운드 규칙 모든 Something(IP, Port, Packet, Policy…)에 대한 접근을 허락하는 것은 위험하기 때문에, 이때 적용하는 규칙 인바운드 서버 내부로 들어오는 Something(IP, Port, Packet, Policy…) 아웃바운드 서버 외부로 나가는 Something(IP, Port, Packet, Policy…) 인바운드 규칙 클라이언트 -> 서버 데이터에 접속하는 권한 클라이언트 -> 서버에 데이터를 업로드할 때 필요한 권한 기본적인 규칙은..
Few shot learning? Meta Learning? %% 경고 %% 해당 포스팅은 수학적인 설명은 하지 않습니다. 같은 Few Shot Learning 일 지라도, Training strategy 전략에 따라 설명을 달라질 것이기 때문입니다 이번 포스팅에서는 포괄적인 설명만 다루고 있습니다. Reference What is Meta Learning By Cem Dilmegani Few Shot Learning 이란 By zzaebok님 Few Shot Learning 이란 By seujung님 Few Shot Learning 이란 By borealisai님 Few Shot Learning 이란 By sjinu님 Few Shot Learning 이란 BY 후이님 Few Shot Learning 이란 BY Deval Shah님 Few Shot Learning..
[논문 공부] What Changes Can Large-scale Language Models Bring? Intensive Study on HyperCLOVA: Billions-scale Korean Generative Pretrained Transformers What Changes Can Large-scale Language Models Bring? Intensive Study on HyperCLOVA: Billions-scale Korean Generative Pretrained Transformers 원문 : https://arxiv.org/pdf/2109.04650.pdf 개요 이번 포스팅에서는 What Changes Can Large-scale Language Models Bring? Intensive Study on HyperCLOVA: Billions-scale Korean Generative Pretrained Transformers 논문을 공부합니다. 나는 사용했다. 구글 번역기 번역을 위해서 Reference jiho님의 HyperCLOVA ..
[Cloud] NAT Gateway(Feat. Subent, VPC, Elastic IP) NAT Gateway(Feat. Subent, VPC, Elastic IP) 갑자기 게이트웨이 타령? MLops 할라먼, 언젠가는 필요할 거라고 생각하기 때문.. Reference AWS 공식 문서 해리님의 VPC개념 잡기 NAT Gateway NAT을 처리해주는 장치 NAT - Network Address Translation 비공인 네트워크에 속한, 여러개 호스트가 하나의 공인 IP주소를 사용해 인터넷에 접속하는 방법 프라이빗 서브넷 인스턴스가 VPC 외부 서비스에 연결 가능 하지만 외부 서비스에서 이러한 인스턴스와 연결을 시작할 수없도록 NAT Gateway 설정 가능 VPC (Virtual Private Cloud) 논리적으로 독립적인 네트워크 VPC 내에서 서브넷, IP주소, 라우팅, 게이트웨이..
[논문 공부] What Is Wrong With Scene Text Recognition Model Comparisons? Dataset and Model Analysis [논문 공부] What Is Wrong With Scene Text Recognition Model Comparisons Dataset and Model Analysis 원문 : https://arxiv.org/abs/1904.01906 What Is Wrong With Scene Text Recognition Model Comparisons? Dataset and Model Analysis Many new proposals for scene text recognition (STR) models have been introduced in recent years. While each claim to have pushed the boundary of the technology, a holistic and f..
[논문 공부] CRAFT : Character Region Awareness for Text Detection [논문 공부] Character Region Awareness for Text Detection 원문 : https://arxiv.org/abs/1904.01941 Character Region Awareness for Text Detection Scene text detection methods based on neural networks have emerged recently and have shown promising results. Previous methods trained with rigid word-level bounding boxes exhibit limitations in representing the text region in an arbitrary shape. In this p arx..