Amazon Web Services 한국 블로그

AWS Glue를 활용한 서버리스 스트리밍 ETL 기능 출시

데이터를 분석할 때, 가장 먼저 취하는 방법은 일괄(Batch) 처리 모델입니다. 일정 기간 동안 데이터를 수집한 다음, 분석 도구에 넣는 것입니다. 신속히 대응하려면 스트리밍(Streaming) 모델을 사용할 수 있습니다. 이 모델에서는 데이터가 도착하는 대로 처리하거나, 한 번에 레코드 하나씩 처리하거나, 10개, 100개, 1,000개 단위의 마이크로 배치로 레코드를 처리합니다. 연속적인 입력 파이프라인을 관리하고 즉석에서 데이터를 처리하는 작업은 상당히 […]

Amazon SageMaker의 MXNet 추론 컨테이너를 활용한 KoGPT2 모델 배포하기

기계 학습 기반 자연어 처리를 위한 다양한 학습 모델이 나오고 있는 가운데, 다국어로 학습된 BERT의 한국어 성능 한계를 극복하기 위해 SK텔레콤의 T-Brain에서는 KoBERT라는 한국형 사전 훈련 모델을 개발하였습니다. 위키피디아나 뉴스 등에서 수집한 수백만 개의 한국어 문장으로 이루어진 대규모 말뭉치(corpus)를 기반으로 학습하였으며, 한국어의 불규칙한 언어 변화의 특성을 반영하기 위해 데이터 기반 토큰화(Tokenization) 기법을 적용하여 Apache MXNet을 […]

Amazon CloudWatch Synthetics를 통해 웹 사이트, API 엔드포인트 등 모니터링하기

현대 애플리케이션에는 컨테이너, 마이크로서비스, 레거시 내부 서비스 및 타사 서비스를 비롯한 수백 또는 수천 개의 가동 부품이 포함됩니다. 각 부품의 상태 및 성능을 모니터링하는 것 외에 부품이 함께 작동하여 허용할 수 있는 고객 경험을 제공하는지 확인해야 합니다. Amazn CloudWatch Synthetics(AWS re:Invent 2019에서 발표)를 사용하면 사이트, API 엔드포인트, 웹 워크플로 및 기타 항목을 모니터링할 수 있습니다. […]

AWS Transfer Family, SFTP외 FTP 및 FTPS 추가 지원

AWS Transfer for SFTP는 2018년 11월에 출시된 완전관리형 서비스로, SFTP(Secure File Transfer Protocol)를 사용하여 Amazon S3의 파일을 직접 송신하고 수신할 수 있는 기능을 제공합니다. 이제 FTPS 및 FTP에 대한 지원을 추가하는 서비스 확장이 발표됨에 따라 기존의 AWS Transfer for SFTP 서비스에 더해 AWS에서 FTPS(File Transfer Protocol over SSL) 및 FTP 워크로드를 손쉽게 마이그레이션하고 안전하게 실행할 […]

AWS 아프리카(케이프타운) 리전 정식 공개

2018년 미리 공지 드린대로 아프리카 대륙에 새로운 AWS 리전이 출시되었습니다. 공식 이름은 아프리카(케이프타운)이며 API 이름은 af-south-1입니다. 지금 바로 이 새로운 리전을 사용하여 남아프리카에 워크로드를 배포하고 데이터를 저장할 수 있습니다. 이 새로운 리전이 추가됨에 따라 아프리카 전역의 최종 사용자에게 더 짧은 지연 시간으로 서비스를 제공할 수 있게 되었으며 더 많은 아프리카 기반 기업 및 단체들이 AWS […]

천만 사용자를 위한 클라우드 아키텍처, 5년간의 여정

본격적으로 AWS 클라우드 에반젤리스트로 일한 지 만 5년이 되었습니다. 2014년 11월 AWS에 입사한 후, 이듬해 4월 부터 당시 불모지 같았던 클라우드 분야에서 개발자와 스타트업을 대상으로 본격적으로 기술 전도를 시작했습니다. 가끔 제가 하고 있는 일에 대한 후일담을 한번 씩 블로그에 올리고 있는데, 오늘은 ‘기본기를 다지는 콘텐츠의 중요성’에 대해 이야기해보려고 합니다. AWS 입사 후, 일주일 만에 운 […]

AWS 주간 소식 모음 – 2020년 4월 27일

안녕하세요! 여러분~ 매주 월요일 마다 지난 주 업데이트된 국내 AWS관련 콘텐츠를 정리해 드리는 AWS 주간 소식 모음입니다. AWS 클라우드에 대한 새로운 소식을 확인하시는데 많은 도움 되시길 바랍니다. 혹시 빠지거나 추가할 내용이 있으시면, 저에게 메일 주시면 다음 중에 추가 공유해 드리겠습니다. AWS코리아 블로그 Amazon AppFlow 출시 – SaaS 데이터 연동 및 자동화 서비스 (서울 리전 포함) […]

Amazon AppFlow 출시 – SaaS 데이터 연동 및 자동화 서비스 (서울 리전 포함)

서비스형 소프트웨어(SaaS) 애플리케이션은 우리 고객에게 더욱 중요성이 커지고 있으며, 도입 속도도 급격히 빨라지고 있습니다. 이런 소프트웨어 사용 방식은 여러 가지 장점이 있지만, 데이터가 여러 위치에 저장된다는 문제가 있습니다. 이 데이터에서 의미 있는 분석 정보를 얻으려면 분석할 수단이 필요하지만, 데이터가 서로 고립된 위치에 흩어져 저장된다면 분석이 어려울 수 있습니다. 일반적으로 개발자는 SaaS 애플리케이션과 AWS 서비스 간에 […]

AWS ChatBot 정식 출시 – Slack과 Chime을 위한 ChatOps 서비스

작년에 제 동료인 Ilya Bezdelev는 AWS Chatbot – ChatOps for AWS라는 글을 통해 AWS Chatbot 공개 베타를 시작한다는 소식을 알렸습니다. 또한, re:Invent 2019 Launchpad에도 참여해서 자세한 AWS Chatbot 데모를 선보이기도 했습니다. 첫 번째 게시물에서 Amazon Chime 또는 Slack에서 ChatOps를 사용하고, 협업 기능이 기본으로 제공되는 환경에서 AWS 알림을 수신하고 명령을 실행하는 방법을 보여주었습니다. 그 이후에는 AWS […]

PyTorch용 오픈 소스 모델 서버 TorchServe 출시

PyTorch는 딥 러닝을 위한 가장 인기 있는 오픈 소스 라이브러리 중 하나입니다. 개발자와 연구자들은 모델 개발 및 학습에서 특히 PyTorch가 제공하는 유연성을 즐깁니다. 하지만, 프로덕션 환경에서 모델의 배포 및 관리는 맞춤형 예측 API를 개발하고 이를 확장하며 보안을 제공하는 것과 같은 기계 학습 프로세스의 가장 까다로운 부분이기도 합니다. 모델 배포 프로세스를 간소화하기 위한 한 가지 방법은 […]