Category: Storage

이전 글에서는 병렬 파일시스템의 기본 개념과 특징, 그리고 대표적인 병렬 파일시스템인 Lustre에 대해 살펴보았습니다. 병렬 파일시스템은 무엇이고 왜 필요할까? 지구상에서 가장 인기있는 병렬 파일시스템, Lustre 파일시스템 알아보기 이번에는 AWS가 제공하는 완전 관리형 병렬 파일시스템 서비스인 Amazon FSx for Lustre를 알아보겠습니다. What is Amazon FSx for Lustre? 고성능 컴퓨팅(HPC) 환경에서는 대량의 데이터를 신속하게 처리해야 하며, 이를 […]

불과 몇년만에 생성형 AI 서비스가 모든 사람의 화두가 되고 모든 비즈니의 중심과 투자는 생성형AI 서비스로 몰리고 있습니다. ChatGPT를 시작으로 많은 생성형 AI모델들이 쏟아져 나오고, 새로 나오는 모델들은 기존보다 훨씬 뛰어난 성능과 기능을 자랑합니다. 이러한 생성형AI서비스 모델을 LLM(Large Language Model)이라고도 합니다. 많은 기업들이 챗봇형태의 서비스를 시작으로 다양한 실험을 통해, 에이전트 형태의 서비스를 개발하고 있습니다. 이전에는 LLM […]

지난 블로그에서는 병렬 파일시스템이 무엇이고 왜 고성능 컴퓨팅 환경에서 필수적으로 사용되는지에 대해 알아보았습니다. 이번 블로그에서는 병렬 파일시스템 중, 가장 대표적인 파일시스템이라 할 수 있는 Lustre에 대해 좀 더 자세히 알아보도록 하겠습니다. Lustre는 AWS의 병렬 파일 스토리지 서비스인 Amazon FSx for Lustre의 기반이 되는 스토리지 기술입니다. What is Lustre? 이 블로그 시리즈는 AWS의 고성능 매니지드 스토리지 […]

OpenSearch는 검색, 분석, 보안 모니터링, 통합 가시성 애플리케이션을 위한 확장 가능하고 유연한 오픈 소스 소프트웨어 제품군으로, Apache 2.0 라이선스를 따릅니다. Amazon OpenSearch Service(AOS)는 AWS 클라우드에서 OpenSearch를 간편하게 배포, 확장, 운영할 수 있으며 Amazon OpenSearch Ingestion, Integration 기능을 통해 다양한 AWS 서비스와 연동이 가능한 완전 관리형 서비스 입니다. 검색 서비스에서는 다양한 필터가 필요합니다. 특히, 상품 검색시 […]

지난 몇 차례의 블로그 게시를 통해, AWS 클라우드 환경에서 HPC 클러스터를 구성하는 핵심 요소인 EC2 인스턴스와 이들을 연결하는 고속 네트워크 인터페이스인 EFA(Elastic Fabric Adaptor)에 대해 소개하였습니다. 이제 HPC 클러스터의 마지막 핵심 요소인 스토리지에 대해 알아보겠습니다. 앞으로 4회에 걸쳐 병렬 파일시스템의 개념과 AWS의 완전관리형 병렬 파일시스템인 Amazon FSx for Lustre를 소개해드리겠습니다. 첫 번째 글에서는 HPC 환경에서 […]

인공지능과 기계학습 기술의 상용화로, 기업들은 대량의 데이터를 효과적으로 수집, 저장, 관리할 필요성을 점차 인식하고 있습니다. 데이터 레이크(Data Lake)는 이러한 필요성에 부응하여, 다양한 소스로부터 대규모의 데이터를 실시간으로 수집하고 저장함으로써 기업의 의사결정과 혁신을 지원합니다. 이제 데이터 레이크는 기업이 데이터 자산을 최대한 활용하고 비즈니스 가치를 창출하는 핵심 요소로 자리 잡고 있습니다. 정형, 반정형, 비정형 데이터 등 다양한 유형의 […]

이 글은 AWS Storage Blog에 게시된 Analyzing Amazon S3 Metadata with Amazon Athena and Amazon QuickSight by Lokesh AP, Tom Bailey, Huey Han, Lee Kear, Fabio Lattanzi, and Roohi Sood를 한국어 번역 및 편집하였습니다. 오브젝트 스토리지는 사실상 무제한의 확장성을 제공하지만 수십억 개, 심지어 수조 개의 오브젝트를 관리하는 데는 상당한 어려움이 따를 수 있습니다. 어떤 데이터가 있는지 어떻게 알 수 […]

사물인터넷(IoT)의 발전이 눈부시게 진행되면서, 우리 주변에 연결된 기기들은 빠르게 증가하고 이로 인해 생성되는 데이터 또한 폭발적으로 늘어나고 있습니다. 이런 데이터의 바다 속에서 비즈니스적 가치를 찾기 위해서는 안정적으로 원하는 데이터를 취득하는 것이 중요합니다. IoT 디바이스는 수많은 형태의 데이터를 생성해 내고 있으며, AWS 에서는 AWS IoT Core를 통해 이러한 다양한 센서와 기기 정보 데이터의 안정적이고 보안적인 수집을 […]

빗썸은 2014년 서비스 개시 이후, 전 세계 거래량 1위를 기록하며 신뢰받는 가상자산 거래소로 성장했습니다. 과거에는 가상자산 거래 플랫폼 구축, 운영, 블록체인 기술 분야에서 세계 최고 수준의 경쟁력과 노하우를 쌓았다면, 앞으로는 글로벌 디지털 금융 플랫폼의 미래를 선도하고자 합니다. 또한, 빗썸 보안실에선 최첨단 보안 시스템을 바탕으로 사용자 자산 보호와 거래 안전성을 최우선으로 보장하고 있습니다. 빗썸과 같이 EC2 […]

이 글은 AWS Storage Blog에 게시된 Protecting your critical Amazon EBS volumes using AWS Backup by Hana Do 를 한국어 번역 및 편집하였습니다. 많은 기업들이 Amazon Elastic Block Store(Amazon EBS)와 같은 블록 스토리지를 미션 크리티컬 워크로드에 사용합니다. 데이터베이스, ERP 시스템, 실시간 분석과 같은 까다로운 애플리케이션에 필요한 높은 성능, 낮은 지연 시간 및 안정적인 데이터 액세스를 […]