HDFS 대신 Amazon S3 for Hadoop 스토리지를 사용할 수 있습니까?

최종 업데이트 날짜: 2020년 6월 4일

하둡 분산 파일 시스템(HDFS) 대신 Amazon Simple Storage Service(Amazon S3)를 Apache 하둡 스토리지 시스템으로 사용하도록 Amazon EMR을 구성할 수 있습니까?

해결 방법

하둡 스토리지 계층에 HDFS 대신 Amazon S3를 사용하도록 Amazon EMR을 구성할 수 없습니다. Amazon S3를 사용하는 HDFS와 EMR 파일 시스템(EMRFS)은 모두 Amazon EMR과 호환되지만 서로 대체할 수는 없습니다. HDFS는 POSIX 파일 시스템 동작을 모델링하도록 구현된 하둡 FileSystem API입니다. EMRFS는 파일 시스템이 아니라 객체 스토어입니다. 자세한 내용은 하둡 설명서에서 객체 스토어와 파일 시스템을 참조하십시오.

각 파일 시스템을 어떤 경우에 사용해야 하는지에 대한 권장 사항은 스토리지 및 파일 시스템 작업을 참조하십시오.


이 문서가 도움이 되었습니까?

AWS에서 개선해야 할 부분이 있습니까?


도움이 필요하십니까?