[01-12] 스토리지 추가 기능 4

[myeongJJi]

AWS 전송 제품군

• 파일 전송은 하고 싶은데 S3도 쓰기 싫고, EFS도 쓰기 싫은 때 오직 FTP 포로토콜을 사용해서 전송하고 싶을 때 이 제품을 사용
• 세 가지 프로토콜을 지원
  • AWS Transfer for FTP (File Transfer Protocol(FTP))
  • AWS Transfer for FTPS (File Transfer Protocol over SSL (FTPS))
  • AWS Transfer for SFTP (Secure File Transfer Protocol (SFTP))
• FTP를 통해 S3 혹은 EFS 에 업로드 할 수 있음
• 전송 제품군은 완전 관리형 인프라이며 확장성, 안정성이 높고 가용성(멀티 AZ) 또한 높음
• 가격은 시간당 프로비저닝된 엔드 포인트 비용 + 전송 제품군 in/out 전송된 데이터의 GB당 요금
• 서비스 내에서 사용자 자격 증명을 저장 및 관리할 수 있음
• 기존 인증 시스템과 통합할 수도 있음 (Microsoft Active Directory, LDAP, Okta, Amazon Cognito, custom)
• Usage :
  • sharing files
  • public datasets
  • CRM
  • ERP 등등

DataSync ** 시험 자주 출제

• 이 서비스는 데이터를 동기화 하며 대용량 데이터를 한 곳에서 다른 곳으로 옮길 수 있음
  • 온프렘이나 AWS의 다른 클라우드로 데이터를 옮길 수 있는데 이때 서버를 NFS, SMB, HDFS, 다른 프로토콜 등에 연결해야 하고 옮길 위치인 온프렘이나 연결할 다른 클라우드 agent가 있어야 함
  • 다른 유형의 마이그레이션도 실행할 수 있음. 가령 AWS -> 다른 AWS 서비스로 데이터를 옮길 수 있음 (이 경우에는 agent가 필요 없음)
• 동기화 가능 대상
  • 모든 Amazon S3의 Glacier를 포함하여 모든 스토리지 클래스에 동기화 할 수 있음
  • Amazon EFS로 네트워크 파일 시스템을 저장할 수 있음
  • Amazon FSx (Windows, Lustre, NetApp, OpenZFS ...)
• 복제 작업은 계속 이루어지지 않고 일정을 지정하여 DataSync가 매 시간, 매일, 매주 실행되도록 설정할 수 있음
• 지연이 발생하긴 하지만 일정에 맞춰서 데이터 동기화 가능 - 파일 권한과 메타데이터 저장 기능이 있음 (NFS POSIX 파일시스템, SMB 권한 준수
• agent 하나 당 task가 초당 10Gb까지 사용할 수 있으며 네트워크 성능을 초과하고 싶지 않은 경우 대역폭에 제한을 걸 수 있음

NFS / SMB to AWS (S3, EFS, FSx ...)

Transfer between AWS storage services

• DataSync를 통해 서로 다른 AWS 스토리지 서비스 간 동기화도 가능

모든 AWS 스토리지 옵션 비교

• S3 : 객체 스토리지로 상당히 구체적인 API이지만 대부분의 AWS와 연결할 수 있음
• S3 Glacier : S3 객체를 아카이브 할 때 사용
• EBS volumes :
  • 한 번에 한 개의 EC2 인스턴스에만 스토리지를 연결할 때 사용
  • EBS 볼륨은 IO1과 IO2 볼룸에 다중 연결 기능을 지원
  • GP3 볼룸, IO2 볼륨 등이 있음
• Instance Storage : IOPS가 높은 EC2 인스턴스에 네트워크 스토리지가 아닌 고성능 물리 스토리지를 필요로 하는 경우
• EFS : 인스턴스가 네트워크 파일 시스템을 필요로 하며 다중 가용 영역 간 마운트해야 하면서 POSIX 파일 시스템을 쓸 때
• FSx for Windows : Windows 서버 파일 시스템을 필요로 하는 경우
• FSx for Lustre : 고성능 연산 리눅스 파일 시스템이며 Lustre 클라이언트와 호환 가능해야 하는 경우
• FSx for NetApp ONTAP : 높은 운영체제 호환성과 네트워크 파일 시스템이 필요한 경우
• FSx for OpenZFS : 관리형 ZFS 파일 시스템이 필요한 경우
• Storage Gateway : 온프렘과 AWS 간 스토리지를 연결하는 경우
  • S3와 FSx 파일 게이트웨이를 이용하여 온프렘과 S3 또는 FSx에 파일을 동기화 할 수 있음
  • 볼륨 게이트웨이를 이용하면 온프렘 서버에 볼륨을 마운트 할 수 있음
  • 클라우드에 백업도 가능
  • 테이프 게이트웨이는 테이프 형식으로 백업을 실행
• Transfer Family : S3, EFS, FTP, FTPS, SFTP 인터페이스를 필요로 하는 경우
• DataSync : 온프렘에서 AWS, AWS에서 AWS 로 일정에 따라 데이터를 동기화 할 때
• Snowcone / Snowball / Snowmobile : 데이터를 옮기는데 쓸 네트워크 용량이 없으나 물리적으로 대용량의 데이터를 옮겨야 할 때
  • Snowcone은 DataSync 에이전트가 사전 설치되어 온다는 특징이 있음
• Database : 데이터 저장이 가능하나 인덱스와 쿼리 작업을 필요로 하는 특수한 워크로드가 있음

[fxzyk]

시험이 코앞으로 다가왔나보구만욬ㅋㅋㅋㅋ

[myeongJJi]

ㅋㅋㅋㅋㅋ마음이 조급하네요 내 15만원~~~~

[fxzyk]

화이팅!!!! 한번에 따버리잣

[snaag]

세상에 15마넌...!!! *_*.... 홧팅임당!!!!!!