Amazon Redshift

Amazon Redshift는 I/O 효율성을 개선하기 위해 컬럼 방식 스토리지 기술을 사용하고 다중 노드에서 쿼리를 병렬 처리하여 빠른 쿼리 성능을 제공합니다. Amazon Redshift는 매우 다양하며 익숙한 SQL 클라이언트를 사용할 수 있도록 커스텀 JDBC 및 ODBC 드라이버를 지원하며, 드라이버는 콘솔의 Connect Client 탭에서 다운로드할 수 있습니다. 또한 표준 PostgreSQL JDBC 및 ODBC 드라이버도 사용할 수 있습니다. 데이터 로드 속도는 Amazon S3, Amazon DynamoDB, Amazon Elastic MapReduce, Amazon Kinesis 또는 모든 SSH 사용 호스트를 통합하여 클러스터 크기에 따라 선형적으로 증가합니다.

Amazon Redshift의 데이터 웨어하우스 아키텍처를 사용하면 클라우드 데이터 웨어하우스의 프로비저닝, 구성 및 모니터링과 관련된 대부분의 일반적인 관리 작업을 자동화할 수 있습니다. Amazon S3로의 백업은 증분 백업이며 지속적이고 자동으로 이루어집니다. 복원이 빨라 데이터가 백그라운드에서 스풀링되는 동안 몇 분 만에 쿼리 작업을 시작할 수 있습니다. 단 몇 번의 클릭으로 리전 간에 재해 복구를 활성화할 수 있습니다.

보안 기능이 내장되어 있습니다. 하드웨어 가속 AES-256 및 SSL을 사용하여 저장 데이터 및 전송 데이터를 암호화하고, Amazon VPC를 사용하여 클러스터를 격리하며, AWS Key Management Service(KMS) 및 하드웨어 보안 모듈(HSM)을 사용하여 키를 관리할 수도 있습니다. 클러스터에 대한 모든 API 호출, 연결 시도, 쿼리 및 변경은 로그에 기록되며 감사가 가능합니다. AWS CloudTrail을 사용하여 Redshift API 호출을 감사할 수 있습니다.

Amazon Redshift는 다음과 같은 다양한 혁신을 통해 100기가바이트에서 페타바이트에 이르는 크기의 데이터 세트에 대해 매우 높은 쿼리 성능을 제공합니다. Amazon Redshift는 컬럼 방식 스토리지, 데이터 압축 및 영역 매핑을 사용하여 쿼리 수행에 필요한 I/O 수를 줄입니다. Amazon Redshift는 대량 병렬 처리(MPP) 데이터 웨어하우스 아키텍처를 사용하므로 SQL 작업을 병렬 처리하고 분산하여 사용 가능한 리소스를 모두 활용할 수 있습니다. 기본 하드웨어는 고성능 데이터 프로세싱을 수행하도록 설계되어 있습니다. CPU 및 드라이브 간의 처리량을 최대화하기 위해 로컬 연결 스토리지를 사용하고, 노드 간 처리량을 최대화하기 위해 10GigE 메시 네트워크를 사용합니다.

성능이나 용량 변경이 필요한 경우 AWS Management Console에서 몇 번의 클릭으로 또는 간단한 API 호출을 통해 간편하게 클라우드 데이터 웨어하우스의 노드 유형 또는 노드 수를 변경할 수 있습니다. 고밀도 스토리지(DS) 노드를 사용하면 매우 저렴한 가격에 하드 디스크 드라이브(HDD)를 사용하는 매우 큰 규모의 데이터 웨어하우스를 생성할 수 있습니다. 고밀도 컴퓨팅(DC) 노드를 사용하면 고속 CPU, 대량의 RAM 및 솔리드 스테이트 디스크(SSD)를 사용하는 매우 높은 성능의 데이터 웨어하우스를 생성할 수 있습니다. Amazon Redshift를 사용하면 단일 160GB DC1.Large 노드만큼 적은 규모로 시작하여 16TB DS2.8XLarge 노드를 사용하는 페타바이트 이상의 압축 사용자 데이터까지 규모를 확장할 수 있습니다. 규모를 조정하는 동안 Amazon Redshift는 기존 클러스터를 읽기 전용 모드로 지정하고 사용자가 선택한 크기의 새 클러스터를 프로비저닝한 다음, 기존 클러스터에서 새 클러스터로 데이터를 병렬 복사합니다. 새 클러스터가 프로비저닝되는 동안 이전 클러스터에서 계속 쿼리를 실행할 수 있습니다. 데이터가 새 클러스터로 복사되면 Amazon Redshift는 자동으로 쿼리를 새 클러스터로 리디렉션하고 기존 클러스터를 삭제합니다.

프로비저닝한 리소스에 대해서만 지불하면 됩니다. 선결제 비용 및 장기 약정이 없는 온 디맨드 요금을 선택하거나 예약 인스턴스 요금으로 상당히 할인된 요금을 선택할 수 있습니다. 온 디맨드 요금은 160GB DC1.Large 노드에 대해 시간당 0.25 USD 또는 2TB DS2.XLarge 노드에 대해 시간당 0.85 USD에서 시작합니다. 부분 선결제 예약 인스턴스를 사용하면 실질 요금을 DC1.Large 노드에 대해 시간당 0.10 USD(연간 5,500 USD/TB) 또는 DS2.XLarge 노드에 대해 시간당 0.228 USD(연간 999 USD/TB)로 낮출 수 있습니다. 자세한 내용은 Amazon Redshift 요금 페이지를 참조하십시오.

AWS Management Console에서 몇 번의 클릭만으로 또는 간단한 API 호출을 통해 크기를 지정하고 노드 유형 및 보안 프로필을 설정하여 클러스터를 만들 수 있습니다. Amazon Redshift는 노드를 프로비저닝하고 노드 간 연결을 구성하고 클러스터를 보호합니다. 데이터 웨어하우스는 몇 분 안에 시작되고 실행됩니다.

Amazon Redshift는 클러스터 상태 모니터링 및 백업 수행부터 패치 및 업그레이드 적용에 이르기까지 데이터 웨어하우스의 관리, 모니터링 및 조정을 위해 필요한 모든 작업을 처리합니다. 필요한 성능 및 용량의 변화에 따라 클러스터 크기를 쉽게 조정할 수 있습니다. Amazon Redshift에서 시간이 많이 소비되고 노동 집약적인 작업을 모두 처리함으로써 사용자는 데이터와 비즈니스에 집중할 수 있게 됩니다.

Amazon Redshift에는 데이터 웨어하우스 클러스터의 안정성을 향상시키는 여러 기능이 있습니다. 클러스터의 노드에 쓰이는 모든 데이터는 해당 클러스터 내의 다른 노드에 자동 복제되며 모든 데이터는 Amazon S3에 계속 백업됩니다. Amazon Redshift는 계속해서 클러스터 상태를 모니터링하고 자동으로 실패한 드라이브의 데이터를 다시 복제하며 필요에 따라 노드를 교체합니다.

Amazon Redshift의 자동화된 스냅샷 기능은 클러스터의 새 데이터를 Amazon S3로 계속 백업합니다. 스냅샷은 증분 백업이며 지속적이고 자동으로 이루어집니다. Amazon Redshift는 사용자가 지정한 기간(최대 35일) 동안 스냅샷을 보관합니다. 사용자는 기존 모든 시스템 스냅샷을 활용하며 명시적으로 삭제할 때까지 보존되는 사용자 스냅샷을 언제든지 만들 수 있습니다. 또한 Redshift는 재해 복구를 위해 스냅샷을 다른 리전의 S3에 비동기적으로 복제할 수 있습니다. 클러스터를 삭제하면 시스템 스냅샷은 삭제되지만 사용자 스냅샷은 명시적으로 삭제할 때까지는 남아있습니다.

AWS Management Console 또는 Amazon Redshift API를 사용하여 클러스터를 복구하기 위해 시스템 또는 사용자 스냅샷을 사용할 수 있습니다. 클러스터는 시스템 메타데이터가 복구되는 대로 사용이 가능하며 사용자 데이터가 백그라운드에서 스풀링되는 동안 쿼리 실행을 시작할 수 있습니다.

몇몇 파라미터 설정만으로 전송 중인 데이터를 보호하기 위해 SSL을 사용하고 저장된 데이터를 보호하기 위해 하드웨어 가속 AES-256 암호화를 사용하도록 Amazon Redshift를 설정할 수 있습니다. 저장된 데이터에 암호화를 사용하도록 선택하면 백업 및 디스크에 작성된 모든 데이터가 암호화됩니다. 기본적으로 Amazon Redshift가 키를 관리하지만 사용자는 자신의 하드웨어 보안 모듈(HSM), AWS CloudHSM 또는 AWS Key Management Service를 사용하여 키를 관리하도록 선택할 수 있습니다.

Amazon Redshift를 사용하면 데이터 웨어하우스 클러스터에 대한 네트워크 액세스를 제어하도록 방화벽 규칙을 구성할 수 있습니다. 자체 가상 네트워크에 있는 데이터 웨어하우스 클러스터를 격리하고 업계 표준의 암호화된 IPSec VPN을 사용하여 기존 IT 인프라에 연결하기 위해 Amazon Virtual Private Cloud(Amazon VPC) 내에서 Amazon Redshift를 실행할 수 있습니다.

Amazon Redshift는 AWS CloudTrail과 통합되어 모든 Redshift API 호출을 감사할 수 있습니다. 또한 Amazon Redshift는 데이터베이스에 대한 연결 시도, 쿼리 및 변경을 비롯한 모든 SQL 작업을 로그에 기록합니다. 사용자는 시스템 테이블에 대한 SQL 쿼리를 사용하여 이러한 로그에 액세스하거나 로그를 Amazon S3의 안전한 위치로 다운로드하도록 선택할 수 있습니다. Amazon Redshift는 SOC1, SOC2, SOC3 및 PCI DSS Level 1 요구 사항을 준수합니다. 자세한 내용은 AWS 규정 준수 센터를 방문하십시오.

Amazon Redshift는 SQL 데이터 웨어하우스 솔루션으로 업계 표준 ODBC 및 JDBC 연결을 사용합니다. 커스텀 JDBC 및 ODBC 드라이버는 콘솔의 Connect Client 탭에서 다운로드할 수 있습니다. 널리 사용되는소프트웨어 공급업체가 자사 제품에 대해 Amazon Redshift를 인증하였으므로 현재 사용하는 도구를 계속해서 사용할 수 있습니다. 자세한 내용은 Amazon Redshift 파트너 페이지를 참조하십시오.

Amazon Redshift는 다른 AWS서비스와 통합되며 Amazon S3, Amazon DynamoDB 또는 SSH를 사용하는 EC2 및 온프레미스 서버에서 각 노드에 데이터를 병렬 로드할 수 있는 명령을 포함하고 있습니다. AWS Data Pipeline, Amazon Kinesis 및 AWS Lambda는 데이터 대상으로서 Amazon Redshift와 통합됩니다.