4차산업의 필수재료 데이터 웨어하우스 (Snow Flake)

스노우플레이크의 주력플랫폼

 

 

스노우 플레이크가 주력으로 하는 플랫폼은 데이터 웨어하우스입니다.

데이터 웨어하우스란 ?

보다 정보에 입각한 의사 결정을 내릴 수 있도록 분석 가능한 정보의 중앙 리포지토리

데이터는 트랜잭션 시스템, 관계형 데이터베이스 및 기타 소스로부터 보통 정기적으로 데이터 웨어하우스 들어갑니다.

비즈니스 애널리스트, 데이터 엔지니어, 데이터 사이언티스트 및 의사 결정권자는 비즈니스 인텔리전스 도구,

SQL 클라이언트 및 기타 분석 응용 프로그램을 통해 데이터에 액세스합니다.

(쉽게 말하자면 모든 프로그램을 통합으로 관리하며 많은 사용자에게 정보를 신속하게 제공합니다)

 

데이터 및 분석은 비즈니스가 경쟁력을 유지하는 데 없어서는 안 되는 부분이 되었습니다.

비즈니스 사용자는 보고서, 대시보드 및 분석 도구를 활용하여 데이터에서 통찰력을 찾아내고, 비즈니스 성과를 모니터링하며, 의사 결정을 지원합니다. 데이터 웨어하우스는 데이터를 효율적으로 저장하여 보고서, 대시보드 및 분석도구를 

강화함으로써 데이터의 입출력(I/O)을 최소화하고 수백 수천 명의 사용자에게 동시에 신속하게 쿼리 결과를 제공합니다.

 

 

 

 

스노우플레이크(snow flake)는 어떤 회사일까?

 

 

 

데이터 웨어하우스는 어떻게 작동하는가?

 

 

 

 

데이터 웨어하우스에는 여러 개의 데이터베이스가 포함될 수 있습니다. 

각 데이터베이스 내에서 데이터는 테이블 및 열로 구성되고, 각 열 내에서 사용자는 정수, 데이터 필드 또는 문자열 등

데이터의 설명을 정의할 수 있습니다. 테이블은 스키마 내부에 구성될 수 있으며, 이는 폴더와 같은 역할을 합니다.

데이터가 수집되면 스키마에 의해 설명되는 다양한 테이블에 저장됩니다.

쿼리 도구는 스키마를 사용하여 어떤 데이터 테이블을 액세스하고 분석할지 결정합니다.

 

 

 

 

데이터 웨어하우스를 사용해야하는 장점은 무엇인가?

 

 

 

 

 

 

데이터 웨어하우스의 장점은

 

1. 정보에 기반한 의사 결정

 

2. 여러 소스의 데이터 통합

 

3. 과거 데이터 분석

 

4. 데이터 품질, 일관성 및 정확성

 

5. 트랜잭션 데이터베이스와 분석 처리를 분리하여 두 시스템 모두의 성능을 향상

 

 

 

 

 

데이터 웨어하우스

 

 

 

 

 

데이터 웨어하우스는 데이터 분석을 위해 설계되었으며, 대량의 데이터를 읽어 데이터 전반에 걸친

관계와 추세를 파악하는 작업이 포함됩니다. 데이터베이스는 트랜젝션의 세부사항을 기록하는 것과 같이 데이터를 

캡처하고 저장하는데 사용됩니다.

 

데이터 웨어하우스와 달리, 데이터 레이크는 정형, 반정형 및 비정형 데이터를 비롯한 모든 데이터에 대한

중앙 리포지토리입니다. 

데이터 웨어하우스에는 데이터를 테이블 형식으로 구성해야 하며, 여기는 스키마가 중요한 역할을 합니다.

테이블 형식은 SQL을 사용하여 데이터를 쿼리하기 위해 필요합니다.

그러나 일부 애플리케이션에는 데이터가 테이블 형식일 필요가 없습니다.

빅 데이터 분석, 전체 텍스트 검색 및 기계 학습과 같은 일부 애플리케이션에서는 반정형 또는 비정형인 경우에도 데이터에 액세스 할 수 있습니다.