DBMS 종류(오라클, MS-SQL 등)을 제한하지는 않습니다. GCP DW를 구성하고자 하는 솔루션에서 지원하는 파일 포맷으로 해당 RDBMS가 지원하면 가능하리라 봅니다.
사용하려는 GCP 솔루션 구매 가능한 부서에서 진행하면 되지 않을까요? 각 부서의 데이터를 한 부서에서 모두 가지고 있는 것이 조직 사회 정서상 부정적일 수 있으니까요^^
Oracle RDBMS의 데이터를 CSV로 뽑아서 Google BigQuery에 넣어줄 수 있도록 Embulk나 Fluentd 같은 솔루션으로 집어넣을 수 있습니다. 해당 요구사항만 단순하게 보면 DB티어 앞단의 어플리케이션 티어에서는 수정할 사항은 없는 것 같아요.
정형/비정형 혼합을 생각하신다면... 정형 데이터는 BigQuery에서, 비정형 데이터는 BigTable로 처리하여 DW 구성하고 전처리 하여 정형 데이터 비정형 데이터 모두 사용하기 편하게 데이터 마트를 구축하면 될 듯 합니다.
포맷에 대한 내용 같은데 BigQuery에서 Query 결과를 CSV, JSON, Google Sheets으로 Download 또는 Save할 수 있습니다.
데이터웨어하우스 안에 넣고 분석까지 필요한 것은 아니신거 같은데... 쇼핑몰 웹로그, 고객 구매 데이터를 접목해서 보고 싶으시면 Google Analytics로 이용하면 가능할 듯 하네요.
Google BigQuery에서 Tableau, Spotfire의 시각화를 지원하는 것으로 보이네요 말씀하신 시각화 툴을 어떤 GCP 제품과 연동하고 싶으신가요? https://datavirtuality.com/connectors/integrate/google-bigquery/tableau/ https://datavirtuality.com/connectors/integrate/google-bigquery/tibco-spotfire/
오... 실시간 로그 분석이 가능하다면 어플리케이션이나 서버의 로그 수집 및 모니터링이 간편하겠네요!
안녕하세요