데이터 메쉬와 데이터 레이크의 가장 큰 차이점은 데이터를 관리하는 방법일 것입니다. 데이터 레이크가 한 곳의 저장공간에 데이터를 모아서 관리하는 중앙 집중식 데이터 관리 방법이라면, 데이터 메시는 데이터 관리의 주체를 데이터를 생산하는 팀으로 정의하고 (데이터 도메인 팀) 여기에 관리에 책임과 권한을 주는 분산형 모델입니다..
답변 감사합니다. 데이터 메쉬는 데이터 도메인 팀이 도메인 별도 있으려면 자동화로 인력을 줄이는 현대 방향과는 좀 역행하는 것 아닌가요? 그리고 도메인 지식을 가진 팀이 없다면 데이터 메쉬의 효과가 확 떨어질 것 같은데 아닌가요?
네. 말씀하신데로 데이터 도메인 지식을 가진 팀이 없다면 데이터 메시는 그 효용성이 많이 떨어집니다. 그래서 데이터 메쉬는 큰 규모의 업체에서 중앙 집중적 데이터 레이크가 잘 운영되지 않을경우 그리고 각 팀에 권한을 주고 데이터를 관리할 수 있도록 하는 경우가 많습니다.
또한 데이데 메쉬의 기본이 되는 것이 데이터 제품을 만드는 프소세스를 최대한 자동화해서 각 팀에서 개발자가 아니더라도 데이터 제품을 만들고 관리 할 수 있는 그러한 플랫폼이 중요시 됩니다.
예 답변 감사합니다. 대기업같은 경우는 데이터 EA도 잡을 수 있어서 아주 좋을 것 같네요.
[질문] 서버리스가 단지 개발시 필요한 함수위주로만 기능이 있는게 아니라 백엔드와 마이그, 백업 등에도 사용되는 경우가 있는것 같은데 아키텍처적으로 설명을 듣고싶네요
하단 링크를 참조해주십시요.
Azure의 서버리스
https://azure.microsoft.com/ko-kr/solutions/serverless/
Functions
https://azure.microsoft.com/ko-kr/services/functions/
Azure 참조 아키텍처
https://docs.microsoft.com/ko-kr/azure/architecture/reference-architectures/
[질문] 서버리스 자체적으로 시장이 활성화되진 않은것 같은데 단독으로 사업화보단 결국 IaaS의 전체적인 전환이 필요한게 아닌지요? 타 서비스와 연동되는것도 많은듯 한데 Lock-in의 요소로 쓰이는건지요?오픈소스를 썼다고 하셨는데 이부분도 궁금하네요
단독 또는 IaaS 전체적인 전환은 해당 서비스의 속성과 개발 방향, 비지니스 영향등에 따라 적합성, 향후 계획등을 다각적으로 검토하는 경우가 많습니다.
여기에는 타 서비스 연동과 더불어 어느정도의 고유한 제한 사항등도 검토 하는 부분도 있습니다. 기타 오픈 소스 관련 부분은 하단 링크를 참조해주십시요,
* https://azure.microsoft.com/ko-kr/overview/choose-azure-opensource/
* Migrating an open source PaaS solution to Azure
https://www.microsoft.com/itshowcase/Article/Content/925/Migrating-an-open-source-PaaS-solution-to-Azure
[질문]NFV와 VNF를 활용하여 가상화된 Overlay SDN 구성을 한다면, HW장비의 OS버전 연동의 제한점과 관리 tool에 대한 점이 궁금합니다.또, 장애 시 복구 방법과 시간에 대한 내용도 궁금합니다.
Nuage의 Overlay SDN은 Hardware Fablic 자체의 SDN이 아닌 HyperVisor레벨의 SDN입니다. 즉 물리장비 레벨의 통신만 이루어지면 이기종 간의 Overlay Network을 구성해줄수 있기 때문에 HW장비의 OS버전연동은 상관이 없습니다.
[질문]오브젝트 스토리지 파일 시스템을 위한 분산서버/분산어플리케이션,클러스터,네트워크,분산DB 등의 구조가 산업별로 다르게 구성이 되는지 궁금합니다.(예:정형데이터 비정형 데이터가 더 많은 산업 등)
산업별 큰 차이는 없습니다. 다만 어떤 부분이 중심이 되느냐에 따라 주안점이 다를 수 있습니다.
오브젝트 스토리지 성능측정은 기존스토리지 성능 측정시 사용되는 iops 나 ops/s를 사용하나요?
주로 ops/s를 사용합니다.
[질문]기존 클라우드 운영중이라면 히타찌 제품으로 마이그레이션 한다면 기존제품보다 얼마나 효율성 및 tco, roi 가 절감될까요?
요율적 및 비용 절감 부분은 기존 시스템에 대한 내용 파악이 필요한 부분이라 필요하시면 별도로 지원해 드립겠습니다.
[질문]비정형데이터와 정형데이터 중복 압축하는 방식은 다른지 궁금합니다.만약 다르다면 중복 압축 효율에 의해서 복구 시간도 차이가 생기는지도 궁금합니다.
중복제거 방식도 블록 방식 /파일 방식으로 구분 되는데 대부분 비정형데이터 부분은 파일 중심으로 정형데이터 부분은 블록 방식으로 적용 됩니다.
중복 제거 및 압축은 파일의 방식 및 형식에 따라 다를수 있습니
[질문]스토리지를 사용하다보면 내용연수가 너무 오래되서 디스크추가가어렵고 개별적으로 구입하기도 까다로운데 새로사면 좋지만 마이그레이션이 염려됩니다. 해결책은 있는지요? 조언좀 부탁드립니다
장비의 EOSL 때문에 어쩔수 없이 데이터 저장 장치를 바꿔야 할 부분에서 고민이 많은신데요. 저희 제품은 별도의 장비가 아닌 내부 시스템 기능을 통하여 데이터를 이관 할수 있는 방식을 제공 하고 있습니다. 국내 사례도 있습니다.
[질문]전자결재시스템과 연동하는 경우도 있나요?
솔루션 저장 장치로 활용하고 있습니다.
[질문] 비정형데이타에 개인정보가 있다면 개인정보보호를 위해 구별하여 따로 관리할 수 있을지요>
별도로 분류하여 보관하는 방식은 지원이 어렵습니다.. 그러나 파일에 대한 개인 정보에 대한 추출은 별도의 히다찌솔루션을 통해서 검색 추출 가능한 제품을 제공하고 있습니다.
[질문] 퍼블릭클라우드의 오브젝스토리지(S3 등) 내 대용량 데이터를 오늘 소개해주신 스토리지로 쉽게 마이그레이션하는 툴이 있는지요?
데이터를 퍼블릭클라우드 시스템에 넣을 때와 데이터를 받을때 모두 지원 하는 툴및 방식이 있습니다.
[질문]문서파일관리를 함에 있어 권한 특히 소유권의 문제가 있을 수 있는데 이부분을 어떤 방식으로 해결하고 있는지요?
고객사에서 사용하시는 권한 솔루션과의 협의를 통하여 지원해 드립니다.
[질문]데이타 복구는 운영중에 복구가 되는건가요? 아니면 운영을 다운시키고 복구가 진행되는건가요?
데이터 (파일단위) 복구를 지원하기 때문에 다운 타임 없이 복구 가능 합니다.
[질문] 데이터 웨어하우스와 데이터레이크의 장점인 성능과 비정형데이터수용이 가능한 레이크하우스가 뜨고 있는데 데이터 메쉬도 레이크하우스의 특징을 다 가지고 있는지요? 또 이 둘간의 차이점은 무엇인가요?