Databricks Blog

Unlocking Investment Insights Without Migrating Your Data: Lakehouse Federation

안전한 데이터 관리가 중요해진 요즘, 혹시 우리 회사 데이터와 외부 데이터를 함께 분석해야 하는데 보안이나 복사 문제로 고민해 본 적 있으신가요?

데이터를 이리저리 옮기지 않고도 필요한 곳에서 바로 분석할 수 있는 편리한 방법이 있다고 해요. 오늘 소개해 드릴 기술을 통해 어떻게 가능해지는지 함께 알아볼까요?

전체 글 정리

데이터 이동 없는 똑똑한 연결 방식

  • 기업의 중요한 자산 정보나 고객 정보는 보통 외부 유출을 막기 위해 보안이 철저한 내부 서버에 안전하게 보관되어 있어요.
  • 반면 시장 분석에 필요한 외부 데이터는 클라우드에 있는 경우가 많아, 그동안은 데이터를 클라우드로 복사하거나 복잡한 파이프라인을 만들어야 하는 불편함이 있었죠.
  • 데이터브릭스 레이크하우스 페더레이션을 이용하면 데이터를 이리저리 옮기거나 복사할 필요 없이, 원래 있던 그 자리 그대로 두고 필요한 외부 데이터와 바로 연결해 조회할 수 있답니다.

간단한 설정으로 완성하는 통합 분석

  • 데이터브릭스 화면에서 몇 번의 클릭만 거치면 외부 데이터베이스와 안전하게 연결되는 통로를 만들 수 있어요.
  • 이렇게 연결된 외부 데이터는 마치 원래 내 공간에 있던 것처럼 자연스럽게 나타나고, 실시간으로 원본 데이터를 조회하게 됩니다.
  • 클라우드 마켓플레이스에서 제공하는 다양한 금융 정보 등도 간단한 신청 과정을 거치면 내 작업 공간에서 바로 구독하여 함께 활용할 수 있어요.

복잡한 과정 없이 대시보드와 대화형 조회까지

  • 내부의 민감한 자산 데이터와 클라우드의 외부 시장 데이터를 하나의 SQL 쿼리로 동시에 묶어서 조회할 수 있습니다.
  • 별도의 저장 공간을 따로 만들거나 복잡한 데이터 가공 과정을 거칠 필요가 없어서, 대시보드를 만들거나 고칠 때도 항상 최신 상태의 원본 데이터를 불러오게 되죠.
  • 자연어 기반의 대화형 도구를 연결해 두면, 전문적인 쿼리 작성법을 몰라도 누구나 쉽게 필요한 정보를 질문하고 답을 얻을 수 있습니다.

이용 방법 / 활용 방안

  • 이번 금융 자산 관리 사례처럼 민감한 내부 정보를 철저히 보호하면서 최신 외부 정보를 함께 참고해야 하는 업무에 안성맞춤이에요.
  • 예를 들어 의료 기관이라면 환자의 민감한 기록을 안전하게 지키면서 외부 의약품 정보와 결합해 치료 가이드를 만들 수 있고, 제조 기업이라면 공장의 실시간 기계 데이터와 클라우드의 공급망 데이터를 함께 분석할 수 있답니다.
  • 데이터를 굳이 옮기거나 복잡한 파이프라인을 유지 관리할 필요 없이, 있는 그대로의 데이터를 연결해 효율적으로 분석하는 관점을 적용해 보세요.

데이터를 한곳에 다 모으거나 복잡하게 옮기지 않고도 필요한 분석을 척척 해낼 수 있다면 업무가 훨씬 편해지겠죠? 여러분이라면 이 기능을 어떤 데이터와 조합해보고 싶으신가요?

이 글은 원문을 AI가 요약·재구성한 것입니다. 정확한 내용은 원문을 확인해 주세요.

#Databricks