왜 지금 '프로덕션 AI' 플랫폼이 화두인가

AI 파일럿 프로젝트는 이제 더 이상 뉴스거리가 아닙니다. 진짜 고민은 '어떻게 운영할 것인가'로 옮겨갔습니다. 특히 금융, 의료, 공공처럼 규제가 엄격한 산업에서는 모델 성능보다 일관된 거버넌스, 보안, 확장성이 더 중요해졌죠.

Red Hat Summit 2026에서 Microsoft와 Red Hat이 공동으로 발표한 내용의 핵심은 바로 이 지점입니다. 단순한 쿠버네티스 매니지드 서비스가 아니라, Azure Red Hat OpenShift를 하나의 통합 플랫폼으로 삼아 AI와 애플리케이션을 함께 운영하는 아키텍처를 제시했다는 점이 인상적이었습니다.

이번 발표의 주요 키워드는 크게 네 가지입니다:

  • Modernization: 레거시 가상화 플랫폼에서의 마이그레이션
  • Security: Zero Trust + 기밀 컴퓨팅
  • AI Innovation: NVIDIA GPU 확장 및 Azure AI 서비스 통합
  • Global Expansion: 신규 리전 확대

이 글에서는 이 네 가지 키워드를 중심으로, 실제 사례(Bradesco, Topicus)와 함께 Azure Red Hat OpenShift가 왜 엔터프라이즈 AI 플랫폼의 기준이 되어가고 있는지 살펴보겠습니다.

Microsoft Azure Red Hat OpenShift production AI platform server infrastructure in data center Software Concept Art

핵심 업데이트 1: OpenShift Virtualization으로 레거시 현대화

많은 기업이 VMware 등의 레거시 가상화 플랫폼에서 벗어나고 싶지만, 기존 워크로드를 그대로 옮기기엔 부담이 큽니다. Azure Red Hat OpenShift의 OpenShift Virtualization은 이 문제를 정면으로 해결합니다.

어떻게 동작하나?

VM과 컨테이너를 동일한 OpenShift 클러스터에서 나란히 실행합니다. 즉, 기존 VM을 재구성하지 않고 그대로 올린 후, 시간을 두고 컨테이너로 전환할 수 있는 점진적 현대화(gradual modernization) 가 가능합니다.

# 예: OpenShift Virtualization에서 VM 생성 (CLI 예시)
# VM 정의 파일 (vm.yaml)
apiVersion: kubevirt.io/v1
kind: VirtualMachine
metadata:
  name: legacy-app-vm
spec:
  running: true
  template:
    spec:
      domain:
        devices:
          disks:
            - disk:
                bus: virtio
              name: rootdisk
        resources:
          requests:
            memory: 4Gi
      volumes:
        - name: rootdisk
          containerDisk:
            image: registry.example.com/legacy-app:latest
# VM 배포
kubectl apply -f vm.yaml

포인트:

  • RHEL 라이선스가 포함되어 있어 추가 비용 부담이 적음
  • Azure Hybrid Benefit 적용 가능 (기존 Windows Server/SQL Server 라이선스 활용)
  • VM 위에서 컨테이너를 함께 운영하는 하이브리드 전략 수립 가능

핵심 업데이트 2: Zero Trust + 기밀 컨테이너로 보안 강화

민감 데이터를 클라우드로 옮길 때 가장 큰 걱정은 데이터 보호입니다. Azure Red Hat OpenShift는 여기에 두 가지 해법을 제시했습니다.

Confidential Containers (기밀 컨테이너)

하드웨어 기반 격리(Hardware-backed isolation)를 통해, 실행 중인 데이터(in-use data)를 암호화합니다. 즉, 인프라 관리자조차도 컨테이너 내부의 평문 데이터를 볼 수 없습니다.

Managed Identities + Workload Identities (GA)

이제 Azure Red Hat OpenShift는 플랫폼 운영과 애플리케이션 레이어 모두에서 자격 증명 관리 표준화를 제공합니다.

# 예: Azure Workload Identity를 사용한 애플리케이션 설정
# deployment.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: my-ai-service
  labels:
    azure.workload.identity/use: "true"
spec:
  replicas: 3
  selector:
    matchLabels:
      app: my-ai-service
  template:
    metadata:
      labels:
        app: my-ai-service
    spec:
      serviceAccountName: my-service-account  # OIDC 기반 서비스 계정
      containers:
        - name: main
          image: myregistry.azurecr.io/ai-inference:latest
          env:
            - name: AZURE_CLIENT_ID
              valueFrom:
                secretKeyRef:
                  name: workload-identity-secret
                  key: client-id

이렇게 하면 코드에 비밀번호나 키를 하드코딩할 필요가 없어집니다. OIDC 페더레이션을 통해 Azure 서비스에 안전하게 접근할 수 있습니다.

핵심 업데이트 3: AI 혁신 – NVIDIA GPU 확장 및 Azure AI 통합

Azure Red Hat OpenShift는 단순히 쿠버네티스 위에 AI 모델을 올리는 플랫폼이 아닙니다. Red Hat OpenShift AI를 통해 MLOps 파이프라인을 네이티브로 지원하며, Azure AI Services 및 Microsoft Foundry와의 통합을 통해 개발 속도를 높입니다.

# 예: OpenShift AI에서 GPU 노드 사용을 위한 Cluster Autoscaler 설정
# cluster-autoscaler.yaml
apiVersion: "autoscaling.openshift.io/v1"
kind: "ClusterAutoscaler"
metadata:
  name: "default"
spec:
  resourceLimits:
    maxNodesTotal: 20
    cores:
      min: 4
      max: 128
    gpus:
      - type: nvidia.com/gpu
        min: 0
        max: 8
  scaleDown:
    enabled: true
    delayAfterAdd: 10m
    delayAfterDelete: 5m

이 설정을 통해 GPU 리소스를 필요할 때만 자동 확장하고, 사용하지 않으면 축소하여 비용을 최적화할 수 있습니다.

Cloud native hybrid cloud architecture diagram for Azure Red Hat OpenShift modernization Technical Structure Concept

실제 사례: Banco Bradesco와 Topicus

Banco Bradesco – 라틴아메리카 최대 금융 기관의 AI 프로덕션

Bradesco는 200개 이상의 AI 이니셔티브를 Azure Red Hat OpenShift 하나로 통합했습니다. 보안, 거버넌스, 아이덴티티를 Azure 서비스와 연동하여 일관된 정책으로 운영합니다.

  • 규모: 수백만 브라질 고객 대상 AI 뱅킹
  • 핵심 요구사항: 성능, 탄력성, 규제 준수
  • 결과: PoC 단계를 넘어 프로덕션 AI 플랫폼으로 안착

Topicus – 지역 금융 기관의 규제 대응

Topicus의 Akkuro 대출 플랫폼은 Azure Red Hat OpenShift 위에서 문서 기반 신용 평가를 처리합니다. 스위스 북부 리전에 배포하여 데이터 주권(Data Sovereignty) 을 준수하며, 동일한 배포 모델을 다른 리전으로 재사용 가능하게 설계했습니다.

기술 스펙 비교: Azure Red Hat OpenShift vs. 자체 구축 쿠버네티스

항목Azure Red Hat OpenShift자체 구축 Kubernetes
운영 부담Microsoft + Red Hat 공동 관리 (완전 관리형)전체 인프라 운영 필요
보안Zero Trust 내장, Confidential Containers 기본 지원별도 구성 필요
AI 통합OpenShift AI + Azure AI Services 네이티브별도 MLOps 도구 설치
마이그레이션OpenShift Virtualization으로 VM→컨테이너 점진 전환VM 마이그레이션 별도 솔루션 필요
규제 준수글로벌 리전 확장, 데이터 주권 지원리전별 별도 구성
라이선스RHEL 포함, Azure Hybrid Benefit 적용별도 RHEL/Windows 라이선스

이 기술의 한계 또는 주의사항

  • 완전한 관리형이지만 커스터마이징 제약: 완전 관리형 서비스이기 때문에, OpenShift의 일부 고급 설정(예: 특정 네트워크 플러그인 교체)이 제한될 수 있습니다.
  • 비용: 자체 쿠버네티스에 비해 관리 비용이 포함되어 있어 초기 비용이 높을 수 있습니다. 하지만 운영 인력을 고려하면 장기적으로 효율적일 수 있습니다.
  • 벤더 락인 우려: Azure + Red Hat 스택에 종속될 가능성이 있습니다. 멀티 클라우드 전략을 고려 중이라면, OpenShift의 하이브리드/멀티 클라우드 기능을 충분히 검토해야 합니다.

Zero Trust security and confidential computing on Azure Red Hat OpenShift for regulated workloads Algorithm Concept Visual

결론: 엔터프라이즈 AI 플랫폼의 기준

Red Hat Summit 2026에서 Microsoft와 Red Hat이 강조한 메시지는 명확합니다. AI는 더 이상 실험실의 프로젝트가 아니라, 운영의 문제입니다. Azure Red Hat OpenShift는 이 문제에 대해 다음과 같은 해답을 제시합니다:

  1. 레거시를 버리지 않고 현대화 – VM과 컨테이너의 공존
  2. 보안을 기본 내장 – Zero Trust + 기밀 컴퓨팅
  3. AI를 플랫폼의 일부로 – OpenShift AI + Azure AI 통합
  4. 글로벌 규제 대응 – 확장되는 리전

만약 당신의 조직이 AI PoC를 넘어 프로덕션 단계로 나아가고자 한다면, Azure Red Hat OpenShift는 충분히 고려할 가치가 있는 선택지입니다. 특히 금융, 의료, 공공처럼 규제와 보안이 최우선인 환경이라면 더욱 그렇습니다.

다음 단계 학습 방향

  • Azure Red Hat OpenShift 공식 문서에서 아키텍처 심화 학습
  • Red Hat OpenShift AI를 활용한 MLOps 파이프라인 구축 실습
  • Confidential Containers의 실제 사용 사례 연구

함께 보면 좋은 글

참고 자료: 본 글은 Microsoft Azure Blog의 Red Hat Summit 2026 발표 내용을 기반으로, 한국 개발자 생태계에 맞게 재구성하였습니다.

본 콘텐츠는 신뢰할 수 있는 출처를 바탕으로 AI 도구를 활용하여 초안이 작성되었으며, 편집자의 검토를 거쳐 발행되었습니다. 전문가의 조언을 대체하지 않습니다.