NVIDIA H100 GPU TEE

Özel AI için H100 deneme makineleri.

CVM içinde gizli çıkarım, ince ayar ve GPU araçları için kanıtlanmış H100 kapasitesi.

H100 TEE capacity with 80GB HBM3 memory, Intel TDX runtime, NVIDIA confidential computing, and dual attestation.

Kapasite hücresi

Denemeye hazır
NVIDIA H100 chipNVIDIA H100 chipNVIDIA H100 chip

hardware proof rail

Bu GPU, aynı doğrulanabilir GPU kanıt yolundan geçer.

GPU TEE

H100

GPU TEE

80GB HBM3

GPU TEE

TEE proof

Bellek

80GB HBM3

Bant genişliği

3.35 TB/s

Bölge

ABD-Batı

Ölçek

1-2 GPU

GPU alıcı ayrıntıları

GPU teklifinden fazlası.

GPU satıcıları genellikle fiyat ve kullanılabilirlikte durur. Bu sayfa, ek TEE gereksinimlerini görünür kılar: çalışma zamanı sınırı, gizli GPU modu, attestation ve operasyonlar.

En uygun

GPU iş yükü şekli

01Gizli çıkarım denemeleri
02Ajan GPU araçları
03Kanıt üretimi

Erişim

24 saatlik deneme makineleri

Taahhüt

Ayrılmış H100 slotları

Kurumsal

Küçük korumalı kümeler

TEE hazırlık kontrol listesi

01

Kapasite

GPU belleği, bant genişliği, bölge ve ölçek satış görüşmesinden önce görünür.

02

Bulut yolu

Confidential VM’ler, bare metal yolları veya kurumsal dağıtımlar üzerinden çalıştırın.

03

TEE hazırlığı

Intel TDX, NVIDIA gizli bilişim, sürücüler, BIOS ve doğrulayıcı hazırlığı Phala tarafından yönetilir.

04

Satın alma modeli

24 saatlik denemeyle başlayın, bir yuva rezerve edin veya ayrılmış bir küme için fiyat alın.

GPU teknik profili

İş yükünün hızlı bir özel test yoluna ihtiyaç duyduğu durumlarda H100 kullanın.

H100, özel çıkarım denemeleri, ajan GPU araçları ve 24 saatlik bir makinenin iş yükünü daha büyük kapasite ayırmadan önce doğrulamak için yeterli olduğu kanıt hatları için pratik başlangıç noktasıdır.

Bellek

Özel çıkarım, kanıt işleri ve küçük ince ayar pencereleri için 80 GB HBM3.

Performans

Güvenilir gizli GPU erişimine şimdi ihtiyaç duyan ekipler için kanıtlanmış bir Hopper yolu.

Ölçek

1-2 GPU ile başlayın, bellek veya küme boyutu sınıra dönüştüğünde H200 veya B300’ye geçin.

TEE katmanı

CVM çalışma zamanı, NVIDIA CC modu, attestation ve firmware hazırlığı birlikte ele alınır.

Özel AI GPU planlaması için performans metrikleri

relative index

1x

H100

1.9x

H200

LLM çıkarımı

model + KV cache

80GB

H100

141GB

H200

GPU belleği

feed batches

3.35TB/s

H100

4.8TB/s

H200

Bellek bant genişliği

NVIDIA H100 chip

NVIDIA H100

80GB HBM3

NVIDIA H200 chip

NVIDIA H200

141GB HBM3e

Performans karşılaştırması

NVIDIA H200 vs NVIDIA H100

H100, gizli GPU denemeleri için pratik başlangıç noktasıdır. H200, daha büyük modeller ve daha uzun bağlamlara parçalamadan önce daha fazla alan sağlar.

İş yükünün kısa bir H100 doğrulama penceresine mi yoksa ayrılmış H200 yüksek bellek kapasitesine mi ihtiyacı olduğunu karar vermek için bu karşılaştırmayı kullanın.

GPU satın alma yolları

İş için satın alma yolunu seçin.

Tek bir makineyi deneyin, ayrılmış bir yuva için fiyat alın veya iş yükü üretim altyapısına dönüştüğünde özel bir kümeye geçin.

01 / İsteğe bağlı

24 saat içinde gizli bir GPU deneyin.

Özel çıkarım, model servisi veya kanıt üretimini doğrulayan geliştiriciler için kısa test pencereleri.

02 / Slot

Bir sonraki çalışmadan önce kapasite ayırın.

Sürekli eğitim, ince ayar ve benchmark pencereleri için öngörülebilir GPU erişimi.

03 / Kurumsal

TEE operasyonları olan ayrılmış kümeler.

TEE farkındalıklı altyapı desteği ve dağıtım planlamasıyla özel H100, H200 veya B300 anlaşmaları.

Kanıt yolu

Bu GPU’nun faydası doğrulanabilir olmasıdır.

GPU ham donanım olarak satılmaz. GPU confidential computing ve yerleşik çift attestation ile confidential VM yolu üzerinden sunulur.

cvm-enclave · 80×24 · 24fpsdensity: .:-=+*#%@

01

CVM çalışma zamanı

Docker iş yükleri, GPU passthrough ile Intel TDX gizli VM içinde çalışır. Çalışma zamanı operatöre karşı mühürlenir ve iş yükü başlamadan önce firmware tarafından ölçülür.

gpu-cc · 80×22 · 24fpsdensity: .:-=+*#%@

02

GPU CC modu

NVIDIA Confidential Computing, model ağırlıklarını, aktivasyonları ve KV cache’i korumalı GPU belleği içinde mühürler. GPU, CPU TEE ile birlikte çalışma izolasyonunu uygular.

dual-attestation · 80×20 · 24fpsdensity: .:-=+*#%@

03

Çift doğrulama

Intel TDX ve NVIDIA ayrı ayrı imzalı quote üretir. Phala ikisini birden toplar ve tek bir doğrulayıcı üzerinden sunar; böylece CVM ve GPU birlikte kendilerini kanıtlar.

Diğer gizli GPU’lar

Bir sonraki kapasite yolunu karşılaştırın.

Aynı pazar yeri modelini H100, H200 ve B300 genelinde kullanın: kapasite, fiyat, bölge ve kanıt durumu görünür kalır.

H100 GPU TEE — Confidential AI on 80GB HBM3 | Phala