Clouds e regiões do databricks

Os workspaces do Databricks podem ser hospedados no Amazon AWS, no Microsoft Azure e no Google Cloud Platform. Você pode usar o Databricks em qualquer uma dessas plataformas de hospedagem para acessar dados onde quer que estejam armazenados, independentemente da nuvem.

Este artigo lista:

  • As regiões compatíveis com o Databricks na AWS.

  • Recursos disponíveis em cada região, onde há diferenciação regional na disponibilidade de recursos.

  • Endereços IP e domínios para serviços e ativos do Databricks.

    Você pode precisar dessas informações se criar seus workspaces do Databricks em sua própria VPC, um recurso conhecido como VPC gerenciada pelo cliente, ou se você usar o AWS PrivateLink em seu ambiente de rede do Databricks.

Lista de regiões compatíveis

Esta tabela lista as regiões da AWS suportadas pelo Databricks. Existem alguns recursos disponíveis apenas em um subconjunto de regiões.A tabela indica se uma região oferece suporte ou não a cada um desses recursos. Se houver suporte para um recurso em todas as regiões, ele não será incluído na tabela.

Os recursos excluídos de pelo menos uma região incluem:

Região

Localização

CMK

PrivateLink

serverless compute para Notebook e fluxo de trabalho

Serverless SQL warehouses

Servindo modelo

Vector Search

Otimização preditiva

Ativação do firewall para serverless compute

ap-northeast-1

Ásia-Pacífico (Tóquio)

X

X

X

X

X

ap-northeast-2

Ásia-Pacífico (Seul)

X

X

ap-south-1

Ásia-Pacífico (Mumbai)

X

X

X

X

ap-southeast-1

Ásia-Pacífico (Singapura)

X

X

X

X

X

ap-southeast-2

Ásia-Pacífico (Sydney)

X

X

X (perfil de segurança de conformidade suportado)

X

X

X

X

ca-central-1

Canadá (Central)

X

X

X

eu-central-1

UE (Frankfurt)

X

X

X

X

X

X

eu-west-1

UE (Irlanda)

X

X

X

X

X

X

X

eu-west-2

UE (Londres)

X

X

eu-west-3

UE (Paris)

X

X

X

X

sa-east-1

América do Sul (São Paulo)

X

X

X

X

us-east-1

Leste dos EUA (Virgínia do Norte)

X

X

X

X (perfil de segurança de conformidade suportado)

X

X

X

X

us-east-2

Leste dos EUA (Ohio)

X

X

X

X

X

X

X

X

us-gov-west-1

US Gov West (Pendleton)

X

X

us-west-1

Oeste dos EUA (Norte da Califórnia)

us-west-2

Oeste dos EUA (Oregon)

X

X

X

X

X

X

X

X

Endereços IP e domínios

Você pode precisar das seguintes informações se:

Endereços do plano de controle do Databricks

As tabelas a seguir listam os endereços IP ou nomes de domínio que o plano de controle do Databricks usa para cada região suportada. A porta 443 é usada para todos os endereços, exceto para a retransmissão SCC para a PrivateLink, que usa a porta 6666.

Entrada no plano de controle da Databricks

Região da Databricks

Serviço

IP público ou nome de domínio

ap-northeast-1

Serviço de plano de controle, incluindo webapp

tokyo.cloud.databricks.com, 35.72.28.0/28

Relé SCC

tunnel.ap-northeast-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ap-northeast-1.cloud.databricks.com

ap-northeast-2

Serviço de plano de controle, incluindo webapp

seoul.cloud.databricks.com, 3.38.156.176/28

Relé SCC

tunnel.ap-northeast-2.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ap-northeast-2.cloud.databricks.com

ap-south-1

Serviço de plano de controle, incluindo webapp

mumbai.cloud.databricks.com, 65.0.37.64/28

Relé SCC

tunnel.ap-south-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ap-south-1.cloud.databricks.com

ap-southeast-1

Serviço de plano de controle, incluindo webapp

singapore.cloud.databricks.com, 13.214.1.96/28

Relé SCC

tunnel.ap-southeast-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ap-southeast-1.cloud.databricks.com

ap-southeast-2

Serviço de plano de controle, incluindo webapp

sydney.cloud.databricks.com, 3.26.4.0/28

Relé SCC

tunnel.ap-southeast-2.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ap-southeast-2.cloud.databricks.com

ca-central-1

Serviço de plano de controle, incluindo webapp

canada.cloud.databricks.com, 3.96.84.208/28

Relé SCC

tunnel.ca-central-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.ca-central-1.cloud.databricks.com

eu-central-1

Serviço de plano de controle, incluindo webapp

frankfurt.cloud.databricks.com, 18.159.44.32/28

Relé SCC

tunnel.eu-central-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.eu-central-1.cloud.databricks.com

eu-west-1

Serviço de plano de controle, incluindo webapp

Irlanda.cloud.databricks.com, 3.250.244.112/28

Relé SCC

tunnel.eu-west-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.eu-west-1.cloud.databricks.com

eu-west-2

Serviço de plano de controle, incluindo webapp

londres.cloud.databricks.com, 18.134.65.240/28

Relé SCC

tunnel.eu-west-2.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.eu-west-2.cloud.databricks.com

eu-west-3

Serviço de plano de controle, incluindo webapp

paris.cloud.databricks.com, 13.39.141.128/28

Relé SCC

tunnel.eu-west-3.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.eu-west-3.cloud.databricks.com

sa-east-1

Serviço de plano de controle, incluindo webapp

saopaulo.cloud.databricks.com, 15.229.120.16/28

Relé SCC

tunnel.sa-east-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.sa-east-1.cloud.databricks.com

us-east-1

Serviço de plano de controle, incluindo webapp

nvirginia.cloud.databricks.com, 3.237.73.224/28

Relé SCC

tunnel.us-east-1.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.us-east-1.cloud.databricks.com

us-east-2

Serviço de plano de controle, incluindo webapp

ohio.cloud.databricks.com, 3.128.237.208/28

Relé SCC

tunnel.us-east-2.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.us-east-2.cloud.databricks.com

us-gov-west-1

Serviço de plano de controle, incluindo webapp

pendleton.cloud.databricks.us, 3.30.186.128/28

Relé SCC

tunnel.us-gov-west-1.cloud.databricks.us

Relé SCC para PrivateLink

tunnel.privatelink.us-gov-west-1.cloud.databricks.us

us-west-1

Serviço de plano de controle, incluindo webapp

oregon.cloud.databricks.com, 44.234.192.32/28

Relé SCC

tunnel.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.cloud.databricks.com

us-west-2

Serviço de plano de controle, incluindo webapp

oregon.cloud.databricks.com, 44.234.192.32/28

Relé SCC

tunnel.cloud.databricks.com

Relé SCC para PrivateLink

tunnel.privatelink.cloud.databricks.com

Saída do plano de controle da Databricks

Região da Databricks

Serviço

IP público ou nome de domínio

ap-northeast-1

IPs NAT do plano de controle

35.72.28.0/28, 18.177.16.95

ID da VPC

vpc-082c211a3fdc5876e, vpc-0a9dd2f9a99283178

ap-northeast-2

IPs NAT do plano de controle

3.38.156.176/28, 54.180.50.119

ID da VPC

vpc-04e703ba94a49a3ac, vpc-097fd29f3acba52e8

ap-south-1

IPs NAT do plano de controle

65.0.37.64/28, 13.232.248.161

ID da VPC

vpc-042818d612f90f994, vpc-0a0c6fbd8a2890714

ap-southeast-1

IPs NAT do plano de controle

13.214.1.96/28, 13.213.212.4

ID da VPC

vpc-01dcc0ded03337911`, vpc-0e0baa0188c149eae

ap-southeast-2

IPs NAT do plano de controle

3.26.4.0/28, 13.237.96.217

ID da VPC

vpc-0c2c00de7182adc20, vpc-0a5b21c86d3fc89fa

ca-central-1

IPs NAT do plano de controle

3.96.84.208/28, 35.183.59.105

ID da VPC

vpc-0a2b384708459134f, vpc-09e67f3a27be71c9c

eu-central-1

IPs NAT do plano de controle

18.159.44.32/28, 18.159.32.64

ID da VPC

vpc-0fac49d340642f67b, vpc-0b6768aacb36c9425

eu-west-1

IPs NAT do plano de controle

3.250.244.112/28, 46.137.47.49

ID da VPC

vpc-0e362545addfa9470, vpc-0004e2691850f29b3

eu-west-2

IPs NAT do plano de controle

18.134.65.240/28,3.10.112.150

ID da VPC

vpc-07eb6b6a2cb9e77eb, vpc-0f0a9d76e15ca7eff

eu-west-3

IPs NAT do plano de controle

13.39.141.128/28, 15.236.174.74

ID da VPC

vpc-0b6f443f7cefdcda2, vpc-01ed1436ea79be8f4

sa-east-1

IPs NAT do plano de controle

15.229.120.16/28, 177.71.254.47

ID da VPC

vpc-0b13bcae0aa721cbc, vpc-0717a4601f05c79d9

us-east-1

IPs NAT do plano de controle

3.237.73.224/28, 54.156.226.103

ID da VPC

vpc-0e8e0ec90d0f40c06, vpc-08fd12c62a6e0b1df

us-east-2

IPs NAT do plano de controle

3.128.237.208/28, 18.221.200.169

ID da VPC

vpc-0865fc77cf45f52b7, vpc-0ea50fe31af7760e4

us-gov-west-1

IPs NAT do plano de controle

3.30.186.128/28, 3.30.245.130

ID da VPC

vpc-0ab77b8381fdd5416, vpc-0b394a016af6d42ab

us-west-1

IPs NAT do plano de controle

44.234.192.32/28, 52.27.216.188

ID da VPC

N/A

us-west-2

IPs NAT do plano de controle

44.234.192.32/28, 52.27.216.188

ID da VPC

vpc-dc8086b9, vpc-0c51983cc62e5ce0b

Armazenamento de artefatos, armazenamento em log, tabelas de sistema e buckets de conjuntos de dados compartilhados

Região da Databricks

Serviço

IP público ou nome de domínio

ap-northeast-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ap-northeast-1

Bucket de armazenamento de log

databricks-prod-storage-tokyo

Bucket de tabelas do sistema

system-tables-prod-ap-northeast-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-tokyo

ap-northeast-2

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ap-northeast-2

Bucket de armazenamento de log

databricks-prod-storage-seoul

Bucket de tabelas do sistema

system-tables-prod-ap-northeast-2-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-seoul

ap-south-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ap-south-1

Bucket de armazenamento de log

databricks-prod-storage-mumbai

Bucket de tabelas do sistema

system-tables-prod-ap-south-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-mumbai

ap-southeast-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ap-southeast-1

Bucket de armazenamento de log

databricks-prod-storage-singapore

Bucket de tabelas do sistema

system-tables-prod-ap-southeast-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-singapore

ap-southeast-2

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ap-southeast-2

Bucket de armazenamento de log

databricks-prod-storage-sydney

Bucket de tabelas do sistema

system-tables-prod-ap-southeast-2-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-sydney

ca-central-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-ca-central-1

Bucket de armazenamento de log

databricks-prod-storage-montreal

Bucket de tabelas do sistema

system-tables-prod-ca-central-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-montreal

eu-central-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-eu-central-1

Bucket de armazenamento de log

databricks-prod-storage-frankfurt

Bucket de tabelas do sistema

system-tables-prod-eu-central-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-frankfurt

eu-west-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-eu-west-1

Bucket de armazenamento de log

databricks-prod-storage-ireland

Bucket de tabelas do sistema

system-tables-prod-eu-west-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-ireland

eu-west-2

Bucket de armazenamento de artefatos

databricks-prod-artifacts-eu-west-2

Bucket de armazenamento de log

databricks-prod-storage-london

Bucket de tabelas do sistema

system-tables-prod-eu-west-2-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-london

eu-west-3

Bucket de armazenamento de artefatos

databricks-prod-artifacts-eu-west-3

Bucket de armazenamento de log

databricks-prod-storage-paris

Bucket de tabelas do sistema

system-tables-prod-eu-west-3-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-paris

sa-east-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-sa-east-1

Bucket de armazenamento de log

databricks-prod-storage-saopaulo

Bucket de tabelas do sistema

system-tables-prod-sa-east-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-saopaulo

us-east-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-us-east-1

Bucket de armazenamento de log

databricks-prod-storage-virginia

Bucket de tabelas do sistema

system-tables-prod-us-east-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-virginia

us-east-2

Bucket de armazenamento de artefatos

databricks-prod-artifacts-us-east-2

Bucket de armazenamento de log

databricks-prod-storage-ohio

Bucket de tabelas do sistema

system-tables-prod-us-east-2-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-ohio

us-gov-west-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-us-gov-west-1

Bucket de armazenamento de log

databricks-prod-storage-pendleton

Bucket de tabelas do sistema

N/A

Bucket de datasets compartilhados

databricks-datasets-pendleton

us-west-1

Bucket de armazenamento de artefatos

databricks-prod-artifacts-us-west-2

Bucket de armazenamento de log

databricks-prod-storage-oregon

Bucket de tabelas do sistema

system-tables-prod-us-west-1-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-oregon

us-west-2

Bucket de armazenamento de artefatos

databricks-prod-artifacts-us-west-2, databricks-update-oregon

Bucket de armazenamento de log

databricks-prod-storage-oregon

Bucket de tabelas do sistema

system-tables-prod-us-west-2-uc-metastore-bucket

Bucket de datasets compartilhados

databricks-datasets-oregon

Endereços S3

Para adicionar o serviço global do bucket do S3 a uma rota ou lista de permissões, use o endereço e a porta a seguir, independentemente da região: s3.amazonaws.com:443

Para os buckets regionais S3, AWS fornece um endereço e uma porta para um endpoint regional (s3.<region-name>.amazonaws.com:443). A Databricks recomenda que, em vez disso, o senhor use um endpoint VPC. Consulte (Recomendado) Configurar o ponto de extremidade regional.

Endereços STS

Para adicionar o STS (AWS Security Token Service) global a uma rota ou lista de permissões, use o seguinte endereço e porta, independentemente da região: sts.amazonaws.com:443

Para STS regional, a AWS fornece um endereço e uma porta para um endpoint regional (sts.<region-name>.amazonaws.com:443), mas a Databricks recomenda que você use um endpoint VPC. Consulte (Recomendado) Configurar endpointregional.

Endereços Kinesis

Para o serviço Kinesis, a AWS fornece endereços e portas para endpoint regionais, conforme mostrado na tabela abaixo. No entanto, a Databricks recomenda que utilize um endpoint VPC. Consulte (Recomendado) Configurar endpointregional.

Região do VPC

Endereço

Porta

us-west-1

kinesis-fips.us-west-2.amazonaws.com

443

Todas as outras regiões

kinesis.<region-name>.amazonaws.com

443

Endereços RDS para Hive metastore

Para adicionar o serviço Amazon RDS usado pela Databricks a uma rota ou lista de permissões, use os seguintes endereços.

Região do VPC

Endereço

Porta

ap-northeast-1

mddx5a4bpbpm05.cfrfsun7mryq.ap-northeast-1.rds.amazonaws.com

3306

ap-northeast-2

md1915a81ruxky5.cfomhrbro6gt.ap-northeast-2.rds.amazonaws.com

3306

ap-south-1

mdjanpojt83v6j.c5jml0fhgver.ap-south-1.rds.amazonaws.com

3306

ap-southeast-1

md1n4trqmokgnhr.csnrqwqko4ho.ap-southeast-1.rds.amazonaws.com

3306

ap-southeast-2

mdnrak3rme5y1c.c5f38tyb1fdu.ap-southeast-2.rds.amazonaws.com

3306

ca-central-1

md1w81rjeh9i4n5.co1tih5pqdrl.ca-central-1.rds.amazonaws.com

3306

eu-central-1

mdv2llxgl8lou0.ceptxxgorjrc.eu-central-1.rds.amazonaws.com

3306

eu-west-1

md15cf9e1wmjgny.cxg30ia2wqgj.eu-west-1.rds.amazonaws.com

3306

eu-west-2

mdio2468d9025m.c6fvhwk6cqca.eu-west-2.rds.amazonaws.com

3306

eu-west-3

metastorerds-dbconsolidationmetastore-asda4em2u6eg.c2ybp3dss6ua.eu-west-3.rds.amazonaws.com

3306

sa-east-1

metastorerds-dbconsolidationmetastore-fqekf3pck8yw.cog1aduyg4im.sa-east-1.rds.amazonaws.com

3306

us-east-1

mdb7sywh50xhpr.chkweekm4xjq.us-east-1.rds.amazonaws.com

3306

us-east-2

md7wf1g369xf22.cluz8hwxjhb6.us-east-2.rds.amazonaws.com

3306

us-west-1

mdzsbtnvk0rnce.c13weuwubexq.us-west-1.rds.amazonaws.com

3306

us-west-2

mdpartyyphlhsp.caj77bnxuhme.us-west-2.rds.amazonaws.com

3306