Visão geral da configuração de ingestão do Google Drive

O conector gerenciado do Google Drive no Lakeflow Connect ingere arquivos não estruturados (como PDFs e Google Docs) e formatos estruturados (como CSV, JSON e Excel) em tabelas Delta e é compatível com três métodos de autenticação. Para pipelines personalizados que usam Spark e APIs SQL com controle total sobre análise e transformações, consulte Ingerir arquivos do Google Drive.

Escolha seu conector do Google Drive

O Lakeflow Connect oferece dois conectores do Google Drive. Ambos acessam dados no Google Drive, mas diferem no nível de gerenciamento.

Conector	Descrição
Managed Google Drive connector	Um conector totalmente gerenciado e de baixa manutenção para aplicativos empresariais que ingere dados em tabelas Delta e os mantém sincronizados com a origem.
Standard Google Drive connector	Crie pipelines de ingestão personalizados com SQL, PySpark ou LakeFlow Pipelines usando APIs de streaming e em lotes como read_files, spark.read, COPY INTO e Auto Loader. Oferece a flexibilidade de realizar transformações complexas durante a ingestão, dando a você maior responsabilidade pelo gerenciamento e pela manutenção de seus pipelines.

Conector	Descrição
Managed Google Drive connector	Um conector totalmente gerenciado e de baixa manutenção para aplicativos empresariais que ingere dados em tabelas Delta e os mantém sincronizados com a origem.
Standard Google Drive connector	Crie pipelines de ingestão personalizados com SQL, PySpark ou LakeFlow Pipelines usando APIs de streaming e em lotes como read_files, spark.read, COPY INTO e Auto Loader. Oferece a flexibilidade de realizar transformações complexas durante a ingestão, dando a você maior responsabilidade pelo gerenciamento e pela manutenção de seus pipelines.

Qual método de autenticação devo escolher?

O conector gerenciado do Google Drive é compatível com os seguintes métodos de autenticação:

• OAuth U2M: Databricks-managed

  • Nenhum projeto do Google Cloud ou registro de aplicativo necessário.

• OAuth U2M: Custom-managed

  • Traga seu próprio aplicativo do Google Cloud. Use quando sua organização exigir controle sobre a propriedade do aplicativo ou a limitação de taxa de API.

• OAuth serviço account

  • Autentica-se como uma account de serviço do Google em vez de um indivíduo.

Ambos os métodos OAuth U2M se autenticam como uma account individual do Google, portanto, o conector ingere apenas os arquivos que essa account pode acessar. Para ingerir conteúdo que não está vinculado à account de uma única pessoa, use uma conta de serviço OAuth.

If OAuth U2M: Databricks-managed isn't listed in your workspace, use OAuth U2M: Custom-managed .