Moissonneur Databricks

Utilisez ce moissonneur pour rendre les tables d'un catalogue Databricks explorables dans votre marketplace, sans copier leurs enregistrements dans Huwise. Le moissonneur transforme chaque table gérée (managed) en jeu de données zero-copy.

Consultez Partage de données zero-copy (virtualisation) pour savoir ce que les utilisateurs peuvent faire avec ces jeux de données.

Ce moissonneur fait partie de l'option de partage de données zero-copy, disponible pour les clients Advanced et Ultimate. Contactez votre CSM pour plus d'informations.

Paramètres

Nom	Description	Exemple
Hôte (`host`)	L'hôte de votre entrepôt ou cluster Databricks, indiqué dans ses informations de connexion	`dbc-a1b2c3d4-e5f6.cloud.databricks.com`
Port (`port`)	Le port, indiqué dans les mêmes informations de connexion	`443` (par défaut)
Catalogue (`catalog`)	Le catalogue dont vous voulez importer les tables. Tous les schémas sont inclus.	`main`
Chemin HTTP (`http_path`)	Le chemin HTTP, indiqué dans les mêmes informations de connexion	`/sql/1.0/warehouses/abc123def456`
Jeton d'accès personnel (`personal_access_token`)	Un jeton d'accès personnel Databricks autorisé à lire le catalogue
Include empty tables (`include_empty_tables`)

Pour trouver l'hôte, le port et le chemin HTTP, consultez "Récupérer les champs Host, Port et HTTP path" dans Connecteur Databricks.

Métadonnées

Chaque jeu de données zero-copy reprend le titre et la description de sa table. Par exemple, la table orders du schéma sales devient un jeu de données intitulé sales.orders, avec le commentaire de la table comme description. Le moissonneur renseigne les métadonnées suivantes, et ces correspondances ne peuvent pas être modifiées. Vous pouvez compléter les autres métadonnées vous-même, par exemple les thèmes ou les mots-clés, avant la publication. Les ID techniques sont fournis pour ceux qui travaillent avec les API.

Source Databricks	Source Databricks dans l'API	Métadonnée Huwise	ID du champ Huwise dans l'API
Le schéma et le nom de la table, sous la forme `schema.table`	`TABLE_SCHEMA` + `TABLE_NAME`	Titre	`asset.title`
Le commentaire de la table	`COMMENT`	Description	`asset.description`
La date de création de la table	`CREATED`	Date de création	`asset.created_at`
La date de dernière modification de la table	`LAST_ALTERED`	Date de modification	`asset.updated_at`
Toujours "Données"	Construite par le moissonneur	Catégorie	`asset.category`