Databricks Cloud Provisioning Configuration Properties
The properties in the Databricks cloud provisioning configuration enable the Data Integration Service to contact and create resources on the Databricks cloud platform.
The following table describes the Databricks cloud provisioning configuration properties:
Property | Description |
|---|
Name | Name of the cloud provisioning configuration. TIPP: Because the Administrator tool lists cloud provisioning configuration objects with other connections, use a naming convention such as "CPC" as part of the name of the object to help identify it. |
ID | The cluster ID of the Databricks cluster. |
Description | Optional description of the cloud provisioning configuration. |
Databricks domain | Domain name of the Databricks deployment. |
Databricks token ID | The token ID created within Databricks required for authentication. HINWEIS: If the token has an expiration date, verify that you get a new token from the Databricks administrator before it expires. |
Advanced Properties | Advanced properties that are unique to the Databricks cloud provisioning configuration. |
Advanced Properties
Configure the following properties in the Advanced Properties of the Databricks configuration section:
- infaspark.pythontx.exec
- Erforderlich, um eine Python-Umwandlung in der Databricks Spark-Engine auszuführen. Legen Sie sie auf den Speicherort der ausführbaren Python-Binärdatei auf den Worker-Knoten im Hadoop-Cluster fest.
Wenn Sie den Cluster zur Laufzeit bereitstellen, legen Sie diese Eigenschaft in der Cloud-Bereitstellungkonfiguration von Databricks fest. Legen Sie sie andernfalls in der Databricks-Verbindung fest.
Legen Sie die Eigenschaft z. B. fest auf:
infaspark.pythontx.exec=/databricks/python3/bin/python3
- infaspark.pythontx.executorEnv.PYTHONHOME
Erforderlich, um eine Python-Umwandlung in der Databricks Spark-Engine auszuführen. Legen Sie sie auf den Speicherort des Python-Installationsverzeichnisses auf den Worker-Knoten im Databricks-Cluster fest.
Wenn Sie den Cluster zur Laufzeit bereitstellen, legen Sie diese Eigenschaft in der Cloud-Bereitstellungkonfiguration von Databricks fest. Legen Sie sie andernfalls in der Databricks-Verbindung fest.
Legen Sie die Eigenschaft z. B. fest auf:
infaspark.pythontx.executorEnv.PYTHONHOME=/databricks/python3