Spark Connect-пен жұмыс істеу

Бұл әдістер Spark Connect клиенті арқылы Cloud Spark кластерімен қашықтан жұмыс істеуге мүмкіндік береді.

add_spark_connect_jars

Spark Connect арқылы jar-файлдарға, Maven пакеттеріне және баламалы репозиторийлерге жолдарды Cloud Spark кластеріне беру.

Токеннің қажетті рөлі: Администратор. Токен рөлдері туралы толығырақ.

Аргумент	Түрі	Сипаттамасы
`cluster_id` (міндетті)	`str`	Cloud Spark кластерінің идентификаторы. Cloud Spark кластерлерінің тізімін және олардың идентификаторларын get_clusters әдісі арқылы алуға болады
`jars` (міндетті емес)	`list[str]`	jar-файлдарға жолдар тізімі немесе `None` мәні. Әдепкі мәні: `None`
`packages` (міндетті емес)	`list[str]`	Maven пакеттеріне жолдар тізімі немесе `None` мәні. Әдепкі мәні: `None`
`repositories` (міндетті емес)	`list[str]`	Баламалы репозиторийлерге жолдар тізімі немесе `None` мәні. Әдепкі мәні: `None`

Аргумент

Түрі

Сипаттамасы

cluster_id

(міндетті)

str

Cloud Spark кластерінің идентификаторы.

Cloud Spark кластерлерінің тізімін және олардың идентификаторларын get_clusters әдісі арқылы алуға болады

jars

(міндетті емес)

list[str]

jar-файлдарға жолдар тізімі немесе None мәні. Әдепкі мәні: None

packages

(міндетті емес)

list[str]

Maven пакеттеріне жолдар тізімі немесе None мәні. Әдепкі мәні: None

repositories

(міндетті емес)

list[str]

Баламалы репозиторийлерге жолдар тізімі немесе None мәні. Әдепкі мәні: None

Spark серверінің баптаулары туралы ақпаратты қамтитын K8sSparkConnectSettings класының объектісі.

Әдіс сигнатурасы

Әдісті пайдалану мысалы