HDFSOutputDatasetConfig Clase
Representa cómo se genera una ruta de acceso de HDFS y se promueve como fileDataset.
Inicialice un HDFSOutputDatasetConfig.
Constructor
HDFSOutputDatasetConfig(name=None, destination=None)Parámetros
| Nombre | Description |
|---|---|
|
name
Requerido
|
Nombre de la salida específica de esta ejecución. Esto se usa generalmente con fines de linaje. Si se establece en Ninguno, se generará automáticamente un nombre. |
|
destination
Requerido
|
Destino de la salida. Si se establece en Ninguno, se generará en el almacén de datos workspaceblobstore, en la ruta de acceso /dataset/{run-id}/{output-name}, donde run-id es el identificador de ejecución y el nombre de salida es el nombre de salida del parámetro name anterior. El destino es una tupla donde el primer elemento es el almacén de datos y el segundo es la ruta de acceso dentro del almacén de datos. |
Comentarios
Puede pasar HDFSOutputDatasetConfig como argumento de una ejecución y se traducirá automáticamente a la ruta de acceso de HDFS.
Métodos
| as_input |
Especifique cómo consumir la salida como entrada en los pasos posteriores de la canalización. |
as_input
Especifique cómo consumir la salida como entrada en los pasos posteriores de la canalización.
as_input(name=None)Parámetros
| Nombre | Description |
|---|---|
|
name
Requerido
|
Nombre de la entrada específica de la ejecución. |
Devoluciones
| Tipo | Description |
|---|---|
|
Instancia DatasetConsumptionConfig que describe cómo entregar los datos de entrada. |