¿Te gustaría aprovechar las ventajas de la última versión de Apache Spark para tu Synapse Link de Dataverse? Pues estás de suerte, porque te voy a explicar cómo puedes actualizar tu perfil de Synapse Link para usar Spark 3.3 con Delta Lake 2.2, sin perder tus datos ni tu configuración actual.
Prerrequisitos
Perfil de Synapse Link: Necesitas tener un perfil de Synapse Link para Dataverse delta lake ya funcionando con una versión de Synapse Spark 3.1.
Nuevo pool de Spark: Debes crear un nuevo pool de Synapse Spark con la versión 3.3. Este pool debe tener la misma o una configuración de hardware de nodos superior dentro del mismo espacio de trabajo de Synapse. Y ojo, este pool de Spark debe ser creado independientemente del pool actual 3.1.
Procedimiento
Es muy fácil y rápido, solo tienes que seguir estos pasos:
Inicia sesión en Power Apps y selecciona el entorno en el que tienes ya instalado Synapse Link.
En el panel de navegación izquierdo, selecciona Azure Synapse Link. Si no lo ves, selecciona …Más y luego elige la opción que quieres.
Abre el perfil de Synapse Link y selecciona actualizar a Apache Spark 3.3 con Delta Lake 2.2
Selecciona el pool de Spark disponible en el menú desplegable y haz clic en Actualizar.
¡Y ya está! Así de sencillo es actualizar tu Synapse Link a la versión más reciente de Spark, que te ofrece un mejor rendimiento, una mayor estabilidad y más funcionalidades.
Eso sí, ten en cuenta que la actualización solo se produce cuando se dispara un nuevo trabajo de Spark para convertir tu Delta Lake. Así que asegúrate de tener al menos un cambio de datos después de hacer clic en el botón de actualizar.
Espero que te haya sido útil este artículo y que disfrutes de tu Synapse Link mejorado. Si tienes alguna duda o comentario, no dudes en dejármelo abajo. ¡Hasta la próxima!