There is growing interest in running Spark natively on Kubernetes (see https://github.com/apache-spark-on-k8s/spark). Spark applications often access data in HDFS, and Spark supports HDFS locality by scheduling tasks on nodes that have the task input data on their local disks. When running Spark on Kubernetes, if the HDFS daemons run outside Kubernetes, applications will slow down while accessing the data remotely. In this webinar, we will demonstrate how to run HDFS inside Kubernetes to speed up Spark. In particular, we will show: - Spark scheduler can still provide HDFS data locality on Kubernetes by discovering the mapping of Kubernetes containers to physical nodes to HDFS datanode daemons. - How one can provide Spark with the high availability of the critical HDFS namenode service when running HDFS in Kubernetes.

Hora

20:00 - 21:00 hs GMT+1

Organizador

Pepperdata
Compartir
Enviar a un amigo
Mi email *
Email destinatario *
Comentario *
Repite estos números *
Control de seguridad
Noviembre / 2025 259 webinars
Lunes
Martes
Miércoles
Jueves
Viernes
Sábado
Domingo
Lun 27 de Noviembre de 2025
Mar 28 de Noviembre de 2025
Mié 29 de Noviembre de 2025
Jue 30 de Noviembre de 2025
Vie 31 de Noviembre de 2025
Sáb 01 de Noviembre de 2025
Dom 02 de Noviembre de 2025
Lun 03 de Noviembre de 2025
Mar 04 de Noviembre de 2025
Mié 05 de Noviembre de 2025
Jue 06 de Noviembre de 2025
Vie 07 de Noviembre de 2025
Sáb 08 de Noviembre de 2025
Dom 09 de Noviembre de 2025
Lun 10 de Noviembre de 2025
Mar 11 de Noviembre de 2025
Mié 12 de Noviembre de 2025
Jue 13 de Noviembre de 2025
Vie 14 de Noviembre de 2025
Sáb 15 de Noviembre de 2025
Dom 16 de Noviembre de 2025
Lun 17 de Noviembre de 2025
Mar 18 de Noviembre de 2025
Mié 19 de Noviembre de 2025
Jue 20 de Noviembre de 2025
Vie 21 de Noviembre de 2025
Sáb 22 de Noviembre de 2025
Dom 23 de Noviembre de 2025
Lun 24 de Noviembre de 2025
Mar 25 de Noviembre de 2025
Mié 26 de Noviembre de 2025
Jue 27 de Noviembre de 2025
Vie 28 de Noviembre de 2025
Sáb 29 de Noviembre de 2025
Dom 30 de Noviembre de 2025

.

  • Comparativas de Software

    ¿No te salen las cuentas en la nube?

    La nube tiene importantes ventajas: ahorros de costes, facilidad para trabajar en equipos remotos, menor necesidad de administración de la infraestructura, mejoras de seguridad, etc. Sin embargo, al comentar con algunos clientes la posibilidad de migrar las licencias de Atlassian a cloud, me comentaron que habían hecho alguna experiencia de migración y no le salían tan bien las cuentas. Estos comentarios me hicieron reflexionar sobre cuáles podían ser las causas de que no salieran las cuentas y permitirme ofrecer algunas recomendaciones y consejos. ... Leer más

    Publicado el 22-Dic-2021 • 14.40hs

    0 comentarios

  • TODOS Comparativas de Software PDF

    Comparativas de software ERP para todos los sectores

    Publicado el 27-Set-2021 • 12.50hs

  • TODOS Comparativas de Software PDF

    Comparativas de software ERP para Fabricación

    Publicado el 27-Set-2021 • 09.51hs

.

.

.

.

.

Más Secciones »

Hola Invitado