Estados Unidos
B&A
Lantern
Ingeniero/a de Plataforma de Datos
Estados Unidos
Dallas, Texas, United States
PythonSQLPostgreSQLGoTerraform
Traducción automática. Consulta el original.
Sobre Lantern
Lantern es la plataforma de atención especializada que conecta a las personas con la mejor atención cuando más la necesitan. Al curar una Red de Excelencia compuesta por los mejores especialistas del país para cirugía, atención oncológica, infusiones y más, Lantern ofrece una atención excelente con importantes ahorros de costes para los empleadores y sus plantillas. Lantern también asigna a los miembros un equipo de atención dedicado, que incluye Defensores de la Atención y enfermeras, durante todo su recorrido de atención, ayudándoles a recuperar la salud, volver con sus familias y al trabajo. Con acceso conveniente a especialistas en todo el país, Lantern significa que la atención de calidad está al alcance de la mayoría. Lantern cuenta con la confianza de los mayores empleadores del país para brindar atención a más de 6 millones de miembros en todo el país. Obtenga más información sobre nosotros en lanterncare.com.
La organización de datos de Lantern está pasando de un modelo centralizado —donde el equipo de plataforma posee la mayor parte de la entrega de pipelines— a uno en el que los equipos de dominio (Ingeniería de Datos, Operaciones de Datos, Ingeniería de Análisis) crean y poseen sus propios productos de datos, y el trabajo del equipo de plataforma es hacerlo posible. Este puesto es fundamental para ese cambio: construir y administrar la infraestructura de autoservicio, la automatización de la gobernanza y los controles de acceso sobre los que los equipos de dominio construyen, en lugar de construir directamente los pipelines de dominio.
Este es un puesto práctico de administración y habilitación. Los equipos de dominio poseen sus productos de datos; el comité de arquitectura de datos posee los estándares. Este puesto administra la plataforma Databricks y el patrimonio de Lakebase (gestionado por Postgres), tiene los privilegios elevados que conlleva, y aplica nuestros estándares a través de controles de plataforma, automatización y revisión —en toda la infraestructura Azure y IAM, CI/CD, observabilidad y la capa de gobernanza de control de acceso, auditoría y linaje. También es la puerta de entrada de la plataforma para los equipos de dominio, desde el inicio de los proyectos hasta la resolución de problemas del día a día, y trabaja en estrecha colaboración con el equipo de Plataforma en la Nube, el DBA de SQL de Azure y los equipos de Seguridad en los cimientos compartidos subyacentes.
Sobre ti
Utilizas la LÓGICA en tu toma de decisiones y entiendes que el progreso es fundamental para generar cambios. Te centras en la ejecución de tu contenido mientras equilibras un entorno de ritmo rápido y te tomas el tiempo para celebrar tanto las pequeñas como las grandes victorias.
LA INCLUSIÓN es un pilar fundamental de tus creencias personales. Un entorno diverso e inclusivo es increíblemente importante para ti. Entiendes y deseas formar parte de un equipo diverso con diferentes experiencias y perspectivas, y valoras las diferencias de cada individuo con el que interactúas.
Tienes la DETERMINACIÓN, el impulso y la ambición para abordar grandes problemas. Los grandes problemas requieren grandes ideas y un equipo que apoye las nuevas ideas.
Te preocupas profundamente por tus clientes y te impulsas a mantener la HUMANIDAD en todas las decisiones. Tus clientes no son solo los individuos que utilizan tu producto. Son el factor impulsor de tu motivación para generar un cambio.
La integridad te guía en la vida. Centrándote en la VERDAD en lugar de dar a la gente las respuestas que quieren oír.
Prosperas en un Entorno de Equipo. La colaboración es clave en la innovación y la creación de cambios.
Estos pilares de LUZ son un recordatorio para nuestro equipo de que estamos marcando la diferencia al brindar orientación y apoyo para navegar por el panorama a menudo complejo y confuso de la atención médica. Esperamos que, a través de esta LUZ, las personas puedan encontrar su camino hacia la mejor atención, recursos y apoyo que necesitan para volver a la vida.
Ubicación: Híbrido: al menos 3 días/semana en nuestras oficinas de Dallas, TX
Si esto suena como tú, nos encantaría conectar para hablar más sobre las oportunidades profesionales en Lantern.
Por favor, postula a nuestra oferta y alguien de nuestro equipo de Adquisición de Talento se pondrá en contacto contigo para ayudarte a navegar por nuestro proceso de entrevista.
Lantern no discrimina por motivos de raza, sexo, color, religión, edad, origen nacional, estado civil, discapacidad, condición de veterano, información genética, orientación sexual, identidad de género o cualquier otra razón prohibida por la ley en la provisión de oportunidades y beneficios de empleo.
Responsabilidades
- Administración de la Plataforma: Administrar la plataforma Databricks de Azure y el catálogo Unity según los estándares de arquitectura establecidos por el comité de arquitectura de datos —configuración del espacio de trabajo y el metastore, estructura del catálogo y esquemas, políticas de clúster y gestión de costes de cómputo, incluida la visibilidad de gasto por equipo y la generación de informes de reparto de costes. Retroalimentar a los propietarios de los estándares cuando un estándar esté bloqueando a los equipos o ya no se ajuste a cómo se está utilizando la plataforma.
- Habilitación de Autoservicio: Crear la capa de infraestructura de autoservicio —flujos de aprovisionamiento, plantillas y patrones de acceso que permitan a los equipos de dominio configurar y administrar sus propios productos de datos sin depender del equipo de plataforma para cada cambio.
- Administración de Bases de Datos Postgres (Lakebase): Actuar como DBA para el patrimonio de Postgres de la plataforma —aprovisionamiento y desmantelamiento de instancias de Lakebase, gestión de usuarios y roles, configuración de conexiones, ajuste del rendimiento de consultas e índices, actualizaciones de versión, copia de seguridad y recuperación a un punto en el tiempo, y respuesta a incidentes de bases de datos. Mantener los patrones de sincronización entre Lakebase y el lakehouse.
- Infraestructura como Código: Crear y mantener Infraestructura como Código para la plataforma utilizando Terraform contra Azure —grupos de recursos, redes y puntos de conexión privados, registros de aplicaciones de Entra ID, principios de servicio y Key Vault— para que los cambios de plataforma sean revisables, repetibles y auditables.
- Modelo de Acceso y Gobernanza: Implementar y hacer cumplir el modelo de acceso aprobado de la plataforma en todo el lakehouse y la capa de Postgres —concesiones del catálogo Unity, patrones de autenticación OBO (on-behalf-of), ABAC, seguridad a nivel de fila, enmascaramiento de datos y acceso basado en roles para las personas de ingeniería, operaciones y análisis.
- Auditoría y Linaje: Construir la capa de auditoría y linaje que hace que la propiedad descentralizada sea auditable —registro de auditoría, captura de linaje, etiquetado de clasificación de sensibilidad y la capa de auditoría personalizada basada en eventos necesaria cuando Databricks no puede capturar de forma nativa eventos de la capa de aplicación, incluida la respuesta a incidentes cuando esta capa falla.
- Observabilidad: Operar la observabilidad de la plataforma en Databricks, Lakebase y los servicios de Azure de soporte (integración con Datadog, exportación de métricas y registros, alertas, SLOs) para que los equipos de dominio obtengan garantías de fiabilidad sin tener que crear su propia monitorización.
- Fiabilidad y Recuperación ante Desastres: Ejecutar el ciclo de vida de la infraestructura —aprovisionamiento, desmantelamiento, validación de copias de seguridad y restauración, y pruebas de recuperación ante desastres para cargas de trabajo de plataforma y bases de datos.
- Cobertura de Soporte: No hay rotación de guardia nocturna para este puesto. Se espera disponibilidad ocasional fuera del horario laboral principal para dar soporte a despliegues programados e incidentes importantes.
- CI/CD: Dar soporte a CI/CD para cargas de trabajo de datos en los equipos de dominio —pipelines de despliegue para notebooks, trabajos, pipelines DLT, proyectos dbt, Databricks Asset Bundles (DABs) y migraciones de esquemas de Lakebase.
- Integración con GitHub: Mantener la integración entre la plataforma y GitHub / GitHub Actions —estructura de repositorios, políticas de ramas y flujos de trabajo de CI/CD sobre los que los equipos de dominio construyen sus pipelines.
- Colaboración con la Plataforma en la Nube: Trabajar con el equipo de Plataforma en la Nube en la base compartida de Azure —redes, Entra ID, Key Vault, políticas y costes en la nube— con un límite claro de dónde termina la responsabilidad de la plataforma, y clasificar y transferir los problemas de infraestructura de Azure en consecuencia.
- Colaboración con el DBA de SQL de Azure: Coordinarse con el equipo de DBA de SQL de Azure, que posee de forma independiente el patrimonio de SQL de Azure —puntos de integración entre ambos patrimonios, prácticas compartidas en copias de seguridad, alta disponibilidad/recuperación ante desastres y manejo de PHI, y aportaciones sobre la ubicación de las cargas de trabajo.
- Enlace Inter-equipos: Mantener una relación de enlace recurrente con los equipos de Seguridad, InfoSec y Aplicaciones Centrales sobre dependencias de plataforma inter-equipos a medida que surjan, y garantizar que las capacidades de la plataforma cumplan con los requisitos de HIPAA, SOC 2 y otros requisitos normativos.
- Participación en Proyectos: Participar desde el principio en el inicio de nuevos proyectos de equipos de dominio para asesorar sobre las capacidades de la plataforma, los patrones de acceso y los estándares que debe cumplir un diseño, antes de que los equipos construyan en torno a restricciones que no sabían que existían.
- Desbloqueo: Servir como punto de escalada para los ingenieros de dominio que se atascan en políticas de clúster, límites de permisos, rendimiento de bases de datos o pasos de CI fallidos.
- Informes y Hoja de Ruta: Producir informes de KPI de la plataforma (uso, tiempo de actividad, velocidad de despliegue, gasto) y contribuir a la hoja de ruta y al backlog del producto de plataforma.
- Documentación: Capturar patrones reutilizables de inicios de proyectos, incidentes y trabajo de enlace en una base de conocimiento compartida para que los equipos de dominio no tengan que redescubrir soluciones.
Requisitos
- Un mínimo de 4 años en un puesto de ingeniería de plataforma o infraestructura que dé soporte a una organización de datos o análisis.
- Amplia experiencia práctica con Databricks (administración de espacios de trabajo, catálogo Unity, Delta Lake) y Azure (Entra ID, redes, Key Vault, Infraestructura como Código a través de Terraform o Bicep).
- Experiencia práctica en administración de PostgreSQL, ya que este puesto es el DBA de registro para el patrimonio de Postgres de la plataforma —gestión de usuarios y roles, configuración de conexiones, ajuste del rendimiento de consultas e índices, copia de seguridad y restauración, recuperación a un punto en el tiempo, y alta disponibilidad/recuperación ante desastres.
- Experiencia real con arquitectura de identidad y acceso —principios de servicio frente a patrones de autorización de usuarios (OBO), y las compensaciones entre ellos.
- Experiencia práctica en la creación y el mantenimiento de pipelines de CI/CD con GitHub Actions y/o DevOps de Azure.
- Dominio de Python u otro lenguaje de scripting para la automatización y las herramientas de la plataforma.
- Experiencia en el uso de herramientas de IA (por ejemplo, GitHub Copilot, ChatGPT, Claude) para acelerar el trabajo de ingeniería.
- Comodidad al asumir la responsabilidad del ciclo de vida de la infraestructura: aprovisionamiento, desmantelamiento y recuperación ante desastres.
- Experiencia trabajando en un entorno regulado, idealmente sanitario, con requisitos de HIPAA y/o SOC 2.
- Comodidad operando con privilegios elevados en un entorno regulado que contiene PHI, y el criterio para escalar en lugar de otorgar excepciones unilateralmente.
- Capacidad para mantener un estándar sin poseerlo —hacer cumplir los estándares de arquitectura y seguridad establecidos en otra parte de la organización a través de la influencia y la automatización en lugar de la autoridad.
- Sólida capacidad de resolución de problemas y solución de problemas, incluso en condiciones de incidente.
- Excelentes habilidades de comunicación y colaboración, y la capacidad de trabajar eficazmente con equipos de ingeniería multifuncionales.
Los candidatos sólidos tendrán
- Exposición a la arquitectura de datos orientada a dominios o data mesh, y el instinto de que los equipos de plataforma existen para hacer que otros equipos sean autosuficientes en lugar de ser el cuello de botella.
- Experiencia práctica con Databricks Lakebase u otro servicio de Postgres nativo de la nube (Azure Database para PostgreSQL, Neon, Aurora), y con herramientas de Postgres como psql, pgAdmin y frameworks de migración.
- Suficiente familiaridad con SQL Database de Azure para coordinarse eficazmente con el equipo de DBA en los puntos de integración y la ubicación de las cargas de trabajo, y experiencia en la integración de sistemas OLTP con un lakehouse.
- Experiencia en entornos de datos sanitarios (controles de acceso impulsados por HIPAA, segregación de PHI), y demostrar la capacidad de aprender nuevos modelos de negocio y tecnologías.
- Experiencia con herramientas de observabilidad como Datadog o pipelines basados en OpenTelemetry.
- Experiencia con Databricks Asset Bundles, DLT o dbt en un modelo de despliegue multi-equipo.
- Poseer certificaciones relevantes (por ejemplo, Databricks Data Engineer Professional, Azure Administrator, etc.).
Beneficios
- Seguro Médico
- Seguro Dental
- Seguro de Visión
- Incapacidad Temporal y Permanente
- Seguro de Vida
- Plan de jubilación 401k con aportación de la empresa
- Tiempo Libre Flexible
- Permiso Parental Pagado
Más oportunidades con un solo perfil
¿Quieres optar a más puestos sin repetir todo el proceso? Crea tu perfil para que te encuentren las empresas que usan Nort.
Crear mi perfil