Estados Unidos
Anduril Industries
Blue Sky Innovators
Ingeniero de Datos, TS/SCI
Estados Unidos
Reston, Virginia, United States
Python
Traducción automática. Consulta el original.
Sobre la oportunidad
--------------------------------------------------------------------------------
Si usted es un solicitante de empleo calificado con una discapacidad o un veterano discapacitado, tiene derecho a solicitar una adaptación si no puede o tiene limitaciones para usar o acceder a blueskyinnovators.com como resultado de su discapacidad. Para solicitar una adaptación, envíenos un correo electrónico a careers@blueskyinnovators.com y proporcione su nombre e información de contacto. Tenga en cuenta: esto es solo para solicitantes de empleo con discapacidades que solicitan una adaptación.
Descripción del puesto
Buscamos un Ingeniero de Datos Principal / Pipeline de Datos de Misión para servir como experto en la materia (SME). Trabajará directamente con partes interesadas gubernamentales, técnicas y de la industria para diseñar, implementar y mantener pipelines de datos que ingieran, transformen, almacenen y distribuyan datos relevantes para la misión en todo el ecosistema de software DIFC2 y sistemas de socios de misión externos. Apoyará el desarrollo y la entrega de capacidades de software que mejoren la accesibilidad de los datos, la integración de misiones, la visibilidad operativa y la interoperabilidad entre sistemas en un entorno de misión altamente dinámico.
El enfoque está en permitir flujos de datos fiables, automatizados y seguros que respalden las capacidades de misión en plazos operativos. Este puesto requiere colaboración con las partes interesadas del sistema de misión, ingenieros de plataforma y equipos de seguridad para definir artefactos de intercambio de datos, desarrollar implementaciones de pipelines y garantizar que las interfaces cumplan con los requisitos del Marco de Gestión de Riesgos (RMF). El ingeniero utilizará tecnologías ETL de bajo código/sin código y desarrollo de software personalizado para implementar pipelines de datos escalables que respalden la arquitectura de datos.
Las responsabilidades típicas del puesto incluyen
- Identificación de artefactos de datos relevantes para la misión:
- Analizar flujos de trabajo de misión y arquitectura de sistemas para identificar los artefactos de datos necesarios para respaldar las capacidades operativas.
- Definir la estructura, semántica y ciclo de vida de los productos de datos de misión dentro de la arquitectura de datos.
- Garantizar que los artefactos de datos se alineen con los estándares arquitectónicos para la interoperabilidad, trazabilidad y reutilización en todos los componentes de la misión.
* Coordinar con partes interesadas externas
- Servir como enlace técnico principal para definir interfaces de intercambio de datos entre sistemas de misión.
- Colaborar con socios de misión para definir esquemas de mensajes, formatos de datos, mecanismos de transporte y expectativas de interfaz.
- Documentar las especificaciones de la interfaz de datos para respaldar tanto la integración del sistema como el mantenimiento operativo.
* Soporte de documentación RMF y de seguridad
- Apoyar el proceso RMF definiendo detalles técnicos para interfaces de datos de máquina a máquina.
- Producir o contribuir a los artefactos RMF requeridos, incluyendo:
- Descripciones de mensajes de datos
- Entradas de Gestión de Puertos, Protocolos y Servicios (PPSM)
- Diagramas de topología de sistemas y documentación de interfaces
- Coordinar con ingenieros de ciberseguridad para garantizar que las implementaciones de pipelines cumplan con los requisitos de seguridad y cumplimiento de DoW.
* Desarrollo y mantenimiento de pipelines de datos
- Diseñar e implementar pipelines de datos automatizados que ingieran, transformen, persistan y expongan artefactos de datos para su uso por partes interesadas internas y externas.
- Utilizar la infraestructura de plataforma de datos proporcionada por el gobierno para construir flujos de trabajo ETL escalables.
- Desarrollar lógica de transformación personalizada cuando sea necesario utilizando lenguajes de programación y frameworks de procesamiento de datos apropiados.
- Exponer productos de datos procesados a través de interfaces de servicio estandarizadas como REST APIs o servicios nativos de la plataforma.
* Desarrollo y mantenimiento de pipelines de datos
- Implementar lógica de validación, normalización y transformación de datos para garantizar la precisión y usabilidad de los conjuntos de datos integrados.
- Solucionar fallos de pipelines de datos e implementar mecanismos de monitoreo, registro y recuperación.
- Optimizar el rendimiento del pipeline para soportar plazos de misión y requisitos de procesamiento de datos a gran escala.
* Entregables y Proyectos Clave
- Diseño e implementación de pipelines de datos de producción que permitan la ingesta y diseminación automatizada de datos de misión entre sistemas.
- Documentación técnica que describa los artefactos de datos, incluyendo propósito y relevancia operativa, sistemas de origen y métodos de ingesta, lógica de transformación, y sistemas de destino e interfaces de acceso.
- Documentación de interfaz que respalde la integración con socios de misión externos.
- Artefactos técnicos RMF que respalden la autorización de seguridad de las interfaces de datos.
- Mejora continua y mantenimiento del ecosistema de pipelines de datos para respaldar las necesidades cambiantes de la misión.
Cualificaciones
- 9 años de experiencia y una licenciatura en Ciencias de la Computación, Ingeniería de Software, Sistemas de Información de Gestión/Sistemas de Información, o una disciplina relacionada; o una maestría y 7 años de experiencia; o un doctorado/JD y 4 años de experiencia.
- Más de 7 años de experiencia apoyando esfuerzos de ingeniería de software, integración de sistemas, implementación de plataformas o desarrollo de aplicaciones dentro de DoD, IC, SAP/SCI, u otros entornos de misión complejos.
- Experiencia en el diseño o implementación de pipelines de datos, flujos de trabajo ETL o arquitecturas de integración de datos.
- Experiencia trabajando con formatos de datos estructurados y semiestructurados (JSON, CSV, XML, etc.).
- Se requiere una autorización de alto secreto activa con la capacidad de obtener y mantener acceso a Información Compartimentada Sensible y Programas Especiales, así como la voluntad de consentir un examen polígrafo.
Nos impresionará aún más si tiene experiencia con lo siguiente:
- Dominio de tecnologías de orquestación de datos de bajo código/sin código como Apache NiFi, Apache Airflow o herramientas similares de orquestación ETL.
- Experiencia en la implementación de lógica de transformación de datos utilizando Python y bibliotecas de procesamiento de datos como Pandas y NumPy.
- Certificación o experiencia demostrada como Ingeniero de Datos de Palantir Foundry, incluido el uso de Repositorios de Código, Pipeline Builder, Lógica AIP y otras tecnologías relevantes para la plataforma.
- Experiencia en el diseño de pipelines que procesan y fusionan conjuntos de datos a gran escala de múltiples fuentes.
- Familiaridad con las arquitecturas de datos de DoW, la integración de sistemas de misión o los marcos de interoperabilidad de datos.
- Capacidad para comunicarse eficazmente con ingenieros, arquitectos, operadores y liderazgo gubernamental superior, traduciendo conceptos técnicos en valor relevante para la misión.
- Capacidad probada para trabajar en entornos altamente regulados y de rápida evolución donde la excelencia técnica, la capacidad de respuesta a la misión y la coordinación de las partes interesadas son críticas para el éxito.
El rango salarial para el puesto es de $180,000 a $220,000 por año.
La compensación específica se determinará por varios factores, incluyendo la experiencia, la educación, las habilidades y los conocimientos. También ofrecemos beneficios médicos/dentales/visión y contribución de 401k.
Blue Sky Innovators, Inc. es un empleador que ofrece igualdad de oportunidades. Todos los solicitantes calificados recibirán consideración para el empleo sin distinción de sexo, raza, color, religión, origen nacional, discapacidad, condición de veterano protegido, edad o cualquier otra característica protegida por la ley.
Más oportunidades con un solo perfil
¿Quieres optar a más puestos sin repetir todo el proceso? Crea tu perfil para que te encuentren las empresas que usan Nort.
Crear mi perfil