Plantilla de descripción de puesto de ingeniero de Big Data
Buscamos contratar a un ingeniero de Big Data con talento para desarrollar y administrar las soluciones de Big Data de nuestra empresa. En este rol, se le pedirá que diseñe e implemente herramientas y marcos de Big Data, implemente procesos ELT, colabore con equipos de desarrollo, cree plataformas en la nube y mantenga el sistema de producción.
Para garantizar el éxito como ingeniero de big data, debe tener un conocimiento profundo de las tecnologías Hadoop, excelentes habilidades de gestión de proyectos y habilidades de alto nivel para la resolución de problemas. Un ingeniero de Big Data de primer nivel comprende las necesidades de la empresa e instituye soluciones de datos escalables para sus necesidades actuales y futuras.
Responsabilidades del ingeniero de Big Data:
- Reunión con gerentes para determinar las necesidades de Big Data de la empresa.
- Desarrollando sistemas Hadoop.
- Carga de conjuntos de datos dispares y realización de servicios de preprocesamiento mediante Hive o Pig.
- Finalizando el alcance del sistema y entregando soluciones de Big Data.
- Gestionar las comunicaciones entre el sistema interno y el proveedor de encuestas.
- Colaborar con los equipos de investigación y desarrollo de software.
- Construcción de plataformas en la nube para el desarrollo de aplicaciones empresariales.
- Mantener los sistemas de producción.
- Capacitar al personal en la gestión de recursos de datos.
Requisitos de Big Data Engineer:
- Licenciatura en ingeniería informática o informática.
- Experiencia previa como ingeniero de big data.
- Conocimiento profundo de Hadoop, Spark y marcos similares.
- Conocimiento de lenguajes de secuencias de comandos, incluidos Java, C ++, Linux, Ruby, PHP, Python y R.
- Conocimiento de bases de datos NoSQL y RDBMS, incluidas Redis y MongoDB.
- Familiaridad con las herramientas Mesos, AWS y Docker.
- Excelentes habilidades de gestión de proyectos.
- Las buenas habilidades de comunicación.
- Capacidad para resolver problemas complejos de software, datos y redes.