Data Engineer Web scraping
Luxoft
Before you apply, please get familiar with LuxoftLuxoft locations : Logeek Magazine : Luxoft Alumni Club : Mandatory Skills
- Python
- Linux
- Containerization(Docker, Kubernetes)
- Good communication skills
- Strong on Dev ops side of things(K8s, Docker, Jenkins)Project DescriptionDevelop scalable data collection, storage, and distribution platform to house data from vendors, research providers, exchanges, PBs, and web-scraping.
Make data available to systematic & fundamental PMs, and enterprise functions : Ops, Risk, Trading, and Compliance. Develop internal data products and analyticsResponsibilitiesWeb scraping using scripts / APIs / ToolsHelp build and maintain greenfield data platform running on Snowflake and AWSUnderstand the existing pipelines and enhance pipelines for the new requirements.
Onboarding new data providersData migration projects
Comentarios
Bienvenidos a los comentarios de postovago! Mantenga las conversaciones cortés y sobre el tema. Fomentar conversaciones productivas y respetuosas,
Puedes ver comentarios de nuestros Gerentes de Comunidad.
Registrarse para publicar
Inicia sesión para mostrar más comentarios
Trabalhos semelhantes que podem ser interessantes para você
-
Responsabilidades : Criação de Materiais Visuais : Desenvolvimento de artes para redes sociais, peças gráficas, apresentações comerciais e materiais impressos. Design de Interfaces : Criação de sites
China Link
Santos, São Paulo
Nov 3, 2025 -
Indispensável : Experiência básica em desenvolvimento front-end com HTML, CSS e JavaScript; Experiência básica em desenvolvimento back-end com PHP ou outras linguagens; Experiência com sistemas de co
WEB DESIGNER
Aracaju, Sergipe
Nov 3, 2025 -
Descrição : Estágio Web Designer Home Office Atividades : Desenvolvimento e Edição de Artes Cadastramento de produtos Empresa : CASAH - E-commerce de móveis Localizada em Mirassol SP. Desejado conhec
CASAH
Mirassol, São Paulo
Nov 3, 2025 -
Aqui no Grupo RBS nós acreditamos na Comunicação. Umacomunicação que conecta, diverte, emociona e informa. Acreditamosno viver junto, porque é junto que vivemos as melhoresexperiências. Estamos há 67
Grupo RBS Ltda
Porto Alegre, Rio Grande do Sul
Nov 3, 2025 -
Belo Horizonte / MG Código de referência : DESIGNER BH24Vaga Permanente Instituição de Ensino busca profissional para atuarcomo : Atribuições : - Criar logotipos, outdoors, banners, cartões devisita,
Quarte Recursos Humanos
Belo Horizonte, Minas Gerais
Nov 3, 2025 -
TRANSFORMAR NEGÓCIOS EM REALIZAÇÕES PESSOAIS Somos uma Nação de Patriots, baseados em vários sonhos e um ideal, SER OS MELHORES . Lutamos pela transformação que queremos no mundo e aqui cada um de nó
Nação Digital
Maringá, Paraná
Nov 3, 2025
