Data Engineer Web scraping
Luxoft
Before you apply, please get familiar with LuxoftLuxoft locations : Logeek Magazine : Luxoft Alumni Club : Mandatory Skills
- Python
- Linux
- Containerization(Docker, Kubernetes)
- Good communication skills
- Strong on Dev ops side of things(K8s, Docker, Jenkins)Project DescriptionDevelop scalable data collection, storage, and distribution platform to house data from vendors, research providers, exchanges, PBs, and web-scraping.
Make data available to systematic & fundamental PMs, and enterprise functions : Ops, Risk, Trading, and Compliance. Develop internal data products and analyticsResponsibilitiesWeb scraping using scripts / APIs / ToolsHelp build and maintain greenfield data platform running on Snowflake and AWSUnderstand the existing pipelines and enhance pipelines for the new requirements.
Onboarding new data providersData migration projects
Trabalhos semelhantes que podem ser interessantes para você
-
ATIVIDADES A SEREM DESENVOLVIDAS Desenvolvimento de aplicações com Javascript, PHP, banco de dados REQUISITOS Residir em São José do Rio Preto / SP ou cidades próximas que tenham fácil locomoção Conh
Grupo AGTech
São Paulo, Brasil
Mar 19, 2025 -
TRANSFORMAR NEGÓCIOS EM REALIZAÇÕES PESSOAIS Somos uma Nação de Patriots, baseados em vários sonhos e um ideal, SER OS MELHORES . Lutamos pela transformação que queremos no mundo e aqui cada um de nó
Nação Digital
Maringá, Paraná
Mar 19, 2025 -
Aqui no Grupo RBS nós acreditamos na Comunicação. Umacomunicação que conecta, diverte, emociona e informa. Acreditamosno viver junto, porque é junto que vivemos as melhoresexperiências. Estamos há 67
Grupo RBS Ltda
Porto Alegre, Rio Grande do Sul
Mar 19, 2025 -
Descrição : Estágio Web Designer Home Office Atividades : Desenvolvimento e Edição de Artes Cadastramento de produtos Empresa : CASAH - E-commerce de móveis Localizada em Mirassol SP. Desejado conhec
CASAH
Mirassol, São Paulo
Mar 19, 2025 -
Belo Horizonte / MG Código de referência : DESIGNER BH24Vaga Permanente Instituição de Ensino busca profissional para atuarcomo : Atribuições : - Criar logotipos, outdoors, banners, cartões devisita,
Quarte Recursos Humanos
Belo Horizonte, Minas Gerais
Mar 19, 2025 -
Indispensável : Experiência básica em desenvolvimento front-end com HTML, CSS e JavaScript; Experiência básica em desenvolvimento back-end com PHP ou outras linguagens; Experiência com sistemas de co
WEB DESIGNER
Aracaju, Sergipe
Mar 19, 2025
