Data Engineer Web scraping
Luxoft
Before you apply, please get familiar with LuxoftLuxoft locations : Logeek Magazine : Luxoft Alumni Club : Mandatory Skills
- Python
- Linux
- Containerization(Docker, Kubernetes)
- Good communication skills
- Strong on Dev ops side of things(K8s, Docker, Jenkins)Project DescriptionDevelop scalable data collection, storage, and distribution platform to house data from vendors, research providers, exchanges, PBs, and web-scraping.
Make data available to systematic & fundamental PMs, and enterprise functions : Ops, Risk, Trading, and Compliance. Develop internal data products and analyticsResponsibilitiesWeb scraping using scripts / APIs / ToolsHelp build and maintain greenfield data platform running on Snowflake and AWSUnderstand the existing pipelines and enhance pipelines for the new requirements.
Onboarding new data providersData migration projects
Trabalhos semelhantes que podem ser interessantes para você
-
Responsabilidades : Criação de Materiais Visuais : Desenvolvimento de artes para redes sociais, peças gráficas, apresentações comerciais e materiais impressos. Design de Interfaces : Criação de sites
-
Belo Horizonte / MG Código de referência : DESIGNER BH24Vaga Permanente Instituição de Ensino busca profissional para atuarcomo : Atribuições : - Criar logotipos, outdoors, banners, cartões devisita,
-
ATIVIDADES A SEREM DESENVOLVIDAS Desenvolvimento de aplicações com Javascript, PHP, banco de dados REQUISITOS Residir em São José do Rio Preto / SP ou cidades próximas que tenham fácil locomoção Conh
-
Descrição : Estágio Web Designer Home Office Atividades : Desenvolvimento e Edição de Artes Cadastramento de produtos Empresa : CASAH - E-commerce de móveis Localizada em Mirassol SP. Desejado conhec
-
Atribuições : Realizar animação de banners em gif e html (Google Web Designer ou Adobe Animate, por exemplo). Apresentar o conteúdo de forma mais dinâmica e desenvolver a experiência entre usuário e
-
Aqui no Grupo RBS nós acreditamos na Comunicação. Umacomunicação que conecta, diverte, emociona e informa. Acreditamosno viver junto, porque é junto que vivemos as melhoresexperiências. Estamos há 67