Job Description
Location: Remote in France
Veuillez soumettre une copie de votre curriculum vitae en anglais.
Nous recherchons un Crawling Engineer hautement qualifié pour être un contributeur essentiel au développement de notre suite de crawlers et d'extractions. Si vous aimez travailler sur des problèmes complexes et écrire un code propre, vous allez adorerer ce rôle. Notre objectif est de résoudre un problème complexe. Notre travail consiste à collecter, catégoriser et analyser des données semi-structurées provenant de différentes sources (plus de 200 millions de produits provenant de plus de 100 sites Web dans notre catalogue de plus de 500 millions de produits). Nous aidons nos clients à découvrir de nouveaux modèles dans leurs données pouvant être exploités afin qu'ils deviennent plus compétitifs et augmentent leurs revenus.
Fonctions essentielles:
- Développer et maintenir divers crawlers et composants côté serveur.
- Assurer des performances optimales des différentes bases de données et une réactivité aux demandes frontend.
- Développer des applications haute performance en écrivant un code testable, réutilisable et efficace.
- Mettre en place des protocoles de sécurité efficaces, des mesures de protection des données et des solutions de stockage.
- Effectuer des tests diagnostiques, réparer les défauts et fournir un support technique.
- Documenter les processus, y compris les schémas de base de données, ainsi que préparer des rapports.
- Recommander et mettre en œuvre des améliorations aux processus et technologies.
- Apporter de nouvelles idées à la table - certaines de nos meilleures innovations viennent de l'équipe.
Technologies utilisées:
- Langages : La maîtrise de Python, JavaScript (JS), HTML et SQL est essentielle.
- Environnement : Expérience avec la Google Cloud Platform (GCP), Kubernetes, les pratiques d'intégration continue et de déploiement continu (CI/CD), GitHub et CircleCI.
- MariaDB, MySQL, MongoDB
---------------
Location: Remote in France
Please submit a copy of your resume in English.
We are looking for a highly capable Crawling engineer to be a core contributor in developing our suite of crawlers and extractions. If you love working on complex problems, and writing clean code, you will love this role. Our goal is to solve a messy problem elegantly and cost effectively. Our job is to collect, categorize, and analyze semi-structured data from different sources (200 million+ products from 100+ websites into our catalog of 500 million+ products). We help our customers discover new patterns in their data that can be leveraged so that they can become more competitive and increase their revenue.
Essential Functions:
- Developing and maintaining various crawlers and server-side components.
- Ensuring optimal performance of different databases and responsiveness to front-end requests.
- Developing high-performance applications by writing testable, reusable, and efficient code.
- Implementing effective security protocols, data protection measures, and storage solutions.
- Running diagnostic tests, repairing defects, and providing technical support.
- Documenting processes, including database schemas, as well as preparing reports.
- Recommending and implementing improvements to processes and technologies.
- Bring new ideas to the table – some of our best innovations originate within the team
Technologies We Use:
Languages: Proficiency in Python, JavaScript (JS), HTML, and SQL is essential. • Environment: Experience with Google Cloud Platform (GCP), Kubernetes, Continuous Integration and Continuous Deployment (CI/CD)
Qualifications
- Expérience : Un minimum de 3 ans dans un domaine pertinent est requis.
- Protocoles : Bonne compréhension des protocoles TCP/IP et HTTP.
- Connaissance en sécurité Web : Familiarité avec les principes et pratiques de sécurité Web.
- Systèmes : Compétent dans le travail avec les systèmes d'exploitation basés sur Linux, notamment Debian et Ubuntu.
- Méthodologie : Les méthodologies Agile et Scrum devraient être naturelles. • Excellentes compétences interpersonnelles, de communication et de collaboration.
- Expertise en développement back-end en utilisant Python.
- Compréhension solide de la GCP, de Kubernetes et des concepts d'infrastructure.
- Compétences en programmation RDBMS & SQL (l'expérience avec MYSQL, MariaDB & MongoDB est un plus).
- Ce poste peut nécessiter d’être sur appel pour résoudre des problèmes critiques liés aux applications de production en dehors des heures normales de travail.
Facultatif:
- Connaissance facultative de l'intelligence artificielle (IA) et de l'apprentissage automatique (ML), de l'analyse de données et de AWS serait un plus.
Points bonus:
- Expérience de travail sur des environnements de microservices ou de systèmes distribués.
- Expérience avec la conception orientée domaine.
- Expérience avec la modélisation C4.
- Expérience de travail dans un environnement de vente au détail ou de commerce électronique
---------------
- Experience: A minimum of 3 years in a relevant field is required.
- Protocols: Strong understanding of TCP/IP and HTTP protocols.
- Web Security Knowledge: Familiarity with web security principles and practices.
- Systems: Competent in working with Linux-based operating systems, specifically Debian and Ubuntu.
- Methodology: Agile and Scrum methodologies should be second nature.
- Superb interpersonal, communication, and collaboration skills.
- Expertise in back-end development using Python
- Solid understanding of GCP, Kubernetes and infrastructure concepts.
- RDBMS & SQL Programming Skills (MYSQL, MariaDB & MongoDB experience is plus).
- This position may require being on call rotation to address critical production application issues outside of normal working hours.
Nice to have:
- Optional: Knowledge of Artificial Intelligence (AI) & Machine Learning (ML), data analysis, and AWS would be considered a plus.
Bonus Points:
- Experience working on microservices or distributed system environments.
- Experience with Domain Driven Design
- Experience with C4 modeling
- Experience working within a retail or ecommerce environment.
Additional Information
EEO STATEMENT
Wiser Solutions, Inc. is an Equal Opportunity Employer and prohibits Discrimination, Harassment, and Retaliation of any kind. Wiser Solutions, Inc. is committed to the principle of equal employment opportunity for all employees and applicants, providing a work environment free of discrimination, harassment, and retaliation. All employment decisions at Wiser Solutions, Inc. are based on business needs, job requirements, and individual qualifications, without regard to race, color, religion, sex, national origin, family or parental status, disability, genetics, age, sexual orientation, veteran status, or any other status protected by the state, federal, or local law. Wiser Solutions, Inc. will not tolerate discrimination, harassment, or retaliation based on any of these characteristics.