Création d'un Web Crawler

Création d'un Web Crawler
La Goulette / Tunis
Postulez avec mon dossierPostulez par E-mail
ZeTeam
Devtech est une SSII constituée de personnel qualifié et pluridisciplinaires développe à la fois une approche métier et une expertise technique dans un contexte national et international. Nous développons des solutions et nous accompagnons nos clients dans la réussite de leurs projets grâce à notre connaissance approfondie des métiers dans lesquels nous opérons et à la qualité des prestations de nos collaborateurs et à leur implication.
Mission Sur ce projet, les stagiaires créeront un web crawler qui rassemblera et organisera des données sur différents sites.
1. Le crawler utilisera le cadre scrappy pour collecter l'information.
2. Les informations seront stockées dans la base de données MySQL suite à la structure xmltv.
3. Le crawler doit pouvoir ramper des données de différentes langues, y compris l'arabe, l'anglais et le français.
4. Étant donné que les données sont hétérogènes, le crawler doit être flexible et configurable pour chaque élément au format xmltv.
5. Maintenir un système d'alerte et de journalisation. Exp : Information de démarrage : heure de début et heure de fin. Exp : Des alertes seront l'échec de l'exploration.
Profil recherché - Niveau d'étude minimum : Bac+3
- Formations requises : Ecole d'Ingénieurs
- Compétences demandés : • Compétences requises: Python • Compétences facultatives: Connaissance de la base de données MySQL Connaissance Xmltv Expérience scrappy

Recherche précise

Nos conseils

Actualités

Retrouvez-nous sur Facebook