Ranking Scraper

Utilitaire de scraping des sites web des principaux classements internationaux d'universités.

L'outil :

récupère par web scraping la totalité des données exposées sur les sites web : les scores totaux et par critères, ainsi que les rangs internationaux et nationaux
calcule les données précises de ranking manquantes pour les universités au-delà du top 100, à l'échelle mondiale et nationale, pour les scores totaux et pour chaque critère.
- classements internationaux : le ranking est calculé de 2 manières différentes
  - en cas de score identique, le ranking suit l'ordre d'apparition de l'université (colonnes calculated_dense_rank)
  - en cas de score identique, le ranking est le même (colonnes calculated_first_rank)
- classements nationaux : la méthode first est utilisée
Deux possibilités d'export des données scrapées :
- fichier Excel mis en forme et téléchargeable : il comprend une feuille par critère + une feuille pour le ranking total + une feuille de synthèse compilant toutes les données
- sauvegarde dans une table d'une bdd sqlite (toutes les données compilées)

Rankins configurés

Télécharger la dernière release
Dézipper et installer n'importe où sur son PC (dans un emplacement accessible en écriture pour que le fichier de logs puisse s'incrémenter)
Double-cliquer pour lancer l'application
- Accessoirement créer un raccourci clic droit sur RankingScrapper.exe -> Envoyer vers ...
la base de données sqlite se trouve dans <YOUR_PATH>/RankingScraper/db/

pip install -r requirements.txt
python app.py

|RankingScrapper.exe
|--/db
|   |--rankings.db

rankings.db est une bdd sqlite vide