Visualisation des cohortes de BUT depuis scodoc
Go to file
Jean-Christophe Dubacq 6ccb348361 * SCODOC_SERVER instead of SCODOC_URL to match documentation
* Ignore EXT semesters for old semesters
  * General cleanup
2024-10-18 03:04:14 +02:00
.env-example CLI option handling, uses standard .env, create requirements.txt, update README. 2024-10-16 22:44:18 +02:00
.gitignore Add SVG generation, get rid of sankeymatic dependency, create a heuristic algorithm for enhancing the sankey graph 2024-10-16 14:33:29 +02:00
get.py * SCODOC_SERVER instead of SCODOC_URL to match documentation 2024-10-18 03:04:14 +02:00
LICENSE Initial commit 2024-10-10 20:59:41 +02:00
README.md Enhance documentation, especially for Windows installations. 2024-10-17 23:18:41 +02:00
redirect.csv.example Document some files and ignore some others 2024-10-12 21:06:13 +02:00
requirements.txt Enhance documentation, especially for Windows installations. 2024-10-17 23:18:41 +02:00
theme.csv.example Document some files and ignore some others 2024-10-12 21:06:13 +02:00
trailer.txt Add main program (revised version) 2024-10-14 01:17:25 +02:00

scodoc-cohortes

Visualisation des cohortes de BUT depuis scodoc

Ce programme utilise l'API pour générer des graphes de Sankey permettant de visualiser le devenir d'une cohorte.

La notion de cohorte devient difficile à traiter lorsqu'on considère l'existence de passerelles permettant d'entrer à n'importe quel année d'étude.

La vision proposée est de regarder tous les semestres consécutifs en partant d'une année de référence, et tous les élèves qui touchent ces semestres.

On peut alors dégager divers indicateurs de sortie :

  • Sortie en BUT3 avec le diplôme
  • Sortie en BUT2 avec décision de jury positive (ADM/ADJ) qui implique normalement la possibilité de poursuivre ses études ailleurs
  • Autorisation de redoublement et l'élève revient
  • Sortie en BUT1 ou BUT2 avec la possibilité de continuer, mais l'élève ne revient pas
  • Autorisation de redoublement et l'élève ne revient pas
  • Toute autre sortie du flot de la cohorte

Le premier type de sortie est assurément un succès, et c'est discutable pour le deuxième. Le taux de réussite est fourni par une fourchette.

Le troisième type n'est ni une réussite ni un échec, et comptera plus tard comme une réussite ou un échec dans une cohorte ultérieure.

Les trois derniers types, à des niveaux divers, sont des échecs. Le taux d'échec est donc fourni comme une fourchette entre le dernier type et la somme des trois derniers.

Il existe un dernier type (qui tombe dans le 5 ou le 6 actuellement), c'est le cas d'un élève en BUT3 qui ne valide pas le BUT3, a validé le BUT2, et partirait dans une autre filière après. Le cas paraît beaucoup plus douteux que le deuxième type et est pour le moment classé en échec.

Installation (Linux et MacOS)

Créer un virtualenv:

python3 -m venv venv
source venv/bin/activate
sudo apt install libcairo-dev

(n'importe quelle version de python récente fera l'affaire).

Si vous êtes sur un système qui n'est pas de la famille Debian/Ubuntu, il faudra sans doute remplacer la dernière ligne par votre installeur de paquets préféré. Cette opération n'est à faire qu'une seule fois par machine.

Puis installer les composants suivants dans ce virtualenv:

pip install -r requirements.txt

Puis indiquer votre configuration ScoDoc dans le fichier .env:

SCODOC_SERVER=https://votre.serveur.fr
SCODOC_USER=un_utilisateur_api
SCODOC_PASSWORD=son_mot_de_passe

Installation (Windows)

Exécuter un terminal depuis le répertoire où est installé le programme. Les commandes à taper dans l'interpréteur de commandes PowerShell sont :

python.exe -m venv venv
venv\Scripts\Activate.ps1
pip install -r requirements.txt

Puis indiquer votre configuration ScoDoc dans le fichier .env:

SCODOC_SERVER=https://votre.serveur.fr
SCODOC_USER=un_utilisateur_api
SCODOC_PASSWORD=son_mot_de_passe

Pycairo ne devrait pas s'installer. Si vous savez installer un pycairo fonctionnel pour Windows, n'hésitez pas à nous proposer de le rajouter à ces instructions.

Note pour les développeurs

Pour mettre à jour le fichier requirements.txt, lancer (après avoir activé l'environnement python)

pip freeze|sed -e '/pycairo/ s/$/; platform_system != "Windows"/g' > requirements.txt

Usage

Après ouverture du terminal (une seule fois par terminal):

source venv/bin/activate

Puis

./get.py [--techno] [--base 2021] dept ...

FICHIERS

get.py

C'est l'exécutable. Il prend en argument des acronymes de département (par exemple GEA ou INFO) et fabrique un graphe comportant les formations BUT de ce département (ou ces départements dans le même graphe, s'ils sont plusieurs sur la ligne de commande).

Il faut un environnement virtuel pour que soient accessibles les bibliothèques Python pycairo, drawsvg, requests. A priori libcairo est optionnel, mais le graphe marchera moins bien sans. La bibliothèque (système) libcairo2 doit aussi être installée (apt install libcairo-dev ou équivalent).

On peut rajouter l'option --techno pour n'avoir que les bacs technos.

Liste complète des options :

  • --techno : ne sélectionne que les bacs technos
  • --base year : prend la cohorte constituée de tous les élèves qui ont touché le S1 ou le S2 dans l'année year, le S3 ou le S4 dans l'année year+1, et le S5 ou le S6 dans l'année year+2.
  • dept1 (acronyme d'un département, suivi éventuellement d'autres acronymes de département) : sélectionne les départements mentionnés. Si aucun département n'est mentionné, donne l'aide.

redirect.csv

Certains élèves ne reçoivent jamais de décision de jury lorsqu'ils quittent la cohorte, tout en n'étant pas démissionnaires. Ce sont des erreurs administratives, mais il est possible d'indiquer un résultat de jury fictif pour ces élèves. La plupart du temps, ce sont des élèves qui abandonnent la formation, et il suffit de leur donner le résultat NAR ou DEM. Dans d'autres cas, ça peut être des élèves en attente de décision parce que le jury n'a pas encore eu lieu, mais on sait déjà quel sera l'issue du jury (par exemple des notes élevés et un stage qui se déroule bien, ou au contraire pas de stage trouvé au mois de septembre).

Format : format CSV avec virgule comme séparateur. Les lignes vides ou commençant par # sont ignorées.

#etudid,BUCKET

12345,NAR
67890,ADM

theme.csv

Ce fichier offre la ossibilité de choisir les couleurs pour chacune des catégories.

Format : format CSV avec virgule comme séparateur. Les couleurs sont au format de sankeymatic.com, soit le format hexadécimal d'HTML sauf la catégorie TRANSPARENT qui vaut #FFFFFF.0 (blanc transparent). Les catégories sont +DUT, QUIT, SUCCESS, NORMAL, FAIL, OLD, NEW, TRANSPARENT, RED.

+DUT,#0040C0
QUIT,#00FF00
SUCCESS,#0000FF
NORMAL,#C0C0C0
FAIL,#FF4040
OLD,#FF8000
NEW,#FFFF00
TRANSPARENT,#FFFFFF.0
RED,#000000

.json

Ce fichier permet de configurer plus finement le graphique pour le département (ou la combinaison de département, séparés par des _) indiqué dans son nom de fichier.

Format : format JSON (utiliser un éditeur qui sait repérer les erreurs de format est recommandé).

Liste des clés : à venir.

.svg

Ce fichier est la sortie du programme. C'est un graphique au format SVG, facile à incorporer dans des pages Web ou autres programmes de traitement de texte.

best-.json

Ce fichier contient le résultat d'une recherche heuristique pour avoir un graphe visuellement plus satisfaisant. Il peut être supprimé si le graphe ne s'améliore pas par des lancements successifs. Il peut aussi être modifié à la main. C'est essentiellement l'ordre des balises