dubacq/ScoDoc
1
0
Fork 0
forked from ScoDoc/ScoDoc
Code Pull Requests Activity
ScoDoc, un logiciel pour le suivi de la scolarité
406 Commits 1 Branch 530 Tags 44 MiB
JavaScript 45.9%
Python 45.6%
Jinja 4.9%
CSS 2.6%
Shell 0.6%
Other 0.4%
432831140c
Go to file
Jean-Marie Place 432831140c Export/Import d'étudiant via fichiers xlsx. 
Point délicats:
* Le message d'erreur pour une case vide était une exception python.
diagnostic: la création de l'étudiant dans la BDD se faisait avant le controle de la civilité et plantait quand None
correctif: ajout d'une methode _check_civilite (a cote des méthodes de contrôle d unicité de nip et d ine (sco_etud.py)
* Le format de date a changé entre pyExcelerator et openpyxl (réécriture de sco_excel.xldate_as_datetime)
le format xlxs d import précise qu'une date peut être spécifié soit en ISO soit sous forme d'un nombre.
c est testé avec des écriture de fichier xlsx depuis Excel 2019 et LibreOffice 7 (mais sans maitrise sur la forme de date utilisée)
par contre plantage si tentative de lire un fichier ods (fonction excel_bytes_to_list a fixer)
* Le renvoi vers la page de formation_id se faisait mal
correction: calcul de l'url (sco_import_etuds.py:245) et (scolar.py:1710 celle-ci peut être pas necessaire)
2021-08-14 10:12:40 +02:00
app Export/Import d'étudiant via fichiers xlsx. 2021-08-14 10:12:40 +02:00
logos Upload from subversion 1932 2020-09-26 16:19:37 +02:00
misc Vide base departement avant tests 2021-07-31 23:57:54 +03:00
scotests ajout creation user "bach" pour certains tests 2021-08-07 16:32:24 +02:00
tests reduction PR aux balises 2021-08-10 09:30:08 +02:00
tools reduction PR aux balises 2021-08-10 09:30:08 +02:00
.gitignore reduction PR aux balises 2021-08-10 09:30:08 +02:00
.pylintrc tweaks for install on Mac + fix test users models 2021-07-11 23:49:38 +02:00
config.py Reorganisation des fichiers, scripts d'install et doc installation 2021-07-25 10:51:09 +03:00
LICENSE Initialization. 2020-09-25 23:03:44 +02:00
README.md Ajout/suppression de département en tant qu'utilisateur scodoc (non root) 2021-08-09 08:25:33 +02:00
refactor.py WIP suite de la migration 2021-06-21 10:17:16 +02:00
requirements-3.7.txt removed old rss functions 2021-08-02 10:56:50 +03:00
scodoc_manager.py nouvelle implementation des caches 2021-07-19 20:53:01 +03:00
scodoc.py reduction PR aux balises 2021-08-10 09:30:08 +02:00
VERSION fixed doc markdown 2021-07-30 17:52:48 +03:00

README.md

ScoDoc - Gestion de la scolarité - Version ScoDoc 8

(c) Emmanuel Viennet 1999 - 2021 (voir LICENCE.txt)

Installation: voir instructions à jour sur https://scodoc.org

Documentation utilisateur: https://scodoc.org

Branche ScoDoc 8 expérimentale

N'utiliser que pour les développements et tests.

La version ScoDoc8 est basée sur Flask (au lieu de Zope) et sur python 3.7+. Elle ne sera pas mise en production, c'est une version de développement pour le passage à Python 3.

De très nombreux changements sont susceptibles d'affecter l'API, mais on s'efforce à ce que rien ne soit visible des utilisateurs Web.

Work in Progress (WIP): développement en cours, certaines pages fonctionnent, d'autres pas: merci de signaler les erreurs.

État actuel (30 juillet 21)

  • serveur de développement fonctionnel (pas testé en mode "production" sous gunicorn+nginx).

  • logs à revoir (tropverbeux), dans /opt/scodoc-data/log

  • pas d'import/export excel.

En cours:

  • nettoyage du code, finalisation tests et intégration.

Installation (sur Debian 10 / python3.7)

On peut installer à partir de zéro, ou sur une machine ayant déjà un ScoDoc 7 et migrer les données.

Installation

Arrêter et renommer ScoDoc7

Important: si vous avez un ScoDoc7 installé sur ce serveur, le mettre à jour, l'arrêter et renommer son répertoire avant de commencer l'installation de ScoDoc 8:

  1. S'assurer que l'installation ScoDoc 7 est à jour

    sudo su
cd /opt/scodoc/Products/ScoDoc/config
./upgrade.sh

  2. Arrêter le service ScoDoc 7

    systemctl stop scodoc

    S'assurer qu'il est bien stoppé (ps auxw, ...), sans qui la migration va échouer.

  3. Renommer le répertoire de ScoDoc 7:

    sudo su
mv /opt/scodoc /opt/scodoc7

Les données pourront être migrées après installation la nouvelle evrsion, voir plus loin.

Installer ScoDoc

Sur un système Linux Debian 10, en tant que root:

  • Charger la dernière release depuis https://scodoc.org/git/viennet/ScoDoc/releases

  • Déplacer ou copier le fichier ScoDoc-x.y.z.tgz dans /opt et le décomprimer:

     sudo su
 cd /opt; tar xf - ScoDoc-x.y.z.tgz # remplacer x.y.z par votre version

  • Lancer le script d'installation:

     cd /opt/scodoc/tools
 ./install_debian10.sh

ce script crée un compte utilisateur "scodoc".

Note: si vous installez sur une machine déjà configurée pour ScoDoc 7, il est inutile de reconfigurer la messagerie et le firewall.

Bases de données

ScoDoc8 utilise les bases de département de ScoDoc7, mais une nouvelle base utilisateurs nommée SCO8USERS (au lieu de SCOUSERS), qui est manipulée via sqlalchemy.

Configuration de la base utilisateurs

Lancer le script:

sudo su
cd /opt/scodoc/tools
./create_users_database.sh

Ce script crée une base nommée SCO8USERS, appartenant à l'utilisateur (role) postgres scodoc. Cet utilisateur est automatiquement créé si nécessaire.

variables d'environnement

Le serveur utilise des variables d'environnement donnant la configuration de base. Le plus simple est de les grouper dans un fichier .env (dans /opt/scodoc/.env) qui est lu automatiquement au démarrage:

# .env for ScoDoc _development_

FLASK_APP=scodoc.py
FLASK_ENV=development

MAIL_SERVER=votre.serveur.de.mail.net # ou vide si pas de mail
MAIL_PORT=25

SCODOC_ADMIN_MAIL="adresse.admin@toto.fr" # important: le mail de admin
USERS_DATABASE_URI="postgresql://scodoc:le_mot_de_passe@localhost:5432/SCO8USERS"
SECRET_KEY="CGGAJAKlh6789JJK?KNAb=" # une chaine aléatoire
# comment out to use CDN:
BOOTSTRAP_SERVE_LOCAL=1

Initialisation de la base utilisateur par Flask

En tant qu'utilisateur scodoc:

su scodoc # si besoin
cd /opt/scodoc
source venv/bin/activate
flask db init
flask db migrate -m "users and roles tables"
flask db upgrade

Puis initialisation de l'appli:

flask user-db-init

Et saisie du mot de passe admin:

flask user-password admin

On peut ensuite créer des utilisateurs tests avec:

flask user-create toto Ens RT
flask user-create tata Ens Info

ou mieux, importer les utilisateurs de ScoDoc7 avec:

flask user-db-import-scodoc7

(on peut le faire plus tard avec le script de migration décrit plus bas) (Note: la base SCOUSERS de ScoDoc7 n'est pas affectée, ScoDoc8 utilise une base séparée, nommée SCO8USERS).

Pour créer un utilisateur "super admin", c'est à dire admin dans tous les départements:

flask user-create admin1 SuperAdmin @all

Migration d'une installation ScoDoc 7

Le script migrate_from_scodoc7.sh va déplacer les donneés et reconfigurer les bases de données de votre installation ScoDoc 7 pour passer à ScoDoc 8 (ne pas utiliser en production !). Les modifications effectuées sont sans retour: ScoDoc 7 ne fonctionnera plus !

  1. Lancer le script de migration ScoDoc 8 doit avoir été installé comme expliqué plus haut.

    sudo su
cd /opt/scodoc/tools
./migrate_from_scodoc7.sh

Création d'un département

su scodoc # si besoin
cd /opt/scodoc
source venv/bin/activate
flask sco-create-dept DEPT

où DEPT est le nom du département (un acronyme en majuscule, comme "RT", "GEA", ...).

Suppression d'un département

su scodoc # si besoin
cd /opt/scodoc
source venv/bin/activate
flask sco-delete-dept DEPT

Lancement serveur (développement, sur VM Linux)

En tant qu'utilisateur scodoc (pour avoir accès aux bases départements de ScoDoc7):

Dans un terminal, lancer le serveur:

export FLASK_APP=scodoc.py
export FLASK_ENV=development
flask run --host=0.0.0.0

Organisation des fichiers

L'installation comporte les fichiers de l'application, sous /opt/scodoc/, et les fichiers locaux (archives, photos, configurations, logs) sous /opt/scodoc-data. Par ailleurs, il y a évidemment les bases de données postgresql et la configuration du système.

Fichiers locaux

Sous /opt/scodoc-data, fichiers et répertoires appartienant à l'utilisateur scodoc. Ils ne doivent pas être modifiés à la main, sauf certains fichiers de configuration sous /opt/scodoc-data/config.

Le répertoire /opt/scodoc-data doit être régulièrement sauvegardé.

Principaux contenus:

/opt/scodoc-data
/opt/scodoc-data/log             # Fichiers de log ScoDoc
/opt/scodoc-data/config          # Fichiers de configuration
             .../config/logos    # Logos de l'établissement
             .../config/depts    # un fichier par département
/opt/scodoc-data/photos          # Photos des étudiants
/opt/scodoc-data/archives        # Archives: PV de jury, maquettes Apogée, fichiers étudiants

Pour les développeurs

Installation du code

Procéder comme indiquer au début, mais au lieu de técharger une release, partir d'un clone git et se placer sur la branche ScoDoc8:

sudo su
cd /opt
git clone https://scodoc.org/git/viennet/ScoDoc.git
# (ou bien utiliser votre clone gitea so vous l'avez déjà créé !)
mv ScoDoc scodoc # important !
cd /opt/scodoc
git checkout ScoDoc8

Tests unitaires

Certains tests ont besoin d'un département déjà créé, qui n'est pas créé par les scripts de tests: Lancer au préalable:

flask sco-delete-dept TEST00 && flask sco-create-dept TEST00

Puis dérouler les tests unitaires:

pytest tests/unit

Ou avec couverture (pip install pytest-cov)

pytest --cov=app --cov-report=term-missing --cov-branch tests/unit/*

TODO

  • import/export Excel