reveal.js

Génération de code automatisée pour les modules d'un ERP libre, application à la création d'un réseau d'entraide et d'amélioration continue
Présenté par Mathieu Benoit

JURY

Président : Martin Trépanier, Ph. D.
Directeur de recherche : Samuel Jean Bassetto, Doctorat
Membre : Giovanni Beltrame, Ph. D.

Plan de présentation

Présentation de Mathieu Benoit
Résultats
- 6 niveaux de production en ingénierie numérique
- Projets d'étude ORE et CEPPP
Conclusion

Mathieu Benoit

Développeur de logiciel libre
Entrepreneur
B.Ing. Informatique Libre

Mathieu Benoit

MathBenTech - 2018
SantéLibre - 2020
TechnoLibre - 2020

Développement ERPLibre pour automatiser Odoo et rendre accessible un déploiement 100% libre.

Valeur du libre

Solution pour réseau d'entraide
Sans limitation technique pour comprendre et résoudre des défis
Valorisation et reconnaissance du développeur logiciel

Démonstration - Générateur module ERPLibre

Module :

{{$index + 1}} Modèle :

Champ : Type : Relation : Relation champ :

{{json}}

Niveau 0 - Ingénierie de production sans numérique

Procédure papier
Faire de l'entraide
Réaliser des projets communautaires

Voici le premier niveau, c'est la base fondamentale en production. C'est notre savoir-faire en ingénierie.

Même si ce niveau n'a pas de numérique pour de la fabrication, c'est le plus important, puisque c'est notre fondement à nous les humains. C'est un niveau de débrouillardise sans technologie numérique.

La liberté est essentielle dans la fabrication/production puisqu'elle permet à l'individu de s'exprimer, de développer sa créativité, de travailler à son propre rythme, de mieux s'adapter aux changements et de réaliser son plein potentiel.

Aujourd'hui, ça nous permet de se rapprocher de la nature et de l'être humain et de réaliser l'entraide avec des projets communautaires.

Je vous reviens plus tard avec ce niveau.

Niveau 1 - Ingénierie de production avec numérique

Communication
Partage et gestion des ressources
- Gestion du matériel
Suivi des procédures et traçabilité
Système de reconnaissance sur l'entraide
Amélioration continue

Logiciel Libre - 4 libertés

utiliser sans restriction;
étudier pour valider le fonctionnement;
copier pour permettre la diffusion;
modifier pour adapter, en redistribuant.

Copyleft ©

Le développement logiciel auquel j'adhère et que je crois le plus en mesure d'aider les communautés est le logiciel libre qui respecte 4 libertés, essentielles pour la gestion d'un réseau d'entraide.
La liberté :
d'Utiliser sans être limité par des restrictions ou des coûts;
d'Étudier pour comprendre le fonctionnement et valider s'il répond bien aux besoins;
de Copier pour permettre une diffusion plus large et plus rapide des logiciels libres;
et de Modifier pour l'adaptation du logiciel aux besoins spécifiques, améliorer la qualité du logiciel, permettre à l'utilisateur de choisir son fonctionnement, puis partager les connaissances pour stimuler l'innovation et la créativité.

Cela permet la correction de problème de sécurité, ainsi qu'une plus grande flexibilité sur l'adaptation à différent contexte.

De plus, les logiciels libres respectent le développeur et leur utilisateur via la copyleft en rendant sa production un bien commun via la contrainte de redistribution qui hérite des 4 libertés.

Licence libre au Québec

guide de référence gouvernementale sur les logiciels libres et ouverts

Système ERPLibre version 1.5.0

2977 modules accessibles

Application ERPLibre

Marché des solutions ERP évalué autour de 40 milliards USD mondialement en 2020

Bénéfice technique d'utiliser Odoo

ORM
MVC
Website builder
Modulaire
Python + XML + Javascript

La plateforme Odoo offre déjà des outils de développement qui simplifie la création de module. Le ORM permet de faire abstraction à une base de données par la manipulation d'objet en Python. Le MVC permet de découpler le travail par composante, soit le modèle, la vue et le contrôleur.
Le website builder est un concept d'interface Low-code/No-code qui est la création d'un site web avec des snippets.
Le développement est modulaire, c'est-à-dire que pour faire une application, c'est un ensemble de module avec des caractéristiques sur le fonctionnement.
Puis la plateforme est programmé avec du Python, XMl et Javascript.
Il y a d'autres bénéfices techniques, mais ceux-ci sont importants pour le générateur de code.

Ingénierie traditionnelle en développement logiciel

Automatisation du développement

Pour réduire le temps de développement, faciliter son déploiement et le suivi de la satisfaction d'utilisation.

Problématique

Développement perpétuel, de longue durée, coûteux en temps et argent
Difficile d'avoir une pérennité sur des projets bénévoles
Maintenance exigente et risque d'introduire des erreurs est important

Niveau 2 - Générateur de code

Projet existant

https://github.com/bluisknot/github_odoo_apps/tree/12.0

code_generator
code_generator_db_servers

Démonstration de génération de code

Technique

Génération par gabarit
Génération avec des données

Problématique du niveau 2

Niveau 3 - Générateur de code avec rétroaction

Par rétro-ingénierie

Boucle de génération de code qui permet l'amélioration continue.

Rétro-ingénierie

Technique de génération de code avec rétroaction

Ingénierie

Les résultats de l'amélioration continue sont :

l'extraction du code via l’utilisation d’un AST et extraction des méta-données dans les fichiers XML;
l'amélioration continue sur la génération de code grâce à la reproduction à l’aide de l’extraction du code;
Un outil pour aider à la création de technique de génération à l’aide d’un générateur de générateur de code;
Le générateur de code est accompagné de tests de validation qui reproduise l’ensemble des techniques en démonstration;
La génération de code applique des règles de codage standardisées.

☻ expliquer

Architecture du générateur de code

Diagramme de séquence d'utilisation du générateur de code

Performance d'exécution du générateur

Exécution de génération. 1s, 5s, 30s.
Migration de modèle de données. Accorderie, 1m 30s.
Migration de données (importation). Plusieurs heures.

Mesurer les performances de développement

Il y a plusieurs cas à étudier.

Ingénierie manuelle. Exemple 1h.
Ajout technique de génération. Exemple 1h (base) + ajout (1h)
Exécution de la technique. 1-5 secondes l'algorithme. 15 min choisir les données.

Plusieurs critères à comprendre pour mesurer les temps. Chaques développeurs ont des connaissances différentes. Chaque contexte nécessite différentes adaptations. De plus, cela dépend aussi de l'avancement du générateur, ce qu'il gère déjà, puisqu'il permet de booster ce qui est déjà supporté. Puis la technique a implémenté peut différer en niveau de difficulté, cela dépend de la plateforme.
Quels sont les avantages, les bénéfices à l'utilisation du générateur de code? Il permet l'accélération du développement par le partage de connaissances autant pour un développeur expérimenté qu'un nouveau.
La manière de mesurer est arbitraire, c'est relatif à plusieurs contextes.
Il faut trouver un protocole commun pour mesurer les performances.
Si on veut standardiser notre méthodologie, il faut ouvrir un projet pour évaluer les performances que ça génère, définir exactement les critères du protocole de test.

Démonstration de génération de code avec rétroaction

Technique

Mise à jour des métadonnées selon le code

Problématique

Niveau 4 - Autopoïèse

Poïèse

Processus créatif de fabrication, de production ou de création.

Technopoïèse

Processus créatif de développement technologique.

La technologie est un outil.

Allopoïèse

Un système qui développe quelque chose avec des composantes externes.

Autopoïèse

Un système qui se développe soi-même avec seulement des composantes internes.

Contraire de l'Allopoïèse

C'est un auto-reproducteur!

Auto-reproducteur

Le quine se produit par lui-même, de niveau 0. C'est un programme informatique qui imprime son propre code source.

Résultat

Échec puisque le générateur n'arrive pas à se reproduire entièrement sans erreur.

Interface - Visualisation des modèles

Interface - Visualisation des champs

Interface - Visualisation des hooks

Interface - Visualisation des morceaux de code

Technique d'autopoïèse

Problématique

Niveau 5 - Sympoïèse

Un système qui se développe en collectivité et en collaboration qui a un effet bénéfique sur les écosystèmes.

Technologie éthique
Sortir des individus/organismes de l'isolement
Gérer des cas d'urgences
Mouvement des villes en transition
Automatisation collaborative entre robot
Réduction du réchauffement climatique

C'est pourquoi nous arrivons au niveau 5!
La sympoïèse est une autopoïèse éthique sur la production, elle doit avoir une certaine conscience de ce qui l'entoure.
Pour faire un parallel au monde des vivants, il y a par exemple les coraux ou les champignons, qui communiquent entre eux en collaboration pour le maintient de leurs espèces.
L'être humain est à la base destructeur. Donnons-lui les outils de la technopoïèse pour gérer ses besoins et formons les gens sur la gestion de la consommation.
L'être humain va pouvoir mieux conserver son habitat avec des outils partagés entre la communauté et atteindre localement les personnes.
Les connaissances devraient être partagées au maximum pour un travail collaboratif.
Pour revenir au niveau 0, la théorie de l'autodétermination soutient que l'être humain a besoin de se sentir autonome et libre de prendre des décisions qui ont un impact sur sa vie. Il doit pouvoir expérimenter, se tromper, apprendre et enseigner son expérience. (référence libre)
On peut concevoir deux aspects de la sympoïèse, à la fois un système de communication et de maintenance entre des robots, puis un système écologique pour mettre en place des outils permettant par exemple de réduire notre emprunte sur la planète en évitant le gaspillage par la prise de conscience et la collaboration.
On doit, en technologie, cesser le gaspillage et générer seulement les logiciels nécessaires pour nos besoins
La technologie est un outil, nous devons contrôler nos limites et respecter nos besoins.

Impact sur l'industrie

Respecter les demandes et besoins de leurs consommateurs;
Bénéficier d'une réduction du gaspillage de temps de développement.

Projet d'étude - ORE

Offrir Recevoir Échanger

Accorderie

Migration de données, migration du modèle de données, génération du portail, etc.

Le projet ORE découle du travail effectué avec un client le réseau Accorderie. Le travail a commencé par l'analyse fonctionnelle de leurs besoins et j'ai fait la migration de leurs modèles de données entièrement avec le générateur de code, ainsi que leurs données. Il y avait 3 phases, la première était une copie identique de leurs modèles de données, c'était une preuve de concept fait avec le générateur de code par la technique de migration MySQL. La deuxième phase était une démonstration d'un ERP sans leurs données. Puis la troisième est une fusion des deux premières incluant le développement de la nouvelle plateforme espace membre.

Dans la phase 2, j'ai utilisé le générateur de code pour générer l'interface du portail d'Odoo avec leurs modèles. J'ai obtenu 10 000 lignes de code à personnaliser. Cependant, le projet a été abandonné pour prendre une autre voie avec l'intégration d'une maquette faite par le laboratoire DOMUS de l'université de Sherbrooke. Ce choix était pour avoir une interface client plus facilement accessible et conviviale.

☻ leur processus d'échange de temps a été un développement sur mesure.

Projet d'étude - CEPPP

Avec

CEPPP

Extraction du modèle de données d'une plateforme externe en PHP + ré-ingénierie.

Une plateforme en PHP sur SuiteCRM avait été développée pour gérer les formulaires de CEPPP, elle a été développé en 3 ans de travail et elle n'était pas terminée. Par exemple, il manquait l'anonymisation des données.
Avec le générateur de code, j'ai développé en deux jours un module qui est allé extraire les modèles de données du code PHP pour générer une réplique dans ERPLibre. Bien sur, les fonctionnalités n'ont pas été migrée, mais nous avons fait une réingénierie, puisque le projet avait évolué depuis 3 ans.

Le reste de l'implémentation était du développement normal. Puis j'ai utilisé le générateur de code pour générer l'interface du portail, que j'ai adapté selon les besoins manuellement.
☻ le formulaire

CEPPP technique anonymisation des données

Anonymisation des données (non supporté par le générateur)

Conclusion

Principale conclusions de la recherche

Ingénierie logiciel en poïèse

Question demeurée sans réponse

Comprendre le fonctionnement d'un système autopoïèse complété.
Étudier le changement de forme d'un système en continu sur les techniques d'ingénierie logiciel.
Faire une intégration devops complète.
Peut-on générer toute la plateforme entièrement pour Accorderie et CEPPP, ainsi qu'avec leurs données?

Débouchent sur de nouvelles voies de recherche

Intégration NLP, auto-génération, auto-amélioration.
Robot codeur libre!

Tester la gestion de projet en simulation d'état d'urgence.

Je crois que ma maîtrise n'est qu'un début qui débouche sur plusieurs avenus potentielles, par exemple :

Apprendre les techniques de développement sur l'ensemble des modules de la communauté.
Génération d'application mobile
L'auto-génération
L'auto-ingénierie
L'auto-déverminage
L'auto-amélioration
L'auto-migration
etc.
Le NLP pour permettre l'intéraction via une discussion avec le générateur de code.

Nous pourrions même combler les besoins de suivi de procédure de toute Polytechnique grâce à ce logiciel.