Subversion Repositories eFlore/Projets.eflore-projets

Rev

Go to most recent revision | Show changed files | Details | Compare with Previous | Blame | RSS feed

Filtering Options

Rev Age Author Path Log message Diff
772 3991 d 23 h delphine /trunk/scripts/modules/chorodep/ mise à jour chorodep  
771 3991 d 23 h delphine /trunk/scripts/modules/chorodep/ mise à jour chorodep  
770 3997 d 20 h raphael /trunk/services/modules/0.1/bdtfx/ bdtfx/taxons: tentative manquée d'amélioration de l'API: retourner le nom_retenu_complet, sans faire appel aux ontologies (ie: retour.format=min), utile pour la détermination du Cel  
769 3997 d 22 h raphael /trunk/scripts/modules/cel/ cel/scripts: quelques cleanups supplémentaires (backslashes et nom_sel NULL)  
768 3998 d 0 h raphael /trunk/services/modules/0.1/ ontologies/sptb: correction de notices + traçage des requête mysql + compat PHP-5.2  
767 3998 d 2 h raphael /trunk/services/modules/0.1/ services: ajout de debug aux requêtes SQL + correction d'un masque pour le service de noms bdtxa  
766 4004 d 3 h raphael /trunk/services/modules/0.1/baseveg/syntaxons/ syntaxon: fix d'une notice, Commun->traiterResultat() attend 2 arguments  
765 4004 d 3 h raphael /trunk/services/modules/0.1/ ontologies: follow-up r759 et r762: utilisation de Bdd::MODE_OBJET pour le fetch PDO [dépend de la r429 du Framework]  
764 4004 d 3 h raphael /trunk/services/modules/0.1/baseflor/ ontologies: suppression de l'appel au webservice des ontologies baseflor (InformationsBaseflor) par une requête SQL directe hyper-simplifiée [dépend de la r429 du Framework]  
763 4004 d 4 h raphael /trunk/services/modules/0.1/baseflor/ ontologies: suppression de l'appel au webservice des ontologies baseflor (CommunGraphiques) par une requête SQL directe hyper-simplifiée [dépend de la r429 du Framework]  
762 4004 d 5 h raphael /trunk/services/modules/0.1/baseflor/ ontologies: suppression de l'appel au webservice des ontologies baseflor (InformationsTaxonsSup) par une requête SQL directe hyper-simplifiée  
761 4004 d 6 h raphael /trunk/services/modules/0.1/baseflor/ baseflor: gestion d'erreur: reformulations/typo mineures  
760 4004 d 20 h raphael /trunk/scripts/modules/cel/ cel/scripts: fixes + intégration complète de "cel_references" (isfan + num_tax = 0) + utilisation de bdtfx v1.01  
759 4004 d 21 h raphael /trunk/services/modules/0.1/bdtfx/ ontologies: suppression de l'appel au webservice des ontologies "communes" par une requête SQL directe hyper-simplifiée  
758 4005 d 21 h raphael /trunk/services/modules/0.1/commun/ ontologies communes: correction de 2 notices PHP dans le cas de l'absence de passage de
masque et de retour_champs.
Ex: /service:eflore:0.1/bdnt/ontologies/rangTaxo:220/nom
 
757 4005 d 23 h raphael /trunk/scripts/modules/bdtfx/ bdtfx/scripts: intégration des données: utilisation de 2 passes pour la détermination des
familles.
Le niveau de récursivité num_tax_sup => num_nom ne permet pas d'obtenir systématiquement la famille d'un
taxon de niveau supérieur en 1 seule requête.
Exemple: Viola riviniana 'Purpurea' (72474) dont le parent (72473) a un num_tax_sup = 87392.
Ce parent apparaît *après* dans le SELECT, la famille de 72474 n'était donc jamais générée.

Pour résoudre ceci, trois passes sont effectuées, mais la solution idéale devrait dépendre de procédure stockées
récursive par soucis de robustesse et d'efficacité.

Familles introuvables: avant 120, après: 68.
 
756 4008 d 21 h raphael /trunk/scripts/modules/cel/ cel: scripts, procédure de mise à jour du référentiel pour les observations disposant d'un nom_sel_nn valide et non-conflictuel bdtfx/bdtxa  
755 4008 d 22 h raphael /trunk/scripts/modules/cel/ cel: scripts, renommage, README, clarification sur l'ordre d'usage  
754 4009 d 0 h raphael /trunk/scripts/modules/cel/ cel: scripts, ajout de scripts de mise à jour du schéma et des données.
(les modifications de schéma effectuées par maj-struct-201307.sql
correspondent au à la r1739 dans le dépôt de cel/)
 
753 4009 d 20 h raphael /trunk/scripts/modules/cel/ cel: table cel_reference, typo dans la définition d'INDEX  
752 4009 d 20 h raphael /trunk/scripts/modules/cel/ cel: ajout de scripts de MAJ/cleanups de cel_obs: version initiale du Referonosaure et version initiale du Redempteur  
751 4011 d 4 h alex /trunk/services/modules/0.1/moissonnage/cartes/ Correction bug sur requete SQL  
750 4011 d 4 h alex /trunk/services/modules/0.1/moissonnage/cartes/  
749 4011 d 4 h alex /trunk/services/configurations/  
748 4011 d 4 h alex /trunk/services/presentations/images/cartes/ Mise a jour de la ressource SVG contenant le fond cartographique de la France pour le web service d'eflore de moissonnage  
747 4011 d 4 h alex /trunk/services/modules/0.1/moissonnage/ Mise à jour du web service de moissonnage generant les cartes SVG de repartition des observations pour e-Flore.
Ajout de commentaires dans les classes
 
746 4011 d 22 h alex /trunk/services/configurations/ Correction du parametre projetsDispo  
745 4011 d 22 h alex /trunk/services/configurations/ Mise à jour des fichiers de configuration pour les web services nasa-srtm et moissonnage  
744 4011 d 22 h alex /trunk/services/presentations/ Suppression donnees SRTM de la NASA  
743 4011 d 22 h alex /trunk/services/modules/0.1/nasa-srtm/ Mise à jour de la classe altitude : correction des paramètres acceptés par le web service et ajout d'un cartouche de commentaire en début de code.  
742 4011 d 23 h alex /trunk/services/modules/0.1/ Renommage service altitude. Le nouveau nom du web service est maintenant nasa-srtm (pour être plus en adéquation avec les ressources utilisées que sont les fichiers HGT du modèle SRTM de la NASA)  
741 4012 d 1 h raphael /trunk/scripts/modules/cel/ cel: scripts, ajout de champs baseflor/baseveg à l'intégration dans cel_references
et déplacement des notes et commentaires annexes dans le fichier "A_LIRE"
 
740 4015 d 23 h raphael /trunk/services/modules/0.1/bdtfx/ service noms: debug ajout de __FILE__ comme commentaire suffixé aux requêtes
afin de faciliter l'identification des appels en cas d'activation du general_log MySQL.
 
739 4016 d 1 h raphael /trunk/scripts/modules/cel/ cel: scripts, transformation du SQL en SH pour permettre un choix de nom de base/table facilité  
738 4016 d 2 h raphael /trunk/scripts/modules/cel/ cel: amélioration du script de génération de `cel_references`  
737 4016 d 21 h raphael /trunk/scripts/modules/cel/ cel: version initiale du script de génération de `cel_references`  
736 4018 d 5 h alex /trunk/services/ Ajout d'un nouveau web service altitude qui calcule l'altitude pour un point dont on passe les coordonnees longitude/latitude dans les parametres de l'URL.
Dans le dossier présentations, ajout d'un dossier SRTM contenant les fichiers MNT par secteurs de 1*1 degré, décrivant l'altitude d'échantillons de points situés tous les 90 m
 
735 4025 d 3 h alex /trunk/services/modules/0.1/moissonnage/cartes/ Correction bug sur les requêtes de récupération des stations pour un genre donné  
734 4030 d 0 h raphael /trunk/services/modules/0.1/nvjfl/ nom-vernaculaires: support de requêtes multi-critères pour NVJFL, côté client: ACTIVATION
Ce commit active la recherche d'ontologie par multi-critères
pour le web-service de nom vernaculaire JFL.
Un define(), nécessaire mais malheureusement précédemment omis, a été rajouté.
 
733 4030 d 0 h raphael /trunk/services/modules/0.1/commun/ ontologies: support de requêtes multi-critères pour les ontologies (partie 2/2).
Lorsque des ontologies sont demandées, celles-ci peuvent désormais être regroupées
au sein d'une même requête.
La modification, portée à Commun/Ontologie.php affecte donc les web-services n'ayant *pas*
redéfini leur classe d'accès aux ontologies, c'est à dire (au 28/06/2013):
* nvjfl
* bdnt

Exemple:
Avant, 3 requêtes:
/service:eflore:0.1/nvjfl/ontologies/numStatut:1
/service:eflore:0.1/nvjfl/ontologies/numStatut:2
/service:eflore:0.1/nvjfl/ontologies/genreNombre:10

Après, 1 requête:
/service:eflore:0.1/nvjfl/ontologies/numStatus:1,numStatus:2,genreNombre:10

Dans le seul cas d'une requête multi-critères le format de retour du web-service
a été modifié: Un ensemble de clef-valeurs est retourné dans lequel chaque clef
représente le nom d'un des critères demandés.
Si un critère ne correspond à rien dans la BDD, celui-ci est absent de l'ensemble retourné.


$ ddiff \
<(GET "http://eflore/$i"|json_pp) \
<(GET "http://www.tela-botanica.org/$i"|json_pp)

# service:eflore:0.1/nvjfl/noms-vernaculaires/attributions?masque.nt=1382&masque.lg=fra&retour.champs=conseil_emploi
# 2 appels d'ontologies nvjfl, résultat identique

# service:eflore:0.1/bdtxa/taxons/13517/relations/inferieurs
# 1 appel d'ontologie bdnt/nom, résultat identique

$ diff \
<(GET http://eflore/service:eflore:0.1/bdnt/ontologies/rangTaxo:70|json_pp) \
<(GET http://eflore/service:eflore:0.1/bdnt/ontologies/rangTaxo:70,rangTaxo:-1|json_pp) \
|grep -v rangTaxo:70
# même résultat (-1 n'existe pas)

Le comparatif suivant provient de l'étude de la requête suivante,
représentative d'une recherche de nom commun (cf: Cel/export XLS):
"/service:eflore:0.1/nvjfl/noms-vernaculaires/attributions?masque.nt=1382&masque.lg=fra&retour.champs=conseil_emploi"

Avant Après
Requêtes HTTP 3 2
Connexions SQL 4 3
SELECT 15 10
Temps sur 300 (*) 1m36 1m30

(*) $ time \
mysql -N tb_eflore<<<"SELECT num_taxonomique FROM bdtfx_v1_01 WHERE num_nom = num_nom_retenu ORDER BY ORD(SUBSTRING(nom_sci, 4, 1)) LIMIT 300;" | \
xargs -i -t -n 1 curl -so /dev/null "http://eflore/service:eflore:0.1/nvjfl/noms-vernaculaires/attributions?masque.nt={}&masque.lg=fra&retour.champs=conseil_emploi";

Le faible différentiel de temps observable s'explique partiellement par le fait que toutes les recherches de nom vernaculaire
n'aboutissent pas systématiquement à l'émission de plusieurs requêtes d'ontologie.
Le différentiel n'en reste pas moins décevant.