1198 |
jpm |
1 |
<?php
|
|
|
2 |
// declare(encoding='UTF-8');
|
|
|
3 |
/**
|
|
|
4 |
* Script de migration des Observations de la version 1 de la base de données du CEL à la v2.
|
1224 |
jpm |
5 |
* Utilisation : /opt/lampp/bin/php cli.php MigrationObs
|
1198 |
jpm |
6 |
*
|
|
|
7 |
* @category php 5.2
|
|
|
8 |
* @package Cel/Scripts
|
1224 |
jpm |
9 |
* @author Aurelien PERONNET <aurelien@tela-botanica.org>
|
1198 |
jpm |
10 |
* @author Jean-Pascal MILCENT <jpm@tela-botanica.org>
|
|
|
11 |
* @copyright Copyright (c) 2012, Tela Botanica (accueil@tela-botanica.org)
|
1224 |
jpm |
12 |
* @license http://www.cecill.info/licences/Licence_CeCILL_V2-fr.txt Licence CECILL
|
|
|
13 |
* @license http://www.gnu.org/licenses/gpl.html Licence GNU-GPL
|
|
|
14 |
* @version $Id$
|
1198 |
jpm |
15 |
*/
|
1224 |
jpm |
16 |
class MigrationObs {
|
1184 |
jpm |
17 |
|
1189 |
jpm |
18 |
const truncate = true; //Doit on vider les tables de destination ?
|
|
|
19 |
const dry_run = false;
|
|
|
20 |
const PATTERN_LAT = '/^[+-]?(?:[1-9][0-9]|[0-9])(?:[.][0-9]+|)$/';
|
|
|
21 |
const PATTERN_LNG = '/^[+-]?(?:1[0-8][0-9]|[1-9][0-9]|[0-9])(?:[.][0-9]+|)$/';
|
1224 |
jpm |
22 |
|
|
|
23 |
private $bdd = null;
|
|
|
24 |
private $script = null;
|
1158 |
aurelien |
25 |
public static $bdd_cel_migration;
|
|
|
26 |
public static $bdd_utilisateurs;
|
1189 |
jpm |
27 |
private $communesOubliees = array();
|
|
|
28 |
private $tableau_utilisateurs = array();
|
|
|
29 |
private $tableau_mots_cles = array();
|
|
|
30 |
private $tableau_zones_geo = array();
|
1184 |
jpm |
31 |
|
1149 |
gduche |
32 |
/** Tableau associatif permettant de stocker l'avancement dans une boucle.
|
|
|
33 |
* La clé est un md5 du message à afficher au démarrage de la boucle.
|
|
|
34 |
* @var array
|
|
|
35 |
*/
|
|
|
36 |
private static $avancement = array();
|
1184 |
jpm |
37 |
|
1149 |
gduche |
38 |
private $tableau_nouveau_ancien = array(
|
|
|
39 |
'id_observation' => 'id',
|
|
|
40 |
'ordre' => 'ordre',
|
|
|
41 |
'ce_utilisateur' => 'traiterIdentifiantUtilisateur',
|
|
|
42 |
'prenom_utilisateur' => 'traiterPrenomUtilisateur',
|
|
|
43 |
'nom_utilisateur' => 'traiterNomUtilisateur',
|
1224 |
jpm |
44 |
'courriel_utilisateur' => 'traiterCourrielUtilisateur',
|
1149 |
gduche |
45 |
'nom_sel' => 'nom_sel',
|
|
|
46 |
'nom_sel_nn' => 'num_nom_sel',
|
|
|
47 |
'nom_ret' => 'nom_ret',
|
|
|
48 |
'nom_ret_nn' => 'num_nom_ret',
|
|
|
49 |
'nt' => 'num_taxon',
|
|
|
50 |
'famille' => 'famille',
|
|
|
51 |
'nom_referentiel' => 'traiterReferentiel',
|
|
|
52 |
'ce_zone_geo' => 'traiterIdentifiantZoneGeo',
|
|
|
53 |
'zone_geo' => 'location',
|
|
|
54 |
'lieudit' => 'lieudit',
|
|
|
55 |
'station' => 'station',
|
|
|
56 |
'milieu' => 'milieu',
|
1189 |
jpm |
57 |
'latitude' => 'traiterLat',
|
|
|
58 |
'longitude' => 'traiterLng',
|
1186 |
jpm |
59 |
'geodatum' => 'traiterGeodatum',
|
1149 |
gduche |
60 |
'date_observation' => 'date_observation',
|
|
|
61 |
'mots_cles_texte' => 'traiterMotsClesTexte',
|
|
|
62 |
'commentaire' => 'commentaire',
|
|
|
63 |
'transmission' => 'transmission',
|
|
|
64 |
'date_creation' => 'date_creation',
|
|
|
65 |
'date_modification' => 'date_modification',
|
|
|
66 |
'date_transmission' => 'date_transmission'
|
|
|
67 |
);
|
1184 |
jpm |
68 |
|
1149 |
gduche |
69 |
private $tableau_ancien_nouveau = array(
|
|
|
70 |
'id' => 'id_observation',
|
|
|
71 |
'identifiant' => '',
|
|
|
72 |
'prenom_utilisateur' => 'prenom_utilisateur',
|
|
|
73 |
'nom_utilisateur' => 'nom_utilisateur',
|
|
|
74 |
'ordre' => 'ordre',
|
|
|
75 |
'nom_sel' => 'nom_sel',
|
|
|
76 |
'num_nom_sel' => 'nom_sel_nn',
|
|
|
77 |
'nom_ret' => 'nom_ret',
|
|
|
78 |
'num_nom_ret' => 'nom_ret_nn',
|
|
|
79 |
'num_taxon' => 'nt',
|
|
|
80 |
'famille' => 'famille',
|
|
|
81 |
'location' => '',
|
|
|
82 |
'id_location' => '',
|
|
|
83 |
'date_observation' => 'date_observation',
|
|
|
84 |
'lieu_dit' => 'lieudit',
|
|
|
85 |
'station' => 'station',
|
|
|
86 |
'milieu' => 'milieu',
|
|
|
87 |
'commentaire' => 'commentaire',
|
|
|
88 |
'transmission' => 'transmission',
|
|
|
89 |
'date_creation' => 'date_creation',
|
|
|
90 |
'date_modification' => 'date_modification',
|
|
|
91 |
'date_transmission' => 'date_transmission',
|
|
|
92 |
'mots_cles' => '',
|
|
|
93 |
'coord_x' => 'latitude',
|
|
|
94 |
'coord_y' => 'longitude',
|
|
|
95 |
'ref_geo' => 'geodatum'
|
|
|
96 |
);
|
1224 |
jpm |
97 |
|
|
|
98 |
public function __construct(Conteneur $conteneur) {
|
|
|
99 |
$bddMigration = $conteneur->getParametre('database_cel.database_migration');
|
|
|
100 |
if ($bddMigration == null || $bddMigration == '') {
|
|
|
101 |
echo 'Attention la variable de configuration database_migration dans la section database_cel, contenant la base de données d\'arrivée, doit être remplie '."\n";
|
|
|
102 |
exit;
|
|
|
103 |
}
|
|
|
104 |
$bddIdentification = $conteneur->getParametre('database_ident.database');
|
|
|
105 |
if ($bddIdentification == null || $bddIdentification == '') {
|
|
|
106 |
echo 'Attention la variable de configuration database dans la section database_ident, contenant la base de données utilisateurs, doit être remplie '."\n";
|
|
|
107 |
exit;
|
|
|
108 |
}
|
|
|
109 |
|
|
|
110 |
self::$bdd_cel_migration = $conteneur->getParametre('database_cel.database_migration');
|
|
|
111 |
self::$bdd_utilisateurs = $conteneur->getParametre('database_ident.database');
|
|
|
112 |
|
|
|
113 |
$this->bdd = $conteneur->getBdd();
|
|
|
114 |
$this->script = $conteneur->getScript();
|
|
|
115 |
}
|
1149 |
gduche |
116 |
|
1224 |
jpm |
117 |
/**
|
|
|
118 |
* Méthode appelée pour executer le script.
|
1149 |
gduche |
119 |
*/
|
1224 |
jpm |
120 |
public function executer($params) {
|
1149 |
gduche |
121 |
echo "--MIGRATION DES OBSERVATIONS --------------------------------------\n";
|
|
|
122 |
//1. TEMPORAIRE : vider les tables de destinations
|
|
|
123 |
if (self::truncate) {
|
1224 |
jpm |
124 |
echo "-------------------------------------------------------------------\n";
|
|
|
125 |
echo " ETAPE 0. Vider les tables ... \n";
|
|
|
126 |
echo "-------------------------------------------------------------------\n";
|
1189 |
jpm |
127 |
$nouvellesTables = array('cel_obs', 'cel_utilisateurs_infos', 'cel_zones_geo');
|
1149 |
gduche |
128 |
foreach ($nouvellesTables as $nomTable) {
|
|
|
129 |
echo 'Vider la table '.$nomTable.'...';
|
1158 |
aurelien |
130 |
$requeteTruncate = 'TRUNCATE TABLE '.self::$bdd_cel_migration.'.'.$nomTable;
|
1224 |
jpm |
131 |
$resultatTruncate = $this->bdd->executer($requeteTruncate);
|
1149 |
gduche |
132 |
echo "ok \n";
|
|
|
133 |
}
|
|
|
134 |
}
|
1184 |
jpm |
135 |
|
1224 |
jpm |
136 |
echo "-------------------------------------------------------------------\n";
|
|
|
137 |
echo " ETAPE 1. Paramétrage ... \n";
|
|
|
138 |
echo "-------------------------------------------------------------------\n";
|
1149 |
gduche |
139 |
$this->getUtilisateurs();
|
|
|
140 |
$this->getMotsCles();
|
1184 |
jpm |
141 |
|
1224 |
jpm |
142 |
echo "-------------------------------------------------------------------\n";
|
|
|
143 |
echo " ETAPE 2. Migration des utilisateurs ... \n";
|
|
|
144 |
echo "-------------------------------------------------------------------\n";
|
1200 |
jpm |
145 |
$this->migrerUtilisateurs();
|
1184 |
jpm |
146 |
|
1224 |
jpm |
147 |
echo "-------------------------------------------------------------------\n";
|
|
|
148 |
echo " ETAPE 3. Migration des zone géographiques ... \n";
|
|
|
149 |
echo "-------------------------------------------------------------------\n";
|
1149 |
gduche |
150 |
$this->migrerZonesGeo();
|
1184 |
jpm |
151 |
|
1224 |
jpm |
152 |
echo "-------------------------------------------------------------------\n";
|
|
|
153 |
echo " ETAPE 4. Migration des observations ... \n";
|
|
|
154 |
echo "-------------------------------------------------------------------\n";
|
1149 |
gduche |
155 |
$this->migrerObs();
|
1200 |
jpm |
156 |
$this->mettreANullPrenomNomVide();
|
1224 |
jpm |
157 |
$this->ordonnerObs();
|
1149 |
gduche |
158 |
}
|
1184 |
jpm |
159 |
|
1224 |
jpm |
160 |
private function executerRequeteSimple($requete) {
|
1149 |
gduche |
161 |
// Fonction de commodité pour afficher les requetes au lieu de les executer
|
|
|
162 |
if (self::dry_run) {
|
1184 |
jpm |
163 |
echo str_replace('),','),'."\n", $requete);
|
1149 |
gduche |
164 |
return true;
|
|
|
165 |
} else {
|
1224 |
jpm |
166 |
return $this->bdd->executer($requete);
|
1149 |
gduche |
167 |
}
|
|
|
168 |
}
|
1184 |
jpm |
169 |
|
1149 |
gduche |
170 |
private function getUtilisateurs() {
|
1224 |
jpm |
171 |
echo "SELECTION DES UTILISATEURS\n";
|
1184 |
jpm |
172 |
|
1189 |
jpm |
173 |
$requete = 'SELECT DISTINCT u_id AS id, u_mail AS mail, u_name AS nom, u_surname AS prenom, u_passwd AS pass '.
|
|
|
174 |
'FROM cel_inventory INNER JOIN '.self::$bdd_utilisateurs.'.annuaire_tela ON (u_mail = identifiant) ';
|
1224 |
jpm |
175 |
$tableau_utilisateurs = $this->bdd->requeter($requete);
|
1184 |
jpm |
176 |
|
1149 |
gduche |
177 |
foreach( $tableau_utilisateurs as &$utilisateur) {
|
|
|
178 |
$this->tableau_utilisateurs[$utilisateur['mail']] = $utilisateur;
|
|
|
179 |
}
|
1184 |
jpm |
180 |
|
1224 |
jpm |
181 |
echo sizeof($this->tableau_utilisateurs)." utilisateurs sélectionnés\n";
|
1149 |
gduche |
182 |
}
|
1184 |
jpm |
183 |
|
1149 |
gduche |
184 |
private function getMotsCles() {
|
1224 |
jpm |
185 |
echo "SELECTION DES MOTS-CLES \n";
|
1149 |
gduche |
186 |
|
1184 |
jpm |
187 |
$requete = 'SELECT cmc_id_proprietaire as id_utilisateur, cmc_id_mot_cle_utilisateur as id_mot_cle, '.
|
|
|
188 |
'cmc_mot_cle as mot_cle '.
|
|
|
189 |
'FROM cel_mots_cles_obs ';
|
1224 |
jpm |
190 |
$tableau_mots_cles = $this->bdd->requeter($requete);
|
1184 |
jpm |
191 |
|
1149 |
gduche |
192 |
foreach( $tableau_mots_cles as &$mot_cle) {
|
|
|
193 |
$this->tableau_mots_cles[$mot_cle['id_utilisateur']][$mot_cle['id_mot_cle']] = $mot_cle;
|
|
|
194 |
}
|
1184 |
jpm |
195 |
|
1224 |
jpm |
196 |
echo sizeof($this->tableau_mots_cles)." mots-clés sélectionnés\n";
|
1149 |
gduche |
197 |
}
|
1184 |
jpm |
198 |
|
1149 |
gduche |
199 |
private function migrerUtilisateurs() {
|
1189 |
jpm |
200 |
$requete = 'INSERT INTO '.self::$bdd_cel_migration.'.cel_utilisateurs_infos '.
|
|
|
201 |
'(id_utilisateur) '.
|
|
|
202 |
'VALUES ';
|
1184 |
jpm |
203 |
|
1189 |
jpm |
204 |
$sous_requete = array();
|
|
|
205 |
foreach ($this->tableau_utilisateurs as $id => &$utilisateur) {
|
1224 |
jpm |
206 |
$sous_requete[] = '('.$this->bdd->proteger($utilisateur['id']).')';
|
1189 |
jpm |
207 |
}
|
|
|
208 |
$requete .= implode(',', $sous_requete);
|
1184 |
jpm |
209 |
|
1189 |
jpm |
210 |
$migration_utilisateurs = $this->executerRequeteSimple($requete);
|
|
|
211 |
|
|
|
212 |
if ($migration_utilisateurs) {
|
|
|
213 |
echo "Migration utilisateurs : ".count($sous_requete);
|
|
|
214 |
} else {
|
|
|
215 |
exit('Erreur lors de la migration des utilisateurs '."\n");
|
1149 |
gduche |
216 |
}
|
1224 |
jpm |
217 |
echo "\n";
|
1149 |
gduche |
218 |
}
|
1184 |
jpm |
219 |
|
1149 |
gduche |
220 |
private function migrerZonesGeo() {
|
|
|
221 |
$pas = 5000;
|
1184 |
jpm |
222 |
|
1149 |
gduche |
223 |
//SELECTIONNER LE NOMBRE DE ZONE GEO
|
|
|
224 |
$requete_nombreZonesGeo = 'SELECT count(*) as nb FROM locations';
|
1224 |
jpm |
225 |
$resultatNbZonesGeo = $this->bdd->requeter($requete_nombreZonesGeo, Bdd::SQL_RETOUR_COLONNE);
|
|
|
226 |
$nbZones = (int) $resultatNbZonesGeo;
|
1184 |
jpm |
227 |
|
1149 |
gduche |
228 |
$nbTotal = 0;
|
|
|
229 |
for($i = 0; $i <= $nbZones ; $i += $pas) {
|
1184 |
jpm |
230 |
|
1149 |
gduche |
231 |
$requete_selection_zones_geo = 'SELECT * FROM locations LIMIT '.$i.', '.$pas;
|
1184 |
jpm |
232 |
|
1224 |
jpm |
233 |
$zones_geo = $this->bdd->requeter($requete_selection_zones_geo);
|
1184 |
jpm |
234 |
|
1158 |
aurelien |
235 |
$requete_insertion_nouvelles_zones_geo = 'INSERT INTO '.self::$bdd_cel_migration.'.cel_zones_geo '.
|
1149 |
gduche |
236 |
'(id_zone_geo, code, nom, utm_secteur, utm_x, utm_y, wgs84_latitude, wgs84_longitude, date_modification) '.
|
|
|
237 |
'VALUES ';
|
1184 |
jpm |
238 |
|
1149 |
gduche |
239 |
$sous_requete_insertion_valeurs = '';
|
1184 |
jpm |
240 |
|
|
|
241 |
if(count($zones_geo) > 0) {
|
1149 |
gduche |
242 |
foreach($zones_geo as $zone_geo) {
|
1184 |
jpm |
243 |
|
1149 |
gduche |
244 |
$zone_geo['nouveau_code_geo'] = 'INSEE-C:'.$zone_geo['insee_code'];
|
|
|
245 |
$lat_long = $this->convertirUtmVersLatLong($zone_geo['x_utm'],$zone_geo['y_utm'],$zone_geo['sector']);
|
1184 |
jpm |
246 |
|
1149 |
gduche |
247 |
$indice_tableau_localites = $this->construireIndiceTableauLocalites($zone_geo['name'], $zone_geo['insee_code']);
|
|
|
248 |
$this->tableau_zones_geo[$indice_tableau_localites] = $zone_geo;
|
1184 |
jpm |
249 |
|
1224 |
jpm |
250 |
$sous_requete_insertion_valeurs .= '('.$this->bdd->proteger($zone_geo['nouveau_code_geo']).','.
|
|
|
251 |
$this->bdd->proteger($zone_geo['insee_code']).','.
|
|
|
252 |
$this->bdd->proteger($zone_geo['name']).','.
|
|
|
253 |
$this->bdd->proteger($zone_geo['sector']).','.
|
|
|
254 |
$this->bdd->proteger($zone_geo['x_utm']).','.
|
|
|
255 |
$this->bdd->proteger($zone_geo['y_utm']).','.
|
|
|
256 |
$this->bdd->proteger($lat_long['lat']).','.
|
|
|
257 |
$this->bdd->proteger($lat_long['long']).','.
|
|
|
258 |
$this->bdd->proteger($zone_geo['update_date']).
|
|
|
259 |
'),';
|
1149 |
gduche |
260 |
}
|
1184 |
jpm |
261 |
|
1149 |
gduche |
262 |
$sous_requete_insertion_valeurs = rtrim($sous_requete_insertion_valeurs,',');
|
1184 |
jpm |
263 |
|
1149 |
gduche |
264 |
$requete_insertion_nouvelles_zones_geo .= $sous_requete_insertion_valeurs;
|
1184 |
jpm |
265 |
|
1149 |
gduche |
266 |
$migration_zones_geo = $this->executerRequeteSimple($requete_insertion_nouvelles_zones_geo);
|
|
|
267 |
} else {
|
|
|
268 |
echo 'Fin de migration des zones géo '."\n";
|
1184 |
jpm |
269 |
return;
|
1149 |
gduche |
270 |
}
|
1184 |
jpm |
271 |
|
1149 |
gduche |
272 |
if ($migration_zones_geo) {
|
1184 |
jpm |
273 |
$nbTotal ++;
|
1224 |
jpm |
274 |
$this->script->afficherAvancement('Migration des zones (par '.$pas.')', $nbTotal);
|
1149 |
gduche |
275 |
} else {
|
|
|
276 |
exit('Erreur lors de la migration des zones géo '.$i.' à '.($i+$pas)."\n");
|
|
|
277 |
}
|
|
|
278 |
}
|
1224 |
jpm |
279 |
echo "\n";
|
1149 |
gduche |
280 |
}
|
1184 |
jpm |
281 |
|
1149 |
gduche |
282 |
private function convertirUtmVersLatLong($x, $y, $sector) {
|
|
|
283 |
$lat_long = array();
|
1184 |
jpm |
284 |
|
1149 |
gduche |
285 |
$convertisseur = new gPoint();
|
|
|
286 |
$convertisseur->setUTM($x, $y, $sector);
|
|
|
287 |
$convertisseur->convertTMtoLL();
|
|
|
288 |
$lat_long['lat'] = str_replace(',','.',$convertisseur->Lat());
|
|
|
289 |
$lat_long['long'] = str_replace(',','.',$convertisseur->Long());
|
1184 |
jpm |
290 |
|
1149 |
gduche |
291 |
return $lat_long;
|
|
|
292 |
}
|
1184 |
jpm |
293 |
|
1149 |
gduche |
294 |
private function migrerObs() {
|
|
|
295 |
$debut = 0;
|
|
|
296 |
$pas = 1000;
|
|
|
297 |
$nbTotal = 0;
|
1184 |
jpm |
298 |
|
1149 |
gduche |
299 |
//Selectionner le nombre d'observations
|
|
|
300 |
$requeteNbObs = "SELECT COUNT(*) as nb FROM cel_inventory";
|
1224 |
jpm |
301 |
$fin = $this->bdd->requeter($requeteNbObs, Bdd::SQL_RETOUR_COLONNE);
|
1184 |
jpm |
302 |
|
1149 |
gduche |
303 |
for ($i = $debut; $i < $fin ; $i += $pas) {
|
1224 |
jpm |
304 |
$requete_selection_obs = 'SELECT * '.
|
|
|
305 |
'FROM cel_inventory '.
|
|
|
306 |
'ORDER BY identifiant '.
|
|
|
307 |
'LIMIT '.$i.','.$pas;
|
|
|
308 |
$observations = $this->bdd->requeter($requete_selection_obs);
|
1184 |
jpm |
309 |
|
1158 |
aurelien |
310 |
$requete_insertion_observations = 'INSERT IGNORE INTO '.self::$bdd_cel_migration.'.cel_obs (';
|
1184 |
jpm |
311 |
|
1149 |
gduche |
312 |
foreach ($this->tableau_nouveau_ancien as $nouveau_champ => $ancien_champ) {
|
|
|
313 |
$requete_insertion_observations .= $nouveau_champ.',';
|
1184 |
jpm |
314 |
}
|
|
|
315 |
|
1149 |
gduche |
316 |
$requete_insertion_observations = rtrim($requete_insertion_observations, ',');
|
|
|
317 |
$requete_insertion_observations = $requete_insertion_observations.') VALUES ';
|
1184 |
jpm |
318 |
|
|
|
319 |
if (count($observations) > 0) {
|
1149 |
gduche |
320 |
foreach($observations as $observation) {
|
|
|
321 |
$nouvelle_observation = $this->traiterLigneObservation($observation);
|
1184 |
jpm |
322 |
|
1189 |
jpm |
323 |
$nouvelle_observation = array_map(array($this, 'protegerSiNonNull'), $nouvelle_observation);
|
|
|
324 |
$requete_insertion_observations .= '('.join(',', array_values($nouvelle_observation)).'),';
|
1149 |
gduche |
325 |
}
|
1184 |
jpm |
326 |
|
1149 |
gduche |
327 |
$requete_insertion_observations = rtrim($requete_insertion_observations, ',');
|
1184 |
jpm |
328 |
|
1149 |
gduche |
329 |
$migration_observations = $this->executerRequeteSimple($requete_insertion_observations);
|
|
|
330 |
} else {
|
1224 |
jpm |
331 |
echo "Fin de migration des observations\n";
|
1184 |
jpm |
332 |
return;
|
1149 |
gduche |
333 |
}
|
1184 |
jpm |
334 |
|
1149 |
gduche |
335 |
if ($migration_observations) {
|
1184 |
jpm |
336 |
$nbTotal ++;
|
1224 |
jpm |
337 |
$this->script->afficherAvancement('Migration des observations (par '.$pas.')', $nbTotal);
|
1149 |
gduche |
338 |
} else {
|
|
|
339 |
exit('Erreur lors de la migration des observation de '.$i.' à '.($i+$pas)."\n");
|
|
|
340 |
}
|
1224 |
jpm |
341 |
}
|
|
|
342 |
echo "\n";
|
1149 |
gduche |
343 |
if (sizeof($this->communesOubliees) > 0) {
|
1224 |
jpm |
344 |
echo "xxxxxxxxx Communes ignorées : ".sizeof($this->communesOubliees)." xxxxxxxxx \n";
|
1149 |
gduche |
345 |
}
|
|
|
346 |
}
|
1184 |
jpm |
347 |
|
|
|
348 |
private function ordonnerObs() {
|
1186 |
jpm |
349 |
$requete = 'ALTER TABLE '.self::$bdd_cel_migration.'.cel_obs ORDER BY id_observation';
|
1184 |
jpm |
350 |
$this->executerRequeteSimple($requete);
|
|
|
351 |
}
|
|
|
352 |
|
1149 |
gduche |
353 |
private function traiterLigneObservation($obs) {
|
|
|
354 |
$nouvelle_obs = array();
|
1184 |
jpm |
355 |
foreach($this->tableau_nouveau_ancien as $nouveau_champ_obs => $ancien_champ_obs) {
|
1149 |
gduche |
356 |
if ($this->estUnChampATraiter($ancien_champ_obs)) {
|
1186 |
jpm |
357 |
if (method_exists($this, $ancien_champ_obs)) {
|
1149 |
gduche |
358 |
$nouvelle_obs[$nouveau_champ_obs] = $this->$ancien_champ_obs($obs);
|
|
|
359 |
} else {
|
|
|
360 |
$nouvelle_obs[$nouveau_champ_obs] = '';
|
|
|
361 |
}
|
|
|
362 |
} else {
|
1186 |
jpm |
363 |
if ($obs[$ancien_champ_obs] == '000null' || $obs[$ancien_champ_obs] == 'null' || trim($obs[$ancien_champ_obs]) == '') {
|
1158 |
aurelien |
364 |
$obs[$ancien_champ_obs] = 'NULL';
|
|
|
365 |
}
|
1184 |
jpm |
366 |
|
1186 |
jpm |
367 |
if (($ancien_champ_obs == 'coord_x' || $ancien_champ_obs == 'coord_y') && ($obs[$ancien_champ_obs] == '0' || $obs[$ancien_champ_obs] == 0)) {
|
1158 |
aurelien |
368 |
$obs[$ancien_champ_obs] = 'NULL';
|
|
|
369 |
}
|
1184 |
jpm |
370 |
|
1149 |
gduche |
371 |
$nouvelle_obs[$nouveau_champ_obs] = $obs[$ancien_champ_obs];
|
|
|
372 |
}
|
|
|
373 |
}
|
|
|
374 |
return $nouvelle_obs;
|
|
|
375 |
}
|
1184 |
jpm |
376 |
|
1158 |
aurelien |
377 |
private function protegerSiNonNull($valeur) {
|
1186 |
jpm |
378 |
if ($valeur != 'NULL') {
|
1224 |
jpm |
379 |
$valeur = $this->bdd->proteger($valeur);
|
1158 |
aurelien |
380 |
}
|
|
|
381 |
return $valeur;
|
|
|
382 |
}
|
1184 |
jpm |
383 |
|
1149 |
gduche |
384 |
private function estUnChampATraiter($champ) {
|
|
|
385 |
return strpos($champ,'traiter') !== false;
|
|
|
386 |
}
|
1184 |
jpm |
387 |
|
1149 |
gduche |
388 |
private function traiterReferentiel($observation) {
|
1186 |
jpm |
389 |
$retour = 'NULL';
|
|
|
390 |
if ($observation['num_nom_sel'] != '' && $observation['num_nom_sel'] != '0') {
|
|
|
391 |
$retour = 'bdnff:4.02';
|
|
|
392 |
}
|
|
|
393 |
return $retour;
|
1149 |
gduche |
394 |
}
|
1184 |
jpm |
395 |
|
1189 |
jpm |
396 |
private function traiterLat(&$observation) {
|
1224 |
jpm |
397 |
if ($this->bdd->etreNull($observation['coord_x'])) {
|
1189 |
jpm |
398 |
$observation['coord_x'] = 'NULL';
|
|
|
399 |
} else if (preg_match(self::PATTERN_LAT, $observation['coord_x']) == false) {
|
|
|
400 |
$latNote = 'Latitude éronnée : '.$observation['coord_x'];
|
1224 |
jpm |
401 |
if ($this->bdd->etreNull($observation['commentaire'])) {
|
1189 |
jpm |
402 |
$observation['commentaire'] = $latNote;
|
|
|
403 |
} else {
|
|
|
404 |
$observation['commentaire'] .= "\n".$latNote;
|
|
|
405 |
}
|
|
|
406 |
$observation['coord_x'] = 'NULL';
|
|
|
407 |
}
|
|
|
408 |
$retour = $observation['coord_x'];
|
|
|
409 |
return $retour;
|
|
|
410 |
}
|
|
|
411 |
|
|
|
412 |
private function traiterLng(&$observation) {
|
1224 |
jpm |
413 |
if ($this->bdd->etreNull($observation['coord_y'])) {
|
1189 |
jpm |
414 |
$observation['coord_y'] = 'NULL';
|
|
|
415 |
} else if (preg_match(self::PATTERN_LNG, $observation['coord_y']) == false) {
|
|
|
416 |
$lngNote = 'Longitude éronnée : '.$observation['coord_y'];
|
1224 |
jpm |
417 |
if ($this->bdd->etreNull($observation['commentaire'])) {
|
1189 |
jpm |
418 |
$observation['commentaire'] = $lngNote;
|
|
|
419 |
} else {
|
|
|
420 |
$observation['commentaire'] .= "\n".$lngNote;
|
|
|
421 |
}
|
|
|
422 |
$observation['coord_y'] = 'NULL';
|
|
|
423 |
}
|
|
|
424 |
$retour = $observation['coord_y'];
|
|
|
425 |
return $retour;
|
|
|
426 |
}
|
|
|
427 |
|
1186 |
jpm |
428 |
private function traiterGeodatum($observation) {
|
|
|
429 |
$retour = 'NULL';
|
|
|
430 |
if ($observation['coord_x'] != 'NULL' && $observation['coord_y'] != 'NULL') {
|
|
|
431 |
$retour = 'WGS84';
|
|
|
432 |
}
|
|
|
433 |
return $retour;
|
|
|
434 |
}
|
|
|
435 |
|
1149 |
gduche |
436 |
private function traiterMotsClesTexte($ligne_observation) {
|
|
|
437 |
$mail_observation = $ligne_observation['identifiant'];
|
1184 |
jpm |
438 |
$retour = $ligne_observation['mots_cles'];
|
1149 |
gduche |
439 |
if (isset($this->tableau_mots_cles[$mail_observation])) {
|
|
|
440 |
$mots_cles_tableau = $this->parserMotsCles($mail_observation, $ligne_observation['mots_cles'], ';');
|
1186 |
jpm |
441 |
$retour = join(',', $mots_cles_tableau);
|
|
|
442 |
$retour = ltrim($retour, ',,') ;
|
1149 |
gduche |
443 |
}
|
1184 |
jpm |
444 |
|
1149 |
gduche |
445 |
return $retour;
|
1184 |
jpm |
446 |
}
|
|
|
447 |
|
1149 |
gduche |
448 |
private function parserMotsCles($utilisateur, $mot_cles, $separateur = ',') {
|
|
|
449 |
$tableau_mots_cles = explode($separateur,$mot_cles);
|
|
|
450 |
$tableau_mots_cles_formates = array();
|
1184 |
jpm |
451 |
|
1186 |
jpm |
452 |
foreach ($tableau_mots_cles as $mot_cle) {
|
1184 |
jpm |
453 |
|
1149 |
gduche |
454 |
$mot_cle = str_replace($separateur.$separateur,'',$mot_cle);
|
|
|
455 |
$mot_cle = str_replace('null','',$mot_cle);
|
1184 |
jpm |
456 |
|
1149 |
gduche |
457 |
if ($this->estUnIdentifiantMotCle($mot_cle)) {
|
1184 |
jpm |
458 |
|
1149 |
gduche |
459 |
// certains mots clés mal formatés contiennent des virgules
|
|
|
460 |
if (strpos($mot_cle,',') !== false) {
|
|
|
461 |
$tab_mot_cle_mal_formate = explode(',',$mot_cle);
|
1184 |
jpm |
462 |
|
1149 |
gduche |
463 |
foreach ($tab_mot_cle_mal_formate as $mot_cle_mal_formate) {
|
|
|
464 |
if ($this->estUnIdentifiantMotCle($mot_cle_mal_formate)) {
|
|
|
465 |
$tableau_mots_cles_formates[$mot_cle_mal_formate] = $this->tableau_mots_cles[$utilisateur][$mot_cle_mal_formate]['mot_cle'];
|
|
|
466 |
}
|
1184 |
jpm |
467 |
}
|
1149 |
gduche |
468 |
} else {
|
|
|
469 |
// on met le mot clé dans sa propre case afin d'éviter
|
1184 |
jpm |
470 |
// facilement les doublons provoqués par de mauvais formatages
|
|
|
471 |
if (isset($this->tableau_mots_cles[$utilisateur][$mot_cle]) && trim($this->tableau_mots_cles[$utilisateur][$mot_cle]['mot_cle']) != '') {
|
1149 |
gduche |
472 |
$tableau_mots_cles_formates[$mot_cle] = $this->tableau_mots_cles[$utilisateur][$mot_cle]['mot_cle'];
|
|
|
473 |
}
|
|
|
474 |
}
|
|
|
475 |
|
|
|
476 |
}
|
|
|
477 |
}
|
1184 |
jpm |
478 |
|
1149 |
gduche |
479 |
return $tableau_mots_cles_formates;
|
|
|
480 |
}
|
1184 |
jpm |
481 |
|
1149 |
gduche |
482 |
private function estUnIdentifiantMotCle($chaine) {
|
|
|
483 |
return trim($chaine) != '' && preg_match('/[0-9A-Z]+\.[0-9A-Z]+/i', $chaine) ;
|
|
|
484 |
}
|
1184 |
jpm |
485 |
|
1149 |
gduche |
486 |
private function traiterIdentifiantUtilisateur($ligne_observation) {
|
|
|
487 |
$mail_observation = $ligne_observation['identifiant'];
|
1181 |
aurelien |
488 |
$retour = $this->renvoyerIdPourMigration($mail_observation);
|
1149 |
gduche |
489 |
return $retour;
|
|
|
490 |
}
|
1184 |
jpm |
491 |
|
1149 |
gduche |
492 |
private function traiterPrenomUtilisateur($ligne_observation) {
|
|
|
493 |
$mail_observation = $ligne_observation['identifiant'];
|
1184 |
jpm |
494 |
|
|
|
495 |
$retour = '';
|
1149 |
gduche |
496 |
if (isset($this->tableau_utilisateurs[$mail_observation])) {
|
1184 |
jpm |
497 |
$prenom = $this->tableau_utilisateurs[$mail_observation]['prenom'];
|
|
|
498 |
$retour = self::formaterMotPremiereLettreChaqueMotEnMajuscule($prenom);
|
1149 |
gduche |
499 |
}
|
|
|
500 |
return $retour;
|
|
|
501 |
}
|
1184 |
jpm |
502 |
|
1149 |
gduche |
503 |
private function traiterNomUtilisateur($ligne_observation) {
|
|
|
504 |
$mail_observation = $ligne_observation['identifiant'];
|
1184 |
jpm |
505 |
|
1224 |
jpm |
506 |
$retour = 'NULL';
|
1149 |
gduche |
507 |
if (isset($this->tableau_utilisateurs[$mail_observation])) {
|
1184 |
jpm |
508 |
$nom = $this->tableau_utilisateurs[$mail_observation]['nom'];
|
|
|
509 |
$retour = self::formaterMotEnMajuscule($nom);
|
1149 |
gduche |
510 |
}
|
|
|
511 |
return $retour;
|
|
|
512 |
}
|
1224 |
jpm |
513 |
|
|
|
514 |
private function traiterCourrielUtilisateur($observation) {
|
|
|
515 |
$courriel = $observation['identifiant'];
|
|
|
516 |
|
|
|
517 |
$retour = 'NULL';
|
|
|
518 |
if ($this->mailValide($courriel)) {
|
|
|
519 |
$retour = $courriel;
|
|
|
520 |
}
|
|
|
521 |
return $retour;
|
|
|
522 |
}
|
|
|
523 |
|
1184 |
jpm |
524 |
|
|
|
525 |
public static function formaterMotPremiereLettreChaqueMotEnMajuscule($chaine, $encodage= 'UTF-8') {
|
|
|
526 |
$chaine = str_replace('-', ' - ', $chaine);
|
|
|
527 |
$chaine = mb_strtolower($chaine, $encodage);
|
|
|
528 |
$chaine = mb_convert_case($chaine, MB_CASE_TITLE, $encodage);
|
|
|
529 |
$chaine = str_replace(' - ', '-', $chaine);
|
|
|
530 |
return $chaine;
|
|
|
531 |
}
|
|
|
532 |
|
|
|
533 |
public static function formaterMotEnMajuscule($chaine, $encodage= 'UTF-8') {
|
|
|
534 |
return mb_convert_case($chaine, MB_CASE_UPPER, $encodage);
|
|
|
535 |
}
|
|
|
536 |
|
1149 |
gduche |
537 |
private function traiterZoneGeo($ligne_observation) {
|
1184 |
jpm |
538 |
|
1149 |
gduche |
539 |
$zone_geo = $ligne_observation['location'];
|
1184 |
jpm |
540 |
|
|
|
541 |
if ($ligne_observation['id_location'] != null && !is_numeric($ligne_observation['id_location']) && $ligne_observation['id_location'] != '000null') {
|
1149 |
gduche |
542 |
$id_zone_geo_ancienne = $ligne_observation['id_location'];
|
1184 |
jpm |
543 |
if ($zone_geo != '') {
|
1149 |
gduche |
544 |
$id_zone_geo_ancienne = '('.$id_zone_geo_ancienne.')';
|
|
|
545 |
}
|
1184 |
jpm |
546 |
|
1149 |
gduche |
547 |
$zone_geo .= $id_zone_geo_ancienne;
|
1184 |
jpm |
548 |
} else if ($ligne_observation['location'] == null || $ligne_observation['location'] == "" || $ligne_observation['location'] == "000null") {
|
|
|
549 |
|
|
|
550 |
if ($ligne_observation['id_location'] != '' && $ligne_observation['id_location'] != '000null') {
|
1158 |
aurelien |
551 |
$id_zone_geo_ancienne = $ligne_observation['id_location'];
|
|
|
552 |
$id_zone_geo_ancienne = $id_zone_geo_ancienne;
|
|
|
553 |
$zone_geo = $id_zone_geo_ancienne;
|
|
|
554 |
} else {
|
|
|
555 |
$zones_geo = 'NULL';
|
|
|
556 |
}
|
1149 |
gduche |
557 |
}
|
1184 |
jpm |
558 |
|
1149 |
gduche |
559 |
return $zone_geo;
|
|
|
560 |
}
|
1184 |
jpm |
561 |
|
1149 |
gduche |
562 |
private function traiterIdentifiantZoneGeo($ligne_observation) {
|
|
|
563 |
$id_zone_geo = '';
|
1184 |
jpm |
564 |
|
|
|
565 |
if ($ligne_observation['id_location'] != '' && $ligne_observation['id_location'] != '000null') {
|
1149 |
gduche |
566 |
$indice = $this->construireIndiceTableauLocalites($ligne_observation['location'], $ligne_observation['id_location']);
|
1184 |
jpm |
567 |
if (isset($this->tableau_zones_geo[$indice])) {
|
1149 |
gduche |
568 |
$id_zone_geo = $this->tableau_zones_geo[$indice]['nouveau_code_geo'];
|
|
|
569 |
} else {
|
1184 |
jpm |
570 |
if ($ligne_observation['location'] != "000null") {
|
1149 |
gduche |
571 |
$this->communesOubliees[$indice] = false;
|
|
|
572 |
}
|
|
|
573 |
}
|
1158 |
aurelien |
574 |
} else {
|
|
|
575 |
$id_zone_geo = 'NULL';
|
1149 |
gduche |
576 |
}
|
1184 |
jpm |
577 |
|
1149 |
gduche |
578 |
return $id_zone_geo;
|
|
|
579 |
}
|
1184 |
jpm |
580 |
|
1149 |
gduche |
581 |
private function construireIndiceTableauLocalites($nom, $id) {
|
|
|
582 |
$nom = htmlentities($nom, ENT_NOQUOTES, 'UTF-8');
|
1184 |
jpm |
583 |
|
1149 |
gduche |
584 |
$nom = preg_replace('#&([A-za-z])(?:acute|cedil|circ|grave|orn|ring|slash|th|tilde|uml);#', '\1', $nom);
|
|
|
585 |
$nom = preg_replace('#&([A-za-z]{2})(?:lig);#', '\1', $nom); // pour les ligatures e.g. 'œ'
|
|
|
586 |
$nom = preg_replace('#&[^;]+;#', '', $nom); // supprime les autres caractères
|
1184 |
jpm |
587 |
|
1149 |
gduche |
588 |
$nom = str_replace("'",'_',$nom);
|
|
|
589 |
$nom = str_replace(' ','_',$nom);
|
|
|
590 |
$nom = str_replace('-','_',$nom);
|
|
|
591 |
$nom = str_replace(' ','_',$nom);
|
1224 |
jpm |
592 |
$indice = strtolower($nom).substr($id, 0, 2);
|
1184 |
jpm |
593 |
|
1149 |
gduche |
594 |
return $indice;
|
1184 |
jpm |
595 |
}
|
|
|
596 |
|
|
|
597 |
// Par défaut, on garde l'utilisateur tel quel (cas de la chaine de session des utilisateur anonymes)
|
1181 |
aurelien |
598 |
private function renvoyerIdPourMigration($utilisateur) {
|
|
|
599 |
$retour = $utilisateur;
|
|
|
600 |
// si le mail correspond a un utilisateur de la bdd
|
|
|
601 |
if (isset($this->tableau_utilisateurs[$utilisateur])) {
|
1184 |
jpm |
602 |
// on renvoie son id
|
|
|
603 |
$retour = $this->tableau_utilisateurs[$utilisateur]['id'];
|
|
|
604 |
} else if ($utilisateur != '') {
|
|
|
605 |
// sinon si c'est un mail inconnu, on garde le md5
|
|
|
606 |
if ($this->mailValide($utilisateur)) {
|
|
|
607 |
$retour = md5($utilisateur);
|
|
|
608 |
}
|
1224 |
jpm |
609 |
} else if ($utilisateur == '') {
|
|
|
610 |
$retour = 'NULL';
|
1181 |
aurelien |
611 |
}
|
|
|
612 |
return $retour;
|
|
|
613 |
}
|
1184 |
jpm |
614 |
|
1224 |
jpm |
615 |
private function mailValide($mail) {
|
1181 |
aurelien |
616 |
// vérification bidon mais ça suffit pour ici
|
1224 |
jpm |
617 |
return !(strpos($mail, '@') === false);
|
1200 |
jpm |
618 |
}
|
|
|
619 |
|
|
|
620 |
private function mettreANullPrenomNomVide() {
|
|
|
621 |
$bdd = self::$bdd_cel_migration;
|
|
|
622 |
$requete = "UPDATE $bdd.cel_obs ".
|
|
|
623 |
'SET prenom_utilisateur = NULL '.
|
|
|
624 |
"WHERE prenom_utilisateur = '' ";
|
1224 |
jpm |
625 |
$this->bdd->executer($requete);
|
1200 |
jpm |
626 |
|
|
|
627 |
$requete = "UPDATE $bdd.cel_obs ".
|
|
|
628 |
'SET nom_utilisateur = NULL '.
|
|
|
629 |
"WHERE nom_utilisateur = '' ";
|
1224 |
jpm |
630 |
$this->bdd->executer($requete);
|
1181 |
aurelien |
631 |
}
|
1149 |
gduche |
632 |
}
|