Subversion Repositories eFlore/Applications.cel

Rev

Rev 3451 | Rev 3461 | Go to most recent revision | Details | Compare with Previous | Last modification | View Log | RSS feed

Rev Author Line No. Line
2893 delphine 1
<?php
2
// declare(encoding='UTF-8');
3
/**
4
 * Classe de nettoyage de la base de données du CEL.
5
 * Suppression des antislash
6
 * Remplacement des chaines vides par des NULL
7
 * Unifier les référentiels : pas de nom de version, majuscule...
8
 * Unifier les certitudes
9
 * Supprimer les INSEE-C: non rempli, les dates 0000-00
10
 *
11
 * Utilisation :
12
 * - <code>/opt/lamp/bin/php cli.php nettoyage -a (voir méthode executer)</code>
13
 *
14
 * @category   CEL
15
 * @package    Scripts
16
 * @subpackage Nettoyage
17
 * @author     Delphine CAUQUIL <delphine@tela-botanica.org>
18
 * @license    GPL v3 <http://www.gnu.org/licenses/gpl.txt>
19
 * @license    CECILL v2 <http://www.cecill.info/licences/Licence_CeCILL_V2-en.txt>
20
 * @copyright  1999-2016 Tela Botanica <accueil@tela-botanica.org>
21
 */
22
class Nettoyage extends Script {
23
 
24
	protected $bdd;
2936 delphine 25
	protected $colonnes;
3439 delphine 26
	protected $bd_cel = "tb_nettoye_cel";
27
	protected $bd_del = "tb_del";
2893 delphine 28
 
29
 
30
	public function __construct($script_nom, $parametres_cli) {
31
		parent::__construct($script_nom, $parametres_cli);
32
		$this->bdd = new Bdd();
3439 delphine 33
		$this->bd_cel = Config::get('nettoyage.cel_nettoye');
34
		$this->bd_del = Config::get('nettoyage.del');
2893 delphine 35
	}
36
 
37
	public function executer() {
38
		$cmd = $this->getParametre('a');
3445 delphine 39
		$requete_colonnes = "SELECT column_name FROM information_schema.columns WHERE table_name = 'cel_obs' AND table_schema='".$this->bd_cel."';";
2936 delphine 40
		$this->colonnes = $this->bdd->recupererTous($requete_colonnes);
2893 delphine 41
		try {
42
			switch ($cmd) {
43
				case 'tout' :
2936 delphine 44
					$this->supprimerRetourLigne();
2893 delphine 45
					$this->supprimerAntislash();
3296 delphine 46
					$this->supprimerGuillemet();
3258 delphine 47
					$this->unifierNull();
2893 delphine 48
					$this->unifierNomReferentiel();
49
					$this->unifierCertitude();
3258 delphine 50
					$this->supprimerCertitudeAutre();
51
					$this->unifierUtilisateur();
3456 delphine 52
					$this->unifierPhenologie();
3258 delphine 53
					$this->verifierCodeInsee();
2893 delphine 54
					$this->verifierGeodatum();
3438 delphine 55
					$this->supprimerInfosLiesObsInexistante();
56
					$this->supprimerImagesetTagAnonymes();
3258 delphine 57
					$this->analyserMotsCles();
3303 delphine 58
					$this->changerSensible();
2893 delphine 59
					$this->unifierNull();
60
					break;
3296 delphine 61
				case 'supprimerRetourLigne' :
62
				    $this->supprimerRetourLigne();
63
				    break;
2893 delphine 64
				case 'supprimerAntislash' :
65
					$this->supprimerAntislash();
66
					break;
3296 delphine 67
				case 'supprimerGuillemet' :
68
				    $this->supprimerGuillemet();
69
				    break;
2893 delphine 70
				case 'unifierNomReferentiel' :
71
					$this->unifierNomReferentiel();
72
					break;
73
				case 'unifierCertitude' :
74
					$this->unifierCertitude();
75
					break;
3258 delphine 76
				case 'supprimerCertitudeAutre' : // après unifier certitude si les autres valeurs sont bien à supprimer
77
				    $this->supprimerCertitudeAutre();
78
				    break;
79
				case 'analyserMotsCles' : // après unifier certitude si les autres valeurs sont bien à supprimer
80
				    $this->analyserMotsCles();
81
				    break;
2893 delphine 82
				case 'verifierGeodatum' :
83
					$this->verifierGeodatum();
84
					break;
3258 delphine 85
				case 'verifierCodeInsee' :
86
				    $this->verifierCodeInsee();
87
				    break;
3303 delphine 88
				case 'sensible' :
89
				    $this->changerSensible();
90
				    break;
2893 delphine 91
				case 'unifierNull' : // lancer en dernier pour bien réussir
92
					$this->unifierNull();
93
					break;
3449 delphine 94
				case 'supprimerImagesetTagAnonymes' :
95
				    $this->supprimerImagesetTagAnonymes();
96
				    break;
3258 delphine 97
				case 'supprimerInfosLiesObsInexistante' :
98
				    $this->supprimerInfosLiesObsInexistante();
99
				    break;
100
				case 'unifierUtilisateur' :
101
				    $this->unifierUtilisateur();
102
				    break;
3296 delphine 103
				case 'unifierInfosEspece' :
104
				    $this->unifierUtilisateur();
105
				    break;
3456 delphine 106
				case 'unifierPhenologie' :
107
				    $this->unifierPhenologie();
108
				    break;
2893 delphine 109
				default :
110
					$msg = "Erreur : la commande '$cmd' n'existe pas!\n".
111
						"Commandes existantes : regenererMotsClesTexteObs, regenererMotsClesTexteImages"
112
							. ", regenererMotsClesTexteObsTout, regenererMotsClesTexteImagesTout"
113
							. ", viderMotsClesTexteImagesSansMotsCles, viderMotsClesTexteObsSansMotsCles"
114
							. ", regenererChampsTailleImage, reparerLiaisonsOublieesObs, reparerLiaisonsOublieesImages"
115
							. ", reparerLiaisonsObsParMotsClesTexte, reductionMotsClesImages, reductionMotsClesImagesUtil"
116
							. ", reduireEtNormaliserMotsClesImagesUtil, reduireEtNormaliserMotsClesImages"
117
							. ", reductionMotsClesObs, reductionMotsClesObsUtil, reduireEtNormaliserMotsClesObsUtil"
118
							. ", reduireEtNormaliserMotsClesObs";
119
					throw new Exception($msg);
120
			}
121
		} catch (Exception $e) {
122
			$this->traiterErreur($e->getMessage());
123
		}
124
	}
125
 
126
 
2936 delphine 127
	private function supprimerRetourLigne() {
128
		foreach ($this->colonnes as $id=>$colonne) {
129
			echo "Suppression des retour ligne dans la colonne ".$colonne['column_name']." ...";
3439 delphine 130
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].', "\n", "")';
2936 delphine 131
			$this->bdd->requeter($requete);
132
			echo "effectuée \n";
133
		}
134
	}
2893 delphine 135
 
136
	private function supprimerAntislash() {
2936 delphine 137
		foreach ($this->colonnes as $id=>$colonne) {
2893 delphine 138
			echo "Suppression des antislash dans la colonne ".$colonne['column_name']." ...";
3456 delphine 139
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].', "\\\", "")';
2893 delphine 140
			$this->bdd->requeter($requete);
141
			echo "effectuée \n";
142
		}
143
	}
144
 
2936 delphine 145
	private function supprimerGuillemet() {
146
		foreach ($this->colonnes as $id=>$colonne) {
147
			echo "Suppression des guillements dans la colonne ".$colonne['column_name']." ...";
3439 delphine 148
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].',"\"", "")';
2936 delphine 149
			$this->bdd->requeter($requete);
150
			echo "effectuée \n";
151
		}
152
	}
153
 
2893 delphine 154
	private function unifierNull() {
3447 delphine 155
	    foreach ($this->colonnes as $id=>$colonne) {
2893 delphine 156
			echo "Suppression des vides dans la colonne ".$colonne['column_name']." ...";
2895 delphine 157
			$dsl = array( 'transmission', 'altitude');
2894 delphine 158
			if (isset($dsl[$colonne['column_name']])) {
3449 delphine 159
				$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = NULL WHERE trim(".$colonne['column_name'].") = ''";
2894 delphine 160
			} else {
3449 delphine 161
				$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = NULL WHERE trim(".$colonne['column_name'].") = '' OR ".$colonne['column_name']." IN ('INSEE-C:', '0000-00-00 00:00:00', '0.00000')";
2894 delphine 162
			}
2893 delphine 163
			$this->bdd->requeter($requete);
164
			echo "effectuée \n";
165
		}
166
	}
167
 
168
	private function unifierCertitude() {
169
		echo "Uniformisation du champ certitude/identification";
3258 delphine 170
		$certitude = array("A déterminer" => "à déterminer",
171
		    "À déterminer, voir photo" => "à déterminer",
3446 delphine 172
		    "A déterminer" => "à déterminer",
3258 delphine 173
		    "aDeterminer" => "à déterminer",
174
		    "déterminer" => "à déterminer",
175
		    "Inconnue" => "à déterminer",
176
		    "Ceraine" => "certain",
177
		    "certain" => "certain",
178
		    "Certainaaua" => "certain",
179
		    "Certaine" => "certain",
180
		    "Certaine K- rhizines blanche" => "certain",
181
		    "Certaine ( mais voir notes)" => "certain",
182
		    "Certaine (à 99%)" => "certain",
183
		    "Certaine Anett" => "certain",
184
		    "Certaine Anette" => "certain",
185
		    "Certaine Valériane officinale" => "certain",
186
		    "Certaine, Faite et confirmée par JM BERAUD" => "certain",
187
		    "Certaine, par Jean Lebail" => "certain",
188
		    "Certaine, subsp. minus" => "certain",
189
		    "Certainea" => "certain",
190
		    "Certaineanno" => "certain",
191
		    "Certainearia n" => "certain",
192
		    "Certainee" => "certain",
193
		    "Certainej" => "certain",
194
		    "Certainel" => "certain",
195
		    "CertaineNom de travai" => "certain",
196
		    "CertaineNom de travail" => "certain",
197
		    "Certainesites" => "certain",
198
		    "Certainesous-bois de feuillus en versant sud à sud-ouest" => "certain",
199
		    "Certaineu" => "certain",
200
		    "sure" => "certain",
201
		    "validée sur forum Naturalistes de l'ouest" => "certain",
202
		    "à confirmer" => "douteux",
203
		    "à approfondir" => "douteux",
204
		    "à cofirmer" => "douteux",
205
		    "À confiermer" => "douteux",
206
		    "A confirlmer" => "douteux",
207
		    "A confirmer" => "douteux",
208
		    "à confirmer vs. pumilum" => "douteux",
209
		    "à conirmer" => "douteux",
210
		    "à vérifier" => "douteux",
211
		    "douteuse" => "douteux",
212
		    "Douteuse (canadensis ?)" => "douteux",
213
		    "Douteuse ?" => "douteux",
214
		    "Douteuse à confirmer" => "douteux",
215
		    "Douteuse peut-être cordata" => "douteux",
216
		    "Douteuse, fleurs rouges" => "douteux",
217
		    "douteux" => "douteux",
218
		    "espèce bisannuelle mais non bien déterminée" => "douteux",
219
		    "Incertaine" => "douteux",
220
		    "Pavot douteux" => "douteux",
221
		    "Potentille ansérine, supposé" => "douteux",
222
		    "presque certaine" => "douteux",
223
		    "Quasi Certaine" => "douteux",
224
		    "ssp déterminer" => "douteux",
225
		    "subsp à vérifier" => "douteux",
226
		    "subsp. microphyllum ?" => "douteux",
227
		    "très douteuse" => "douteux",
228
		    "Très probable" => "douteux");
2893 delphine 229
		foreach ($certitude as $valeur=>$saisie) {
3446 delphine 230
			$requete = 'UPDATE '.$this->bd_cel.'.cel_obs SET commentaire = concat(commentaire, " Certitude : ", certitude), certitude = "'.$saisie.'" WHERE certitude ="'.$valeur.'"';
2893 delphine 231
			$this->bdd->requeter($requete);
232
			echo "effectuée \n";
233
		}
3439 delphine 234
		$requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
2893 delphine 235
		$verif = $this->bdd->recupererTous($requete_verif);
236
		if ($verif != array()) print_r($verif);
237
	}
238
 
3258 delphine 239
	private function supprimerCertitudeAutre() {
240
	    echo "suppression des valeurs non compréhensible du champ certitude/identification";
3439 delphine 241
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs
3296 delphine 242
	        SET commentaire = case isnull(commentaire) when 1 THEN certitude ELSE concat(commentaire, ' Certitude : ', certitude) END,
243
	        certitude = '' WHERE `certitude` NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
3258 delphine 244
	    $this->bdd->requeter($requete);
245
	        echo "effectuée \n";
3446 delphine 246
	    $requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
3258 delphine 247
	    $verif = $this->bdd->recupererTous($requete_verif);
248
	    if ($verif != array()) print_r($verif);
249
	}
250
 
3456 delphine 251
	private function unifierPhenologie() {
252
	    echo "Uniformisation du champ phenologie";
253
	    $phenologie = array("2" => "00-09: germination, développement des bourgeons",
254
	        "5" => "00-09: germination, développement des bourgeons",
255
	        "5" => "00-09: germination, développement des bourgeons",
256
	        "8" => "00-09: germination, développement des bourgeons",
257
	        "8" => "00-09: germination, développement des bourgeons",
258
	        "9" => "00-09: germination, développement des bourgeons",
259
	        "00-09" => "00-09: germination, développement des bourgeons",
260
	        "Germination, développement des bourgeons" => "00-09: germination, développement des bourgeons",
261
	        "10" => "10-19: développement des feuilles",
262
	        "11" => "10-19: développement des feuilles",
263
	        "12" => "10-19: développement des feuilles",
264
	        "14" => "10-19: développement des feuilles",
265
	        "15" => "10-19: développement des feuilles",
266
	        "16" => "10-19: développement des feuilles",
267
	        "17" => "10-19: développement des feuilles",
268
	        "18" => "10-19: développement des feuilles",
269
	        "19" => "10-19: développement des feuilles",
270
	        "10-19" => "10-19: développement des feuilles",
271
	        "10-19: développement des feui" => "10-19: développement des feuilles",
272
	        "10-19: développement des feuilles" => "10-19: développement des feuilles",
273
	        "15: environ % des feuilles épanouies" => "10-19: développement des feuilles",
274
	        "19   environ 50% des feuilles épanouies" => "10-19: développement des feuilles",
275
	        "en feuilles" => "10-19: développement des feuilles",
276
	        "Feuille" => "10-19: développement des feuilles",
277
	        "feuille peu dvt, a confirmer" => "10-19: développement des feuilles",
278
	        "feuilles seulement" => "10-19: développement des feuilles",
279
	        "20" => "20-29: formation de pousses latérales, tallage",
280
	        "Formation de pousses latérales, tallage" => "20-29: formation de pousses latérales, tallage",
281
	        "30" => "30-39: développement des tiges, croissance des rosettes",
282
	        "35" => "30-39: développement des tiges, croissance des rosettes",
283
	        "36" => "30-39: développement des tiges, croissance des rosettes",
284
	        "38" => "30-39: développement des tiges, croissance des rosettes",
285
	        "39" => "30-39: développement des tiges, croissance des rosettes",
286
	        "3: développement des tiges, croissance des rosettes" => "30-39: développement des tiges, croissance des rosettes",
287
	        "Développement des tiges, croissance des rosettes" => "30-39: développement des tiges, croissance des rosettes",
288
	        "40" => "40-49: développement des organes de propagation végétative",
289
	        "43" => "40-49: développement des organes de propagation végétative",
290
	        "45" => "40-49: développement des organes de propagation végétative",
291
	        "46" => "40-49: développement des organes de propagation végétative",
292
	        "48" => "40-49: développement des organes de propagation végétative",
293
	        "49" => "40-49: développement des organes de propagation végétative",
294
	        "40-49" => "40-49: développement des organes de propagation végétative",
295
	        "40-49: développement des organes de propagation végétative" => "40-49: développement des organes de propagation végétative",
296
	        "40-49: développement des organes de propagation végétativegt" => "40-49: développement des organes de propagation végétative",
297
	        "40-49: développement des organes de propagation végétativepas d'inflorescence" => "40-49: développement des organes de propagation végétative",
298
	        "50" => "50-59 : apparition de l’inflorescence",
299
	        "56" => "50-59 : apparition de l’inflorescence",
300
	        "57" => "50-59 : apparition de l’inflorescence",
301
	        "58" => "50-59 : apparition de l’inflorescence",
302
	        "59" => "50-59 : apparition de l’inflorescence",
303
	        "10x En bouton" => "50-59 : apparition de l’inflorescence",
304
	        "14x En bouton" => "50-59 : apparition de l’inflorescence",
305
	        "20x En bouton" => "50-59 : apparition de l’inflorescence",
306
	        "30-39" => "50-59 : apparition de l’inflorescence",
307
	        "50-59" => "50-59 : apparition de l’inflorescence",
308
	        "50-59: apparition de l'inflorescence, épiais" => "50-59 : apparition de l’inflorescence",
309
	        "50-59: apparition de l'inflorescence, épiaison" => "50-59 : apparition de l’inflorescence",
310
	        "59: apparition de l'inflorescence, épiaison" => "50-59 : apparition de l’inflorescence",
311
	        "8x En bouton" => "50-59 : apparition de l’inflorescence",
312
	        "60" => "60-69 : floraison",
313
	        "62" => "60-69 : floraison",
314
	        "63" => "60-69 : floraison",
315
	        "64" => "60-69 : floraison",
316
	        "66" => "60-69 : floraison",
317
	        "67" => "60-69 : floraison",
318
	        "68" => "60-69 : floraison",
319
	        "69" => "60-69 : floraison",
320
	        " floraison " => "60-69 : floraison",
321
	        "-69: floraison" => "60-69 : floraison",
322
	        "10x Fin de floraison" => "60-69 : floraison",
323
	        "12x Pleine floraison" => "60-69 : floraison",
324
	        "14x Début de floraison" => "60-69 : floraison",
325
	        "150x Pleine floraison" => "60-69 : floraison",
326
	        "17x Fin de floraison" => "60-69 : floraison",
327
	        "1x Début de floraison" => "60-69 : floraison",
328
	        "1x En fleur" => "60-69 : floraison",
329
	        "1x Fin de floraison" => "60-69 : floraison",
330
	        "1x Pleine floraison" => "60-69 : floraison",
331
	        "20x Début de floraison" => "60-69 : floraison",
332
	        "20x Pleine floraison" => "60-69 : floraison",
333
	        "25x Pleine floraison" => "60-69 : floraison",
334
	        "27x En fleur" => "60-69 : floraison",
335
	        "30x Fin de floraison" => "60-69 : floraison",
336
	        "35x Début de floraison" => "60-69 : floraison",
337
	        "35x Fin de floraison" => "60-69 : floraison",
338
	        "35x Pleine floraison" => "60-69 : floraison",
339
	        "3x Fin de floraison" => "60-69 : floraison",
340
	        "3x Pleine floraison" => "60-69 : floraison",
341
	        "40x Début de floraison" => "60-69 : floraison",
342
	        "44x Pleine floraison" => "60-69 : floraison",
343
	        "48x Pleine floraison" => "60-69 : floraison",
344
	        "4x Pleine floraison" => "60-69 : floraison",
345
	        "50x Pleine floraison" => "60-69 : floraison",
346
	        "5x Pleine floraison" => "60-69 : floraison",
347
	        "6: floraison" => "60-69 : floraison",
348
	        "60 : floraison en amorce, pétales jaunes, corolle non ouverte encore" => "60-69 : floraison",
349
	        "60-" => "60-69 : floraison",
350
	        "60-6: floraison" => "60-69 : floraison",
351
	        "60-65" => "60-69 : floraison",
352
	        "60-69" => "60-69 : floraison",
353
	        "60-69 floraison" => "60-69 : floraison",
354
	        "60-69 floraison +70-79: fructification" => "60-69 : floraison",
355
	        "60-69: florai" => "60-69 : floraison",
356
	        "60-69: florais" => "60-69 : floraison",
357
	        "60-69: floraison" => "60-69 : floraison",
358
	        "60-69: floraison - fructification" => "60-69 : floraison",
359
	        "60-69: floraison (8" => "60-69 : floraison",
360
	        "60-69: floraison 1 individu fleuri sur une trentaine" => "60-69 : floraison",
361
	        "60-69: floraison à 50 pour" => "60-69 : floraison",
362
	        "60-69: floraison Fleurs déjà fanées ou en cours de l'être" => "60-69 : floraison",
363
	        "60-69: floraison floraison" => "60-69 : floraison",
364
	        "60-69: floraison pour le 09/04/2019" => "60-69 : floraison",
365
	        "60-69: floraison5" => "60-69 : floraison",
366
	        "60-69: floraison6" => "60-69 : floraison",
367
	        "60-69: floraisondi" => "60-69 : floraison",
368
	        "60-69: floraisonentre les pierres du mur des quai" => "60-69 : floraison",
369
	        "60-69: floraisonfleurs et fruit" => "60-69 : floraison",
370
	        "60-69: floraisonl" => "60-69 : floraison",
371
	        "60-69: floraisonvi" => "60-69 : floraison",
372
	        "60-69: fructification" => "60-69 : floraison",
373
	        "60: floraison" => "60-69 : floraison",
374
	        "63: floraison" => "60-69 : floraison",
375
	        "63: environ 3% des fleurs épanouies" => "60-69 : floraison",
376
	        "64: floraison" => "60-69 : floraison",
377
	        "66, avec quelques fruits" => "60-69 : floraison",
378
	        "66: floraison" => "60-69 : floraison",
379
	        "67 : floraison" => "60-69 : floraison",
380
	        "67 Nbses fleurs épanouies," => "60-69 : floraison",
381
	        "67: floraison" => "60-69 : floraison",
382
	        "67: environ 70% des fleurs épanouies + formation de gousses." => "60-69 : floraison",
383
	        "68: environ 0% des fleurs épanouies" => "60-69 : floraison",
384
	        "68: floraison" => "60-69 : floraison",
385
	        "68: environ 50% des fleurs épanouies" => "60-69 : floraison",
386
	        "68: environ 80% des fleurs épanouies + formation des gousses." => "60-69 : floraison",
387
	        "68floraison" => "60-69 : floraison",
388
	        "69 (floraison de toutes fleurs)" => "60-69 : floraison",
389
	        "69-70" => "60-69 : floraison",
390
	        "69-70: fin de floraisonfructification" => "60-69 : floraison",
391
	        "69-70n" => "60-69 : floraison",
392
	        "69: 100% des fleurs épanouies" => "60-69 : floraison",
393
	        "69s" => "60-69 : floraison",
394
	        "82x Pleine floraison" => "60-69 : floraison",
395
	        "9: floraison" => "60-69 : floraison",
396
	        "début de ffloraison" => "60-69 : floraison",
397
	        "début floraison" => "60-69 : floraison",
398
	        "en fleurs" => "60-69 : floraison",
399
	        "environ 30% des fleurs épanouies" => "60-69 : floraison",
400
	        "environ 950% des fleurs épanouies" => "60-69 : floraison",
401
	        "fin d floraison" => "60-69 : floraison",
402
	        "fin de floraison" => "60-69 : floraison",
403
	        "fin floraison" => "60-69 : floraison",
404
	        "fl" => "60-69 : floraison",
405
	        "fl2" => "60-69 : floraison",
406
	        "fleur" => "60-69 : floraison",
407
	        "Fleurs" => "60-69 : floraison",
408
	        "fleurs épanouies; fin" => "60-69 : floraison",
409
	        "floraison" => "60-69 : floraison",
410
	        "Nombreux plants en début de floraison" => "60-69 : floraison",
411
	        "61" => "61: environ 10% des fleurs épanouies",
412
	        "10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
413
	        "61 :" => "61: environ 10% des fleurs épanouies",
414
	        "61 :  environ 10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
415
	        "61: début defloraison" => "61: environ 10% des fleurs épanouies",
416
	        "61: floraison" => "61: environ 10% des fleurs épanouies",
417
	        "61: environ 10% des fleurs épanouie" => "61: environ 10% des fleurs épanouies",
418
	        "61: environ 10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
419
	        "61: environ 10% des fleurs épanouies63" => "61: environ 10% des fleurs épanouies",
420
	        "61: environ 10% des fleurs épanouies68" => "61: environ 10% des fleurs épanouies",
421
	        "61: environ 2% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
422
	        "61: environ20% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
423
	        "Fleurs (environ 10% des fleurs épanouies)" => "61: environ 10% des fleurs épanouies",
424
	        "65" => "65: environ 50% des fleurs épanouies",
425
	        "65" => "65: environ 50% des fleurs épanouies",
426
	        "6: environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
427
	        "65 , avec quelques fruits" => "65: environ 50% des fleurs épanouies",
428
	        "65 : environ 80% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
429
	        "65 : environ 10% des fleurs ép" => "65: environ 50% des fleurs épanouies",
430
	        "65 : environ 50% des fleurs épa" => "65: environ 50% des fleurs épanouies",
431
	        "65 : environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
432
	        "65 : environ 50% des fleurs épanouies-75" => "65: environ 50% des fleurs épanouies",
433
	        "65-6: floraison" => "65: environ 50% des fleurs épanouies",
434
	        "65-69: floraison" => "65: environ 50% des fleurs épanouies",
435
	        "65-7: floraison" => "65: environ 50% des fleurs épanouies",
436
	        "65-72" => "65: environ 50% des fleurs épanouies",
437
	        "65:" => "65: environ 50% des fleurs épanouies",
438
	        "65: floraison" => "65: environ 50% des fleurs épanouies",
439
	        "65: environ 10% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
440
	        "65: environ 50% des fleurs épanoui" => "65: environ 50% des fleurs épanouies",
441
	        "65: environ 50% des fleurs épanouie6" => "65: environ 50% des fleurs épanouies",
442
	        "65: environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
443
	        "65: environ 50% des fleurs épanouies et fructification" => "65: environ 50% des fleurs épanouies",
444
	        "65: environ 50% des fleurs épanouies75" => "65: environ 50% des fleurs épanouies",
445
	        "65: environ 50% des fleurs épanouies78" => "65: environ 50% des fleurs épanouies",
446
	        "65:-70" => "65: environ 50% des fleurs épanouies",
447
	        "65:-75" => "65: environ 50% des fleurs épanouies",
448
	        "avec quelques fruits, 65" => "65: environ 50% des fleurs épanouies",
449
	        "nviron 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
450
	        "70" => "70-79: fructification",
451
	        "71" => "70-79: fructification",
452
	        "72" => "70-79: fructification",
453
	        "73" => "70-79: fructification",
454
	        "74" => "70-79: fructification",
455
	        "75" => "70-79: fructification",
456
	        "76" => "70-79: fructification",
457
	        "77" => "70-79: fructification",
458
	        "78" => "70-79: fructification",
459
	        "79" => "70-79: fructification",
460
	        "7: fructification" => "70-79: fructification",
461
	        "70-: fructification" => "70-79: fructification",
462
	        "70-71" => "70-79: fructification",
463
	        "70-79" => "70-79: fructification",
464
	        "70-79: floraison" => "70-79: fructification",
465
	        "70-79: fructification" => "70-79: fructification",
466
	        "70-79: fructification ?" => "70-79: fructification",
467
	        "70-79: fructification +floraison" => "70-79: fructification",
468
	        "70-79: fructification Entre autre" => "70-79: fructification",
469
	        "70-79: fructification, mais fruits verts" => "70-79: fructification",
470
	        "70-79: fructificationfleurs et fruit" => "70-79: fructification",
471
	        "70-79:fin floraison fructification" => "70-79: fructification",
472
	        "709: fructification" => "70-79: fructification",
473
	        "75: fructification" => "70-79: fructification",
474
	        "Début de ruits" => "70-79: fructification",
475
	        "fin floraison et fructification" => "70-79: fructification",
476
	        "fleur, fruit" => "70-79: fructification",
477
	        "fleurs e fructification" => "70-79: fructification",
478
	        "Fleurs et début fruits" => "70-79: fructification",
479
	        "Fleurs et début ruits" => "70-79: fructification",
480
	        "Fleurs et fructification" => "70-79: fructification",
481
	        "floraison - fructification" => "70-79: fructification",
482
	        "floraison zet fructification" => "70-79: fructification",
483
	        "Floraison, fructification" => "70-79: fructification",
484
	        "floraison(fin) fructification" => "70-79: fructification",
485
	        "floraison+ ou - finie" => "70-79: fructification",
486
	        "fr1" => "70-79: fructification",
487
	        "quelques fruits rares" => "70-79: fructification",
488
	        "stérile70-79: fructification" => "70-79: fructification",
489
	        "toutes les fleurs épanouies et début fructification" => "70-79: fructification",
490
	        "fleurs et fruits" => "70-79: fructification",
491
	        "Fleurs et jeunes fruits" => "70-79: fructification",
492
	        "floraison + fructification" => "70-79: fructification",
493
	        "Fructificaiton" => "70-79: fructification",
494
	        "fleurs et quelques fruits" => "70-79: fructification",
495
	        "Fleurs et surtout début defruits" => "70-79: fructification",
496
	        "floraison et fructification" => "70-79: fructification",
497
	        "fructification" => "70-79: fructification",
498
	        "Fleurs/fruits" => "70-79: fructification",
499
	        "fructification ?" => "70-79: fructification",
500
	        "80" => "80-89: maturité des fruits et des graines",
501
	        "81" => "80-89: maturité des fruits et des graines",
502
	        "82" => "80-89: maturité des fruits et des graines",
503
	        "83" => "80-89: maturité des fruits et des graines",
504
	        "84" => "80-89: maturité des fruits et des graines",
505
	        "86" => "80-89: maturité des fruits et des graines",
506
	        "87" => "80-89: maturité des fruits et des graines",
507
	        "88" => "80-89: maturité des fruits et des graines",
508
	        "89" => "80-89: maturité des fruits et des graines",
509
	        "-89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
510
	        "80-89" => "80-89: maturité des fruits et des graines",
511
	        "80-89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
512
	        "80-89: maturité des fruits et des graines,début sénescence" => "80-89: maturité des fruits et des graines",
513
	        "80-95" => "80-89: maturité des fruits et des graines",
514
	        "88  maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
515
	        "89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
516
	        "floraison et fructification, graines mûres" => "80-89: maturité des fruits et des graines",
517
	        "floraison et maturation des graines" => "80-89: maturité des fruits et des graines",
518
	        "fructification passée" => "80-89: maturité des fruits et des graines",
519
	        "Fruit" => "80-89: maturité des fruits et des graines",
520
	        "Fruits" => "80-89: maturité des fruits et des graines",
521
	        "85" => "85: 50% des fruits matures",
522
	        "50% des fruits matures (fructification d'Août)î" => "85: 50% des fruits matures",
523
	        "85, mais avec encore des fleurs" => "85: 50% des fruits matures",
524
	        "85:" => "85: 50% des fruits matures",
525
	        "85:   fruits matures 20" => "85: 50% des fruits matures",
526
	        "85: 50% des fruits mature8" => "85: 50% des fruits matures",
527
	        "85: 50% des fruits matures" => "85: 50% des fruits matures",
528
	        "85: 50% des fruits matures0" => "85: 50% des fruits matures",
529
	        "85: 50% des fruits matures56" => "85: 50% des fruits matures",
530
	        "85: 50% des fruits matures88" => "85: 50% des fruits matures",
531
	        "88: 50% des fruits matures" => "85: 50% des fruits matures",
532
	        "90" => "90-99: sénescence et dormance",
533
	        "91" => "90-99: sénescence et dormance",
534
	        "92" => "90-99: sénescence et dormance",
535
	        "94" => "90-99: sénescence et dormance",
536
	        "95" => "90-99: sénescence et dormance",
537
	        "97" => "90-99: sénescence et dormance",
538
	        "98" => "90-99: sénescence et dormance",
539
	        "99" => "90-99: sénescence et dormance",
540
	        "100% de feuilles jaunes" => "90-99: sénescence et dormance",
541
	        "80% feuillage d'automne" => "90-99: sénescence et dormance",
542
	        "90-99" => "90-99: sénescence et dormance",
543
	        "90-99: sénescence et dormance" => "90-99: sénescence et dormance",
544
	        "95: environ 9% des feuilles jaunes" => "90-99: sénescence et dormance"
545
	    );
546
	    foreach ($phenologie as $valeur=>$saisie) {
547
	        $requete = 'UPDATE '.$this->bd_cel.'.cel_obs SET commentaire = concat(commentaire, " Certitude : ", certitude), phenologie = "'.$saisie.'" WHERE phenologie ="'.$valeur.'"';
548
	        $this->bdd->requeter($requete);
549
	        echo "effectuée \n";
550
	    }
551
	    $requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
552
	    $verif = $this->bdd->recupererTous($requete_verif);
553
	    if ($verif != array()) print_r($verif);
554
	}
555
 
3258 delphine 556
	private function unifierUtilisateur() {
3438 delphine 557
	    echo "vérification de la présence de l'annuaire \n";
3439 delphine 558
	    $requete = "SELECT * FROM ".$this->bd_cel.".`users`;";
3438 delphine 559
	    $result = $this->bdd->requeter($requete);
3439 delphine 560
	    if ($result === NULL) {echo $requete;
3438 delphine 561
	        echo "Il manque la table annuaire (à recopier de telaorg users\n";
562
	        exit;
563
	    }
564
 
3297 delphine 565
	    echo "suppression de le colonne ordre \n";
3439 delphine 566
	    $requete = "ALTER TABLE ".$this->bd_cel.".cel_obs DROP INDEX id_obs;";
3297 delphine 567
	    $this->bdd->requeter($requete);
3439 delphine 568
	    $requete = "ALTER TABLE ".$this->bd_cel.".cel_obs DROP INDEX ordre;";
3297 delphine 569
	    $this->bdd->requeter($requete);
3456 delphine 570
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` DROP IF EXISTS `ordre`;";
3297 delphine 571
	    $this->bdd->requeter($requete);
3456 delphine 572
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS pseudo  varchar(250);";
3438 delphine 573
	    $this->bdd->requeter($requete);
3258 delphine 574
 
575
	    echo "modification des observations ayant une adresse mail en identifiant";
3449 delphine 576
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` right join ".$this->bd_cel.".`users` ON `user_email` = ce_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
3438 delphine 577
	        `courriel_utilisateur` =  `user_email`  WHERE ce_utilisateur like '%@%'";
3258 delphine 578
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
579
 
580
	    echo "modification des observations ayant une adresse mail mais pas d'identifiant";
3439 delphine 581
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` join ".$this->bd_cel.".`users` ON `user_email` = courriel_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
3438 delphine 582
	        `courriel_utilisateur` =  `user_email`  WHERE (ce_utilisateur IS NULL OR LENGTH(ce_utilisateur) > 6
3258 delphine 583
	        OR ce_utilisateur = 0) and courriel_utilisateur like '%@%'";
584
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
585
 
586
	    echo "modification des observations ayant un identifiant";
3439 delphine 587
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` join ".$this->bd_cel.".`users` ON ID = ce_utilisateur SET pseudo = user_nicename,
3456 delphine 588
	        `courriel_utilisateur` =  `user_email` WHERE (ce_utilisateur IS NULL OR LENGTH(ce_utilisateur) > 6) and (courriel_utilisateur is null or courriel_utilisateur='')";
3258 delphine 589
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
590
 
3296 delphine 591
	    echo "suppression des autres valeurs ce_utilisateur";
3456 delphine 592
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` SET ce_utilisateur = NULL, courriel_utilisateur = if (ce_utilisateur like '%@%'and (courriel_utilisateur is null or courriel_utilisateur='') , ce_utilisateur, courriel_utilisateur) WHERE ce_utilisateur IS NOT NULL AND LENGTH(ce_utilisateur) > 6";
3296 delphine 593
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
594
 
3438 delphine 595
	    echo "suppression des obs anonymes";
3439 delphine 596
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_obs` WHERE (ce_utilisateur IS NULL OR LENGTH(ce_utilisateur) > 6
3438 delphine 597
	        OR ce_utilisateur = 0) and (`courriel_utilisateur` is null or `courriel_utilisateur` not like '%@%')";
598
	    $this->bdd->requeter($requete_anonyme);
3297 delphine 599
 
3439 delphine 600
	    $requete_verif = "SELECT `ce_utilisateur`, `prenom_utilisateur`, `nom_utilisateur`, `courriel_utilisateur`  FROM ".$this->bd_cel.".cel_obs
3438 delphine 601
	            WHERE ce_utilisateur IS NOT NULL OR LENGTH(ce_utilisateur) > 6";
602
	    $verif = $this->bdd->recupererTous($requete_verif);
603
	    if ($verif != array()) print_r($verif);
604
	    echo "effectuée \n";
3456 delphine 605
	    $this->unifierUtilisateurTag("cel_arbre_mots_cles_obs");
606
	    $this->unifierUtilisateurTag("cel_arbre_mots_cles_images");
3438 delphine 607
	}
608
 
3456 delphine 609
	private function unifierUtilisateurTag($table) {
610
	    echo "séparation des identifiants en ce_utilisateur et courriel";
611
	    $requete = "ALTER TABLE ".$this->bd_cel.".".$table." ADD courriel varchar(255);";
612
	    $this->bdd->requeter($requete);
613
	    $requete = "UPDATE ".$this->bd_cel.".".$table." SET courriel = ce_utilisateur,
614
	        ce_utilisateur = NULL WHERE ce_utilisateur like '%@%';";
615
	    $this->bdd->requeter($requete);
616
	    echo "recherche des identifiants pour les tags ayant que des courriels dans users";
617
	    $requete = "UPDATE ".$this->bd_cel.".".$table." join ".$this->bd_cel.".`users` ON `user_email` = courriel SET `ce_utilisateur` = `ID`
618
	        WHERE courriel like '%@%';";
619
	    $this->bdd->requeter($requete);
620
	    echo "recherche des identifiants pour les tags ayant que des courriels dans obs";
621
	    $requete = "UPDATE ".$this->bd_cel.".".$table." t join ".$this->bd_cel.".`cel_obs` o ON
622
	        `courriel` = courriel_utilisateur SET t.`ce_utilisateur` = o.`ce_utilisateur`
623
	        WHERE courriel_utilisateur like '%@%';";
624
	    $this->bdd->requeter($requete);
625
	    echo "suppression des tags sans identifiant";
626
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".".$table." WHERE ce_utilisateur IS NULL OR LENGTH(ce_utilisateur) > 6";
627
	    $this->bdd->requeter($requete_anonyme);
628
	    if ($table == "cel_arbre_mots_cles_obs") {
629
    	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison`
630
    	        WHERE `id_element_lie` not in (SELECT `id_observation` FROM ".$this->bd_cel.".`cel_obs`)
631
    	            OR `id_mot_cle` NOT IN (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs`);";
632
    	    $this->bdd->requeter($requete_anonyme);
633
	    } else {
634
	        $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison`
635
	            WHERE `id_element_lie` not in (SELECT `id_image` FROM ".$this->bd_cel.".`cel_images`)
636
	                OR `id_mot_cle` NOT IN (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_images`);";
637
	        $this->bdd->requeter($requete_anonyme);
638
	    }
639
	}
640
 
3438 delphine 641
	private function supprimerImagesetTagAnonymes() {
3297 delphine 642
	    echo "suppression des images anonymes";
3439 delphine 643
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_images` WHERE (ce_utilisateur IS NULL OR LENGTH(ce_utilisateur) > 6
3297 delphine 644
	        OR ce_utilisateur = 0) and (`courriel_utilisateur` is null or `courriel_utilisateur` not like '%@%')";
645
	    $this->bdd->requeter($requete_anonyme);
3456 delphine 646
	  /*  echo "suppression des tags obs anonymes";
3439 delphine 647
	    $requete_create = "CREATE TABLE ".$this->bd_cel.".user_mot_cle_absent AS SELECT distinct id_utilisateur FROM ".$this->bd_cel.".cel_arbre_mots_cles_obs WHERE id_utilisateur not in
648
	            (SELECT distinct id_utilisateur FROM ".$this->bd_cel.".cel_arbre_mots_cles_obs WHERE id_utilisateur in
649
	            (select distinct ce_utilisateur from ".$this->bd_cel.".cel_obs) or
650
	            id_utilisateur in (SELECT distinct courriel_utilisateur FROM ".$this->bd_cel.".cel_obs))";
3438 delphine 651
	    $this->bdd->requeter($requete_create);
3450 delphine 652
	    $requete_index = "ALTER TABLE ".$this->bd_cel.".`user_mot_cle_absent` ADD PRIMARY KEY(`id_utilisateur`);";
3438 delphine 653
	    $this->bdd->requeter($requete_index);
3451 delphine 654
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs` WHERE `id_utilisateur` in (SELECT * FROM ".$this->bd_cel.".`user_mot_cle_absent`);";
3297 delphine 655
	    $this->bdd->requeter($requete_anonyme);
3450 delphine 656
	    $requete_anonyme = "DROP TABLE ".$this->bd_cel.".user_mot_cle_absent;";
3297 delphine 657
	    $this->bdd->requeter($requete_anonyme);
3450 delphine 658
	    $requete_anonyme = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_obs` a join ".$this->bd_cel.".cel_obs b on a.`id_utilisateur` = b.courriel_utilisateur SET a.`id_utilisateur` = b.ce_utilisateur
3438 delphine 659
	        WHERE b.ce_utilisateur IS NOT NULL AND b.ce_utilisateur != ''";
3456 delphine 660
	    $this->bdd->requeter($requete_anonyme);*/
661
 
3258 delphine 662
	}
663
 
2893 delphine 664
	private function unifierNomReferentiel() {
665
		echo "Uniformisation du nom de référentiel";
3456 delphine 666
		$referentiels = array("bdtfx", "bdtre", "bdtxa", "apd", "lbf", "isfan");
2893 delphine 667
		foreach ($referentiels as $referentiel) {
3439 delphine 668
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = '".$referentiel."' WHERE nom_referentiel like '".$referentiel."%'";
2893 delphine 669
			$this->bdd->requeter($requete);
3446 delphine 670
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'autre' WHERE nom_sel_nn IS NULL or nom_sel_nn = '0'";
2894 delphine 671
			$this->bdd->requeter($requete);
3456 delphine 672
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'apd' WHERE nom_referentiel like 'bdtao%'";
2895 delphine 673
			$this->bdd->requeter($requete);
3456 delphine 674
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'bdtfx' WHERE nom_referentiel like 'bdnff%'";
2895 delphine 675
			$this->bdd->requeter($requete);
2893 delphine 676
			echo "effectuée \n";
3439 delphine 677
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'autre' WHERE nom_referentiel IS NULL or nom_referentiel = ''";
3296 delphine 678
			$this->bdd->requeter($requete);
679
			echo "effectuée \n";
2893 delphine 680
		}
3439 delphine 681
		$requete_verif = "SELECT nom_referentiel FROM ".$this->bd_cel.".cel_obs WHERE nom_referentiel NOT IN ('".implode("', '", $referentiels)."', 'autre')";
2893 delphine 682
		$verif = $this->bdd->recupererTous($requete_verif);
683
		if ($verif != array()) print_r($verif);
684
	}
685
 
3258 delphine 686
	private function supprimerInfosLiesObsInexistante() {
687
	    echo "Supprimer infos liés à obs inexistante";
3439 delphine 688
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_obs_etendues` WHERE `id_observation` not in (select `id_observation` from ".$this->bd_cel.".cel_obs);";
3258 delphine 689
	    $this->bdd->requeter($requete);
3439 delphine 690
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison` WHERE `id_element_lie` not in (select `id_observation` from ".$this->bd_cel.".cel_obs);";
3258 delphine 691
	    $this->bdd->requeter($requete);
3456 delphine 692
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison` WHERE `id_mot_cle` not in (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs`);";
3258 delphine 693
	    $this->bdd->requeter($requete);
3456 delphine 694
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_images`  WHERE `ce_observation` is not null and `ce_observation` not in (select id_observation from ".$this->bd_cel.".cel_obs)";
3438 delphine 695
	    $this->bdd->requeter($requete);
3439 delphine 696
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison` WHERE `id_element_lie` not in (select `id_image` from ".$this->bd_cel.".cel_images);";
3438 delphine 697
	    $this->bdd->requeter($requete);
3456 delphine 698
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison` WHERE `id_mot_cle` not in (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_images`);";
3438 delphine 699
	    $this->bdd->requeter($requete);
3258 delphine 700
	    echo "effectuée \n";
701
	}
702
 
2893 delphine 703
	private function verifierGeodatum() {
704
		echo "Uniformisation du geodatum";
3439 delphine 705
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET geodatum = 'WGS84' WHERE (latitude IS NOT NULL or latitude != '0.00000') AND geodatum IS NULL";
2893 delphine 706
		$this->bdd->requeter($requete);
3439 delphine 707
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET geodatum = NULL WHERE (latitude IS NULL or latitude = '0.00000')";
2895 delphine 708
		$this->bdd->requeter($requete);
2893 delphine 709
		echo "effectuée \n";
3456 delphine 710
		echo "Suppression des coordonnées fausses : ";
711
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET latitude = NULL, longitude = NULL WHERE latitude < -90 OR latitude > 90 OR longitude < -180 OR longitude > 180";
712
		$this->bdd->requeter($requete);
713
		echo "effectuée \n";
2893 delphine 714
	}
3258 delphine 715
 
716
	private function verifierCodeInsee() {
3456 delphine 717
	    echo "Mise à jour des valeurs code_insee";
718
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = NULL,
719
	        commentaire = concat(if(commentaire is null, "", concat(commentaire, ", ")), if(ce_zone_geo is null, "", concat("Zone geo : ",ce_zone_geo))) where `ce_zone_geo` not like "insee-c%"';
720
	    $this->bdd->requeter($requete);
721
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = substr(`ce_zone_geo`, 9, 5) where `ce_zone_geo` like "insee-c:%"';
722
	    $this->bdd->requeter($requete);
723
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = NULL where trim(`ce_zone_geo`) = ""';
724
	    $this->bdd->requeter($requete);
725
	    echo "effectuée \n";
726
 
727
 
3258 delphine 728
	    echo "Vérification du code insee";
3456 delphine 729
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `locality_consistency` INT(1) ;";
3297 delphine 730
	    $this->bdd->requeter($requete);
731
 
3439 delphine 732
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET locality_consistency = '0' WHERE
3258 delphine 733
	        ((ce_zone_geo != 'INSEE-C:' and ce_zone_geo like 'INSEE-C:%') and code_insee_calcule != '') and
734
	        replace(`ce_zone_geo`, 'INSEE-C:', '') != `code_insee_calcule`";
735
	    $this->bdd->requeter($requete);
3439 delphine 736
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET locality_consistency = '1' WHERE
3258 delphine 737
	        ((ce_zone_geo != 'INSEE-C:' and ce_zone_geo like 'INSEE-C:%') and code_insee_calcule != '') and
3296 delphine 738
	        replace(`ce_zone_geo`, 'INSEE-C:', '') = `code_insee_calcule`";
739
	    $this->bdd->requeter($requete);
740
 
741
	    $requete_verif = "SELECT `ce_zone_geo`, `code_insee_calcule`, `locality_consistency` FROM `cel_obs` WHERE `locality_consistency` IS NOT NULL";
742
	    $verif = $this->bdd->recupererTous($requete_verif);
743
	    if ($verif != array()) print_r($verif);
3258 delphine 744
	    echo "effectuée \n";
745
	}
746
 
747
	private function analyserMotsCles(){
3296 delphine 748
	    echo "Input source \n";
3456 delphine 749
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `input_source` VARCHAR(15)";
3297 delphine 750
	    $this->bdd->requeter($requete);
751
 
3439 delphine 752
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'plantnet' WHERE `mots_cles_texte` like '%plantnet%'";
3296 delphine 753
	    $this->bdd->requeter($requete);
3258 delphine 754
 
3439 delphine 755
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'autre' WHERE `mots_cles_texte` like '%MobileSauvages%'";
3296 delphine 756
	    $this->bdd->requeter($requete);
757
 
3447 delphine 758
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'widget' WHERE `mots_cles_texte` like '%Projets coopératifs%' and (input_source = '' OR input_source IS NULL)";
3296 delphine 759
	    $this->bdd->requeter($requete);
760
 
3447 delphine 761
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'widget' WHERE `mots_cles_texte` like '%widget%' and (input_source = '' OR input_source IS NULL)";
3296 delphine 762
	    $this->bdd->requeter($requete);
763
 
3447 delphine 764
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'cel' WHERE input_source = '' OR input_source IS NULL";
3296 delphine 765
	    $this->bdd->requeter($requete);
3438 delphine 766
 
3296 delphine 767
	    echo "Suppression motcle du chemin \n";
3439 delphine 768
	    $requete = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_obs` SET chemin = substr(`chemin`, 1, CHAR_LENGTH(chemin)-CHAR_LENGTH(`mot_cle`)-1)";
3296 delphine 769
	    $this->bdd->requeter($requete);
770
 
3439 delphine 771
	    $requete = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_images` SET chemin = substr(`chemin`, 1, CHAR_LENGTH(chemin)-CHAR_LENGTH(`mot_cle`)-1)";
3296 delphine 772
	    $this->bdd->requeter($requete);
773
 
774
	    echo "Certitude à certaine quand obs validée sur ip \n";
3439 delphine 775
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c left join
3438 delphine 776
	        (SELECT distinct `ce_observation`, `nom_sel_nn`
3439 delphine 777
	        FROM ".$this->bd_del.".`del_commentaire` WHERE `proposition_retenue` = 1) d on
3296 delphine 778
	        `ce_observation` = `id_observation` SET `certitude` = 'certain'
3438 delphine 779
	        WHERE (c.`mots_cles_texte` LIKE '%adeterminer%'
3446 delphine 780
	        or c.`certitude` = 'à déterminer') and c.`nom_sel_nn` = d.`nom_sel_nn`";
3296 delphine 781
	    $this->bdd->requeter($requete);
782
 
783
	    echo "Certitude à douteux quand obs validée sur ip mais num_nom diff entre ip et cel \n";
3439 delphine 784
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c left join
3438 delphine 785
	        (SELECT distinct `ce_observation`, `nom_sel_nn`
3439 delphine 786
	        FROM ".$this->bd_del.".`del_commentaire`  WHERE `proposition_retenue` = 1 ) d on
3296 delphine 787
	        `ce_observation` = `id_observation` SET `certitude` = 'douteux'
3438 delphine 788
	        WHERE (c.`mots_cles_texte` LIKE '%adeterminer%'
3446 delphine 789
	        or c.`certitude` = 'à déterminer') and c.`nom_sel_nn` != d.`nom_sel_nn`";
3296 delphine 790
	    $this->bdd->requeter($requete);
791
 
792
	    echo "Certitude à aDeterminer quand obs non validée sur ip \n";
3446 delphine 793
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c SET `certitude` = 'à déterminer'
3296 delphine 794
	        WHERE c.`mots_cles_texte` LIKE '%adeterminer%' AND
795
	        (c.`certitude` = '' or c.certitude IS NULL)";
796
	    $this->bdd->requeter($requete);
797
 
3439 delphine 798
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` SET
3296 delphine 799
	        `mots_cles_texte` = REPLACE(`mots_cles_texte`, 'aDeterminer,', '')
800
	        WHERE `mots_cles_texte` LIKE '%adeterminer,%'";
801
	    $this->bdd->requeter($requete);
802
 
3438 delphine 803
 
3258 delphine 804
	}
3303 delphine 805
 
3438 delphine 806
 
807
 
3303 delphine 808
	private function changerSensible(){
809
	    echo "Sensible \n";
3456 delphine 810
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `published_location` varchar(50)";
3303 delphine 811
	    $this->bdd->requeter($requete);
812
 
3439 delphine 813
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET published_location = 'localité' WHERE `mots_cles_texte` like '%sensible%'";
3303 delphine 814
	    $this->bdd->requeter($requete);
815
	}
2893 delphine 816
}