Subversion Repositories eFlore/Applications.cel

Rev

Rev 3857 | Details | Compare with Previous | Last modification | View Log | RSS feed

Rev Author Line No. Line
2893 delphine 1 
<?php
2 
// declare(encoding='UTF-8');
3 
/**
4 
 * Classe de nettoyage de la base de données du CEL.
5 
 * Suppression des antislash
6 
 * Remplacement des chaines vides par des NULL
7 
 * Unifier les référentiels : pas de nom de version, majuscule...
8 
 * Unifier les certitudes
9 
 * Supprimer les INSEE-C: non rempli, les dates 0000-00
10 
 *
11 
 * Utilisation :
12 
 * - <code>/opt/lamp/bin/php cli.php nettoyage -a (voir méthode executer)</code>
13 
 *
14 
 * @category   CEL
15 
 * @package    Scripts
16 
 * @subpackage Nettoyage
17 
 * @author     Delphine CAUQUIL <delphine@tela-botanica.org>
18 
 * @license    GPL v3 <http://www.gnu.org/licenses/gpl.txt>
19 
 * @license    CECILL v2 <http://www.cecill.info/licences/Licence_CeCILL_V2-en.txt>
20 
 * @copyright  1999-2016 Tela Botanica <accueil@tela-botanica.org>
21 
 */
22 
class Nettoyage extends Script {
23 
 
24 
	protected $bdd;
2936 delphine 25 
	protected $colonnes;
3439 delphine 26 
	protected $bd_cel = "tb_nettoye_cel";
27 
	protected $bd_del = "tb_del";
3663 delphine 28 
	protected $bd_flore = "tb_eflore";
2893 delphine 29 
 
30 
 
31 
	public function __construct($script_nom, $parametres_cli) {
32 
		parent::__construct($script_nom, $parametres_cli);
33 
		$this->bdd = new Bdd();
3439 delphine 34 
		$this->bd_cel = Config::get('nettoyage.cel_nettoye');
35 
		$this->bd_del = Config::get('nettoyage.del');
3663 delphine 36 
		$this->bd_flore = Config::get('nettoyage.flore');
2893 delphine 37 
	}
38 
 
39 
	public function executer() {
40 
		$cmd = $this->getParametre('a');
3445 delphine 41 
		$requete_colonnes = "SELECT column_name FROM information_schema.columns WHERE table_name = 'cel_obs' AND table_schema='".$this->bd_cel."';";
2936 delphine 42 
		$this->colonnes = $this->bdd->recupererTous($requete_colonnes);
2893 delphine 43 
		try {
44 
			switch ($cmd) {
45 
				case 'tout' :
2936 delphine 46 
					$this->supprimerRetourLigne();
2893 delphine 47 
					$this->supprimerAntislash();
3296 delphine 48 
					$this->supprimerGuillemet();
3258 delphine 49 
					$this->unifierNull();
2893 delphine 50 
					$this->unifierNomReferentiel();
51 
					$this->unifierCertitude();
3663 delphine 52 
					//$this->supprimerCertitudeAutre();
3258 delphine 53 
					$this->unifierUtilisateur();
3456 delphine 54 
					$this->unifierPhenologie();
3258 delphine 55 
					$this->verifierCodeInsee();
2893 delphine 56 
					$this->verifierGeodatum();
3438 delphine 57 
					$this->supprimerInfosLiesObsInexistante();
58 
					$this->supprimerImagesetTagAnonymes();
3258 delphine 59 
					$this->analyserMotsCles();
3303 delphine 60 
					$this->changerSensible();
2893 delphine 61 
					$this->unifierNull();
62 
					break;
3296 delphine 63 
				case 'supprimerRetourLigne' :
64 
				    $this->supprimerRetourLigne();
65 
				    break;
2893 delphine 66 
				case 'supprimerAntislash' :
67 
					$this->supprimerAntislash();
68 
					break;
3296 delphine 69 
				case 'supprimerGuillemet' :
70 
				    $this->supprimerGuillemet();
71 
				    break;
2893 delphine 72 
				case 'unifierNomReferentiel' :
73 
					$this->unifierNomReferentiel();
74 
					break;
75 
				case 'unifierCertitude' :
76 
					$this->unifierCertitude();
77 
					break;
3258 delphine 78 
				case 'supprimerCertitudeAutre' : // après unifier certitude si les autres valeurs sont bien à supprimer
79 
				    $this->supprimerCertitudeAutre();
80 
				    break;
81 
				case 'analyserMotsCles' : // après unifier certitude si les autres valeurs sont bien à supprimer
82 
				    $this->analyserMotsCles();
83 
				    break;
2893 delphine 84 
				case 'verifierGeodatum' :
85 
					$this->verifierGeodatum();
86 
					break;
3258 delphine 87 
				case 'verifierCodeInsee' :
88 
				    $this->verifierCodeInsee();
89 
				    break;
3303 delphine 90 
				case 'sensible' :
91 
				    $this->changerSensible();
92 
				    break;
2893 delphine 93 
				case 'unifierNull' : // lancer en dernier pour bien réussir
94 
					$this->unifierNull();
95 
					break;
3449 delphine 96 
				case 'supprimerImagesetTagAnonymes' :
97 
				    $this->supprimerImagesetTagAnonymes();
98 
				    break;
3258 delphine 99 
				case 'supprimerInfosLiesObsInexistante' :
100 
				    $this->supprimerInfosLiesObsInexistante();
101 
				    break;
102 
				case 'unifierUtilisateur' :
103 
				    $this->unifierUtilisateur();
104 
				    break;
3296 delphine 105 
				case 'unifierInfosEspece' :
3663 delphine 106 
				    $this->unifierInfosEspeces();
3296 delphine 107 
				    break;
3456 delphine 108 
				case 'unifierPhenologie' :
109 
				    $this->unifierPhenologie();
110 
				    break;
3676 delphine 111 
				case 'unifierTag' :
112 
				    $this->unifierUtilisateurTag("cel_arbre_mots_cles_obs");
113 
				    $this->unifierUtilisateurTag("cel_arbre_mots_cles_images");
114 
				    break;
2893 delphine 115 
				default :
116 
					$msg = "Erreur : la commande '$cmd' n'existe pas!\n".
117 
						"Commandes existantes : regenererMotsClesTexteObs, regenererMotsClesTexteImages"
118 
							. ", regenererMotsClesTexteObsTout, regenererMotsClesTexteImagesTout"
119 
							. ", viderMotsClesTexteImagesSansMotsCles, viderMotsClesTexteObsSansMotsCles"
120 
							. ", regenererChampsTailleImage, reparerLiaisonsOublieesObs, reparerLiaisonsOublieesImages"
121 
							. ", reparerLiaisonsObsParMotsClesTexte, reductionMotsClesImages, reductionMotsClesImagesUtil"
122 
							. ", reduireEtNormaliserMotsClesImagesUtil, reduireEtNormaliserMotsClesImages"
123 
							. ", reductionMotsClesObs, reductionMotsClesObsUtil, reduireEtNormaliserMotsClesObsUtil"
124 
							. ", reduireEtNormaliserMotsClesObs";
125 
					throw new Exception($msg);
126 
			}
127 
		} catch (Exception $e) {
128 
			$this->traiterErreur($e->getMessage());
129 
		}
130 
	}
131 
 
132 
 
2936 delphine 133 
	private function supprimerRetourLigne() {
134 
		foreach ($this->colonnes as $id=>$colonne) {
135 
			echo "Suppression des retour ligne dans la colonne ".$colonne['column_name']." ...";
3439 delphine 136 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].', "\n", "")';
2936 delphine 137 
			$this->bdd->requeter($requete);
138 
			echo "effectuée \n";
139 
		}
140 
	}
2893 delphine 141 
 
142 
	private function supprimerAntislash() {
2936 delphine 143 
		foreach ($this->colonnes as $id=>$colonne) {
2893 delphine 144 
			echo "Suppression des antislash dans la colonne ".$colonne['column_name']." ...";
3456 delphine 145 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].', "\\\", "")';
2893 delphine 146 
			$this->bdd->requeter($requete);
147 
			echo "effectuée \n";
148 
		}
149 
	}
150 
 
2936 delphine 151 
	private function supprimerGuillemet() {
152 
		foreach ($this->colonnes as $id=>$colonne) {
153 
			echo "Suppression des guillements dans la colonne ".$colonne['column_name']." ...";
3439 delphine 154 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = REPLACE(".$colonne['column_name'].',"\"", "")';
2936 delphine 155 
			$this->bdd->requeter($requete);
156 
			echo "effectuée \n";
157 
		}
158 
	}
159 
 
2893 delphine 160 
	private function unifierNull() {
3447 delphine 161 
	    foreach ($this->colonnes as $id=>$colonne) {
2893 delphine 162 
			echo "Suppression des vides dans la colonne ".$colonne['column_name']." ...";
2895 delphine 163 
			$dsl = array( 'transmission', 'altitude');
2894 delphine 164 
			if (isset($dsl[$colonne['column_name']])) {
3463 delphine 165 
				$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = NULL WHERE trim(".$colonne['column_name'].") = '' and ".$colonne['column_name']." != '0'";
2894 delphine 166 
			} else {
3449 delphine 167 
				$requete = "UPDATE ".$this->bd_cel.".cel_obs SET ".$colonne['column_name']." = NULL WHERE trim(".$colonne['column_name'].") = '' OR ".$colonne['column_name']." IN ('INSEE-C:', '0000-00-00 00:00:00', '0.00000')";
2894 delphine 168 
			}
2893 delphine 169 
			$this->bdd->requeter($requete);
170 
			echo "effectuée \n";
171 
		}
172 
	}
173 
 
174 
	private function unifierCertitude() {
175 
		echo "Uniformisation du champ certitude/identification";
3258 delphine 176 
		$certitude = array("A déterminer" => "à déterminer",
177 
		    "À déterminer, voir photo" => "à déterminer",
3446 delphine 178 
		    "A déterminer" => "à déterminer",
3258 delphine 179 
		    "aDeterminer" => "à déterminer",
180 
		    "déterminer" => "à déterminer",
181 
		    "Inconnue" => "à déterminer",
182 
		    "Ceraine" => "certain",
183 
		    "certain" => "certain",
184 
		    "Certainaaua" => "certain",
185 
		    "Certaine" => "certain",
186 
		    "Certaine K- rhizines blanche" => "certain",
187 
		    "Certaine ( mais voir notes)" => "certain",
188 
		    "Certaine (à 99%)" => "certain",
189 
		    "Certaine Anett" => "certain",
190 
		    "Certaine Anette" => "certain",
191 
		    "Certaine Valériane officinale" => "certain",
192 
		    "Certaine, Faite et confirmée par JM BERAUD" => "certain",
193 
		    "Certaine, par Jean Lebail" => "certain",
194 
		    "Certaine, subsp. minus" => "certain",
195 
		    "Certainea" => "certain",
196 
		    "Certaineanno" => "certain",
197 
		    "Certainearia n" => "certain",
198 
		    "Certainee" => "certain",
199 
		    "Certainej" => "certain",
200 
		    "Certainel" => "certain",
201 
		    "CertaineNom de travai" => "certain",
202 
		    "CertaineNom de travail" => "certain",
203 
		    "Certainesites" => "certain",
204 
		    "Certainesous-bois de feuillus en versant sud à sud-ouest" => "certain",
205 
		    "Certaineu" => "certain",
206 
		    "sure" => "certain",
207 
		    "validée sur forum Naturalistes de l'ouest" => "certain",
208 
		    "à confirmer" => "douteux",
209 
		    "à approfondir" => "douteux",
210 
		    "à cofirmer" => "douteux",
211 
		    "À confiermer" => "douteux",
212 
		    "A confirlmer" => "douteux",
213 
		    "A confirmer" => "douteux",
214 
		    "à confirmer vs. pumilum" => "douteux",
215 
		    "à conirmer" => "douteux",
216 
		    "à vérifier" => "douteux",
217 
		    "douteuse" => "douteux",
218 
		    "Douteuse (canadensis ?)" => "douteux",
219 
		    "Douteuse ?" => "douteux",
220 
		    "Douteuse à confirmer" => "douteux",
221 
		    "Douteuse peut-être cordata" => "douteux",
222 
		    "Douteuse, fleurs rouges" => "douteux",
223 
		    "douteux" => "douteux",
224 
		    "espèce bisannuelle mais non bien déterminée" => "douteux",
225 
		    "Incertaine" => "douteux",
226 
		    "Pavot douteux" => "douteux",
227 
		    "Potentille ansérine, supposé" => "douteux",
228 
		    "presque certaine" => "douteux",
229 
		    "Quasi Certaine" => "douteux",
230 
		    "ssp déterminer" => "douteux",
231 
		    "subsp à vérifier" => "douteux",
232 
		    "subsp. microphyllum ?" => "douteux",
233 
		    "très douteuse" => "douteux",
234 
		    "Très probable" => "douteux");
2893 delphine 235 
		foreach ($certitude as $valeur=>$saisie) {
3446 delphine 236 
			$requete = 'UPDATE '.$this->bd_cel.'.cel_obs SET commentaire = concat(commentaire, " Certitude : ", certitude), certitude = "'.$saisie.'" WHERE certitude ="'.$valeur.'"';
2893 delphine 237 
			$this->bdd->requeter($requete);
238 
			echo "effectuée \n";
239 
		}
3439 delphine 240 
		$requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
2893 delphine 241 
		$verif = $this->bdd->recupererTous($requete_verif);
242 
		if ($verif != array()) print_r($verif);
243 
	}
244 
 
3258 delphine 245 
	private function supprimerCertitudeAutre() {
246 
	    echo "suppression des valeurs non compréhensible du champ certitude/identification";
3439 delphine 247 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs
3296 delphine 248 
	        SET commentaire = case isnull(commentaire) when 1 THEN certitude ELSE concat(commentaire, ' Certitude : ', certitude) END,
249 
	        certitude = '' WHERE `certitude` NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
3258 delphine 250 
	    $this->bdd->requeter($requete);
251 
	        echo "effectuée \n";
3446 delphine 252 
	    $requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
3258 delphine 253 
	    $verif = $this->bdd->recupererTous($requete_verif);
254 
	    if ($verif != array()) print_r($verif);
255 
	}
256 
 
3456 delphine 257 
	private function unifierPhenologie() {
258 
	    echo "Uniformisation du champ phenologie";
259 
	    $phenologie = array("2" => "00-09: germination, développement des bourgeons",
260 
	        "5" => "00-09: germination, développement des bourgeons",
261 
	        "5" => "00-09: germination, développement des bourgeons",
262 
	        "8" => "00-09: germination, développement des bourgeons",
263 
	        "8" => "00-09: germination, développement des bourgeons",
264 
	        "9" => "00-09: germination, développement des bourgeons",
265 
	        "00-09" => "00-09: germination, développement des bourgeons",
266 
	        "Germination, développement des bourgeons" => "00-09: germination, développement des bourgeons",
267 
	        "10" => "10-19: développement des feuilles",
268 
	        "11" => "10-19: développement des feuilles",
269 
	        "12" => "10-19: développement des feuilles",
270 
	        "14" => "10-19: développement des feuilles",
271 
	        "15" => "10-19: développement des feuilles",
272 
	        "16" => "10-19: développement des feuilles",
273 
	        "17" => "10-19: développement des feuilles",
274 
	        "18" => "10-19: développement des feuilles",
275 
	        "19" => "10-19: développement des feuilles",
276 
	        "10-19" => "10-19: développement des feuilles",
277 
	        "10-19: développement des feui" => "10-19: développement des feuilles",
278 
	        "10-19: développement des feuilles" => "10-19: développement des feuilles",
279 
	        "15: environ % des feuilles épanouies" => "10-19: développement des feuilles",
280 
	        "19   environ 50% des feuilles épanouies" => "10-19: développement des feuilles",
281 
	        "en feuilles" => "10-19: développement des feuilles",
282 
	        "Feuille" => "10-19: développement des feuilles",
283 
	        "feuille peu dvt, a confirmer" => "10-19: développement des feuilles",
284 
	        "feuilles seulement" => "10-19: développement des feuilles",
285 
	        "20" => "20-29: formation de pousses latérales, tallage",
286 
	        "Formation de pousses latérales, tallage" => "20-29: formation de pousses latérales, tallage",
287 
	        "30" => "30-39: développement des tiges, croissance des rosettes",
288 
	        "35" => "30-39: développement des tiges, croissance des rosettes",
289 
	        "36" => "30-39: développement des tiges, croissance des rosettes",
290 
	        "38" => "30-39: développement des tiges, croissance des rosettes",
291 
	        "39" => "30-39: développement des tiges, croissance des rosettes",
292 
	        "3: développement des tiges, croissance des rosettes" => "30-39: développement des tiges, croissance des rosettes",
293 
	        "Développement des tiges, croissance des rosettes" => "30-39: développement des tiges, croissance des rosettes",
294 
	        "40" => "40-49: développement des organes de propagation végétative",
295 
	        "43" => "40-49: développement des organes de propagation végétative",
296 
	        "45" => "40-49: développement des organes de propagation végétative",
297 
	        "46" => "40-49: développement des organes de propagation végétative",
298 
	        "48" => "40-49: développement des organes de propagation végétative",
299 
	        "49" => "40-49: développement des organes de propagation végétative",
300 
	        "40-49" => "40-49: développement des organes de propagation végétative",
301 
	        "40-49: développement des organes de propagation végétative" => "40-49: développement des organes de propagation végétative",
302 
	        "40-49: développement des organes de propagation végétativegt" => "40-49: développement des organes de propagation végétative",
303 
	        "40-49: développement des organes de propagation végétativepas d'inflorescence" => "40-49: développement des organes de propagation végétative",
304 
	        "50" => "50-59 : apparition de l’inflorescence",
305 
	        "56" => "50-59 : apparition de l’inflorescence",
306 
	        "57" => "50-59 : apparition de l’inflorescence",
307 
	        "58" => "50-59 : apparition de l’inflorescence",
308 
	        "59" => "50-59 : apparition de l’inflorescence",
309 
	        "10x En bouton" => "50-59 : apparition de l’inflorescence",
310 
	        "14x En bouton" => "50-59 : apparition de l’inflorescence",
311 
	        "20x En bouton" => "50-59 : apparition de l’inflorescence",
312 
	        "30-39" => "50-59 : apparition de l’inflorescence",
313 
	        "50-59" => "50-59 : apparition de l’inflorescence",
314 
	        "50-59: apparition de l'inflorescence, épiais" => "50-59 : apparition de l’inflorescence",
315 
	        "50-59: apparition de l'inflorescence, épiaison" => "50-59 : apparition de l’inflorescence",
316 
	        "59: apparition de l'inflorescence, épiaison" => "50-59 : apparition de l’inflorescence",
317 
	        "8x En bouton" => "50-59 : apparition de l’inflorescence",
318 
	        "60" => "60-69 : floraison",
319 
	        "62" => "60-69 : floraison",
320 
	        "63" => "60-69 : floraison",
321 
	        "64" => "60-69 : floraison",
322 
	        "66" => "60-69 : floraison",
323 
	        "67" => "60-69 : floraison",
324 
	        "68" => "60-69 : floraison",
325 
	        "69" => "60-69 : floraison",
326 
	        " floraison " => "60-69 : floraison",
327 
	        "-69: floraison" => "60-69 : floraison",
328 
	        "10x Fin de floraison" => "60-69 : floraison",
329 
	        "12x Pleine floraison" => "60-69 : floraison",
330 
	        "14x Début de floraison" => "60-69 : floraison",
331 
	        "150x Pleine floraison" => "60-69 : floraison",
332 
	        "17x Fin de floraison" => "60-69 : floraison",
333 
	        "1x Début de floraison" => "60-69 : floraison",
334 
	        "1x En fleur" => "60-69 : floraison",
335 
	        "1x Fin de floraison" => "60-69 : floraison",
336 
	        "1x Pleine floraison" => "60-69 : floraison",
337 
	        "20x Début de floraison" => "60-69 : floraison",
338 
	        "20x Pleine floraison" => "60-69 : floraison",
339 
	        "25x Pleine floraison" => "60-69 : floraison",
340 
	        "27x En fleur" => "60-69 : floraison",
341 
	        "30x Fin de floraison" => "60-69 : floraison",
342 
	        "35x Début de floraison" => "60-69 : floraison",
343 
	        "35x Fin de floraison" => "60-69 : floraison",
344 
	        "35x Pleine floraison" => "60-69 : floraison",
345 
	        "3x Fin de floraison" => "60-69 : floraison",
346 
	        "3x Pleine floraison" => "60-69 : floraison",
347 
	        "40x Début de floraison" => "60-69 : floraison",
348 
	        "44x Pleine floraison" => "60-69 : floraison",
349 
	        "48x Pleine floraison" => "60-69 : floraison",
350 
	        "4x Pleine floraison" => "60-69 : floraison",
351 
	        "50x Pleine floraison" => "60-69 : floraison",
352 
	        "5x Pleine floraison" => "60-69 : floraison",
353 
	        "6: floraison" => "60-69 : floraison",
354 
	        "60 : floraison en amorce, pétales jaunes, corolle non ouverte encore" => "60-69 : floraison",
355 
	        "60-" => "60-69 : floraison",
356 
	        "60-6: floraison" => "60-69 : floraison",
357 
	        "60-65" => "60-69 : floraison",
358 
	        "60-69" => "60-69 : floraison",
359 
	        "60-69 floraison" => "60-69 : floraison",
360 
	        "60-69 floraison +70-79: fructification" => "60-69 : floraison",
361 
	        "60-69: florai" => "60-69 : floraison",
362 
	        "60-69: florais" => "60-69 : floraison",
363 
	        "60-69: floraison" => "60-69 : floraison",
364 
	        "60-69: floraison - fructification" => "60-69 : floraison",
365 
	        "60-69: floraison (8" => "60-69 : floraison",
366 
	        "60-69: floraison 1 individu fleuri sur une trentaine" => "60-69 : floraison",
367 
	        "60-69: floraison à 50 pour" => "60-69 : floraison",
368 
	        "60-69: floraison Fleurs déjà fanées ou en cours de l'être" => "60-69 : floraison",
369 
	        "60-69: floraison floraison" => "60-69 : floraison",
370 
	        "60-69: floraison pour le 09/04/2019" => "60-69 : floraison",
371 
	        "60-69: floraison5" => "60-69 : floraison",
372 
	        "60-69: floraison6" => "60-69 : floraison",
373 
	        "60-69: floraisondi" => "60-69 : floraison",
374 
	        "60-69: floraisonentre les pierres du mur des quai" => "60-69 : floraison",
375 
	        "60-69: floraisonfleurs et fruit" => "60-69 : floraison",
376 
	        "60-69: floraisonl" => "60-69 : floraison",
377 
	        "60-69: floraisonvi" => "60-69 : floraison",
378 
	        "60-69: fructification" => "60-69 : floraison",
379 
	        "60: floraison" => "60-69 : floraison",
380 
	        "63: floraison" => "60-69 : floraison",
381 
	        "63: environ 3% des fleurs épanouies" => "60-69 : floraison",
382 
	        "64: floraison" => "60-69 : floraison",
383 
	        "66, avec quelques fruits" => "60-69 : floraison",
384 
	        "66: floraison" => "60-69 : floraison",
385 
	        "67 : floraison" => "60-69 : floraison",
386 
	        "67 Nbses fleurs épanouies," => "60-69 : floraison",
387 
	        "67: floraison" => "60-69 : floraison",
388 
	        "67: environ 70% des fleurs épanouies + formation de gousses." => "60-69 : floraison",
389 
	        "68: environ 0% des fleurs épanouies" => "60-69 : floraison",
390 
	        "68: floraison" => "60-69 : floraison",
391 
	        "68: environ 50% des fleurs épanouies" => "60-69 : floraison",
392 
	        "68: environ 80% des fleurs épanouies + formation des gousses." => "60-69 : floraison",
393 
	        "68floraison" => "60-69 : floraison",
394 
	        "69 (floraison de toutes fleurs)" => "60-69 : floraison",
395 
	        "69-70" => "60-69 : floraison",
396 
	        "69-70: fin de floraisonfructification" => "60-69 : floraison",
397 
	        "69-70n" => "60-69 : floraison",
398 
	        "69: 100% des fleurs épanouies" => "60-69 : floraison",
399 
	        "69s" => "60-69 : floraison",
400 
	        "82x Pleine floraison" => "60-69 : floraison",
401 
	        "9: floraison" => "60-69 : floraison",
402 
	        "début de ffloraison" => "60-69 : floraison",
403 
	        "début floraison" => "60-69 : floraison",
404 
	        "en fleurs" => "60-69 : floraison",
405 
	        "environ 30% des fleurs épanouies" => "60-69 : floraison",
406 
	        "environ 950% des fleurs épanouies" => "60-69 : floraison",
407 
	        "fin d floraison" => "60-69 : floraison",
408 
	        "fin de floraison" => "60-69 : floraison",
409 
	        "fin floraison" => "60-69 : floraison",
410 
	        "fl" => "60-69 : floraison",
411 
	        "fl2" => "60-69 : floraison",
412 
	        "fleur" => "60-69 : floraison",
413 
	        "Fleurs" => "60-69 : floraison",
414 
	        "fleurs épanouies; fin" => "60-69 : floraison",
415 
	        "floraison" => "60-69 : floraison",
416 
	        "Nombreux plants en début de floraison" => "60-69 : floraison",
417 
	        "61" => "61: environ 10% des fleurs épanouies",
418 
	        "10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
419 
	        "61 :" => "61: environ 10% des fleurs épanouies",
420 
	        "61 :  environ 10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
421 
	        "61: début defloraison" => "61: environ 10% des fleurs épanouies",
422 
	        "61: floraison" => "61: environ 10% des fleurs épanouies",
423 
	        "61: environ 10% des fleurs épanouie" => "61: environ 10% des fleurs épanouies",
424 
	        "61: environ 10% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
425 
	        "61: environ 10% des fleurs épanouies63" => "61: environ 10% des fleurs épanouies",
426 
	        "61: environ 10% des fleurs épanouies68" => "61: environ 10% des fleurs épanouies",
427 
	        "61: environ 2% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
428 
	        "61: environ20% des fleurs épanouies" => "61: environ 10% des fleurs épanouies",
429 
	        "Fleurs (environ 10% des fleurs épanouies)" => "61: environ 10% des fleurs épanouies",
430 
	        "65" => "65: environ 50% des fleurs épanouies",
431 
	        "65" => "65: environ 50% des fleurs épanouies",
432 
	        "6: environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
433 
	        "65 , avec quelques fruits" => "65: environ 50% des fleurs épanouies",
434 
	        "65 : environ 80% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
435 
	        "65 : environ 10% des fleurs ép" => "65: environ 50% des fleurs épanouies",
436 
	        "65 : environ 50% des fleurs épa" => "65: environ 50% des fleurs épanouies",
437 
	        "65 : environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
438 
	        "65 : environ 50% des fleurs épanouies-75" => "65: environ 50% des fleurs épanouies",
439 
	        "65-6: floraison" => "65: environ 50% des fleurs épanouies",
440 
	        "65-69: floraison" => "65: environ 50% des fleurs épanouies",
441 
	        "65-7: floraison" => "65: environ 50% des fleurs épanouies",
442 
	        "65-72" => "65: environ 50% des fleurs épanouies",
443 
	        "65:" => "65: environ 50% des fleurs épanouies",
444 
	        "65: floraison" => "65: environ 50% des fleurs épanouies",
445 
	        "65: environ 10% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
446 
	        "65: environ 50% des fleurs épanoui" => "65: environ 50% des fleurs épanouies",
447 
	        "65: environ 50% des fleurs épanouie6" => "65: environ 50% des fleurs épanouies",
448 
	        "65: environ 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
449 
	        "65: environ 50% des fleurs épanouies et fructification" => "65: environ 50% des fleurs épanouies",
450 
	        "65: environ 50% des fleurs épanouies75" => "65: environ 50% des fleurs épanouies",
451 
	        "65: environ 50% des fleurs épanouies78" => "65: environ 50% des fleurs épanouies",
452 
	        "65:-70" => "65: environ 50% des fleurs épanouies",
453 
	        "65:-75" => "65: environ 50% des fleurs épanouies",
454 
	        "avec quelques fruits, 65" => "65: environ 50% des fleurs épanouies",
455 
	        "nviron 50% des fleurs épanouies" => "65: environ 50% des fleurs épanouies",
456 
	        "70" => "70-79: fructification",
457 
	        "71" => "70-79: fructification",
458 
	        "72" => "70-79: fructification",
459 
	        "73" => "70-79: fructification",
460 
	        "74" => "70-79: fructification",
461 
	        "75" => "70-79: fructification",
462 
	        "76" => "70-79: fructification",
463 
	        "77" => "70-79: fructification",
464 
	        "78" => "70-79: fructification",
465 
	        "79" => "70-79: fructification",
466 
	        "7: fructification" => "70-79: fructification",
467 
	        "70-: fructification" => "70-79: fructification",
468 
	        "70-71" => "70-79: fructification",
469 
	        "70-79" => "70-79: fructification",
470 
	        "70-79: floraison" => "70-79: fructification",
471 
	        "70-79: fructification" => "70-79: fructification",
472 
	        "70-79: fructification ?" => "70-79: fructification",
473 
	        "70-79: fructification +floraison" => "70-79: fructification",
474 
	        "70-79: fructification Entre autre" => "70-79: fructification",
475 
	        "70-79: fructification, mais fruits verts" => "70-79: fructification",
476 
	        "70-79: fructificationfleurs et fruit" => "70-79: fructification",
477 
	        "70-79:fin floraison fructification" => "70-79: fructification",
478 
	        "709: fructification" => "70-79: fructification",
479 
	        "75: fructification" => "70-79: fructification",
480 
	        "Début de ruits" => "70-79: fructification",
481 
	        "fin floraison et fructification" => "70-79: fructification",
482 
	        "fleur, fruit" => "70-79: fructification",
483 
	        "fleurs e fructification" => "70-79: fructification",
484 
	        "Fleurs et début fruits" => "70-79: fructification",
485 
	        "Fleurs et début ruits" => "70-79: fructification",
486 
	        "Fleurs et fructification" => "70-79: fructification",
487 
	        "floraison - fructification" => "70-79: fructification",
488 
	        "floraison zet fructification" => "70-79: fructification",
489 
	        "Floraison, fructification" => "70-79: fructification",
490 
	        "floraison(fin) fructification" => "70-79: fructification",
491 
	        "floraison+ ou - finie" => "70-79: fructification",
492 
	        "fr1" => "70-79: fructification",
493 
	        "quelques fruits rares" => "70-79: fructification",
494 
	        "stérile70-79: fructification" => "70-79: fructification",
495 
	        "toutes les fleurs épanouies et début fructification" => "70-79: fructification",
496 
	        "fleurs et fruits" => "70-79: fructification",
497 
	        "Fleurs et jeunes fruits" => "70-79: fructification",
498 
	        "floraison + fructification" => "70-79: fructification",
499 
	        "Fructificaiton" => "70-79: fructification",
500 
	        "fleurs et quelques fruits" => "70-79: fructification",
501 
	        "Fleurs et surtout début defruits" => "70-79: fructification",
502 
	        "floraison et fructification" => "70-79: fructification",
503 
	        "fructification" => "70-79: fructification",
504 
	        "Fleurs/fruits" => "70-79: fructification",
505 
	        "fructification ?" => "70-79: fructification",
506 
	        "80" => "80-89: maturité des fruits et des graines",
507 
	        "81" => "80-89: maturité des fruits et des graines",
508 
	        "82" => "80-89: maturité des fruits et des graines",
509 
	        "83" => "80-89: maturité des fruits et des graines",
510 
	        "84" => "80-89: maturité des fruits et des graines",
511 
	        "86" => "80-89: maturité des fruits et des graines",
512 
	        "87" => "80-89: maturité des fruits et des graines",
513 
	        "88" => "80-89: maturité des fruits et des graines",
514 
	        "89" => "80-89: maturité des fruits et des graines",
515 
	        "-89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
516 
	        "80-89" => "80-89: maturité des fruits et des graines",
517 
	        "80-89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
518 
	        "80-89: maturité des fruits et des graines,début sénescence" => "80-89: maturité des fruits et des graines",
519 
	        "80-95" => "80-89: maturité des fruits et des graines",
520 
	        "88  maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
521 
	        "89: maturité des fruits et des graines" => "80-89: maturité des fruits et des graines",
522 
	        "floraison et fructification, graines mûres" => "80-89: maturité des fruits et des graines",
523 
	        "floraison et maturation des graines" => "80-89: maturité des fruits et des graines",
524 
	        "fructification passée" => "80-89: maturité des fruits et des graines",
525 
	        "Fruit" => "80-89: maturité des fruits et des graines",
526 
	        "Fruits" => "80-89: maturité des fruits et des graines",
527 
	        "85" => "85: 50% des fruits matures",
528 
	        "50% des fruits matures (fructification d'Août)î" => "85: 50% des fruits matures",
529 
	        "85, mais avec encore des fleurs" => "85: 50% des fruits matures",
530 
	        "85:" => "85: 50% des fruits matures",
531 
	        "85:   fruits matures 20" => "85: 50% des fruits matures",
532 
	        "85: 50% des fruits mature8" => "85: 50% des fruits matures",
533 
	        "85: 50% des fruits matures" => "85: 50% des fruits matures",
534 
	        "85: 50% des fruits matures0" => "85: 50% des fruits matures",
535 
	        "85: 50% des fruits matures56" => "85: 50% des fruits matures",
536 
	        "85: 50% des fruits matures88" => "85: 50% des fruits matures",
537 
	        "88: 50% des fruits matures" => "85: 50% des fruits matures",
538 
	        "90" => "90-99: sénescence et dormance",
539 
	        "91" => "90-99: sénescence et dormance",
540 
	        "92" => "90-99: sénescence et dormance",
541 
	        "94" => "90-99: sénescence et dormance",
542 
	        "95" => "90-99: sénescence et dormance",
543 
	        "97" => "90-99: sénescence et dormance",
544 
	        "98" => "90-99: sénescence et dormance",
545 
	        "99" => "90-99: sénescence et dormance",
546 
	        "100% de feuilles jaunes" => "90-99: sénescence et dormance",
547 
	        "80% feuillage d'automne" => "90-99: sénescence et dormance",
548 
	        "90-99" => "90-99: sénescence et dormance",
549 
	        "90-99: sénescence et dormance" => "90-99: sénescence et dormance",
550 
	        "95: environ 9% des feuilles jaunes" => "90-99: sénescence et dormance"
551 
	    );
552 
	    foreach ($phenologie as $valeur=>$saisie) {
553 
	        $requete = 'UPDATE '.$this->bd_cel.'.cel_obs SET commentaire = concat(commentaire, " Certitude : ", certitude), phenologie = "'.$saisie.'" WHERE phenologie ="'.$valeur.'"';
554 
	        $this->bdd->requeter($requete);
555 
	        echo "effectuée \n";
556 
	    }
557 
	    $requete_verif = "SELECT certitude FROM ".$this->bd_cel.".cel_obs WHERE certitude NOT IN ('douteux', 'certain', 'à déterminer', '') and certitude is not NULL";
558 
	    $verif = $this->bdd->recupererTous($requete_verif);
559 
	    if ($verif != array()) print_r($verif);
560 
	}
561 
 
3258 delphine 562 
	private function unifierUtilisateur() {
3438 delphine 563 
	    echo "vérification de la présence de l'annuaire \n";
3439 delphine 564 
	    $requete = "SELECT * FROM ".$this->bd_cel.".`users`;";
3438 delphine 565 
	    $result = $this->bdd->requeter($requete);
3439 delphine 566 
	    if ($result === NULL) {echo $requete;
3438 delphine 567 
	        echo "Il manque la table annuaire (à recopier de telaorg users\n";
568 
	        exit;
569 
	    }
570 
 
3297 delphine 571 
	    echo "suppression de le colonne ordre \n";
3439 delphine 572 
	    $requete = "ALTER TABLE ".$this->bd_cel.".cel_obs DROP INDEX id_obs;";
3297 delphine 573 
	    $this->bdd->requeter($requete);
3439 delphine 574 
	    $requete = "ALTER TABLE ".$this->bd_cel.".cel_obs DROP INDEX ordre;";
3297 delphine 575 
	    $this->bdd->requeter($requete);
3456 delphine 576 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` DROP IF EXISTS `ordre`;";
3297 delphine 577 
	    $this->bdd->requeter($requete);
3456 delphine 578 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS pseudo  varchar(250);";
3438 delphine 579 
	    $this->bdd->requeter($requete);
3258 delphine 580 
 
581 
	    echo "modification des observations ayant une adresse mail en identifiant";
3449 delphine 582 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` right join ".$this->bd_cel.".`users` ON `user_email` = ce_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
3438 delphine 583 
	        `courriel_utilisateur` =  `user_email`  WHERE ce_utilisateur like '%@%'";
3258 delphine 584 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
585 
 
586 
	    echo "modification des observations ayant une adresse mail mais pas d'identifiant";
3439 delphine 587 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` join ".$this->bd_cel.".`users` ON `user_email` = courriel_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
3513 delphine 588 
	        `courriel_utilisateur` =  `user_email`  WHERE (ce_utilisateur IS NULL OR CHAR_LENGTH(ce_utilisateur) > 6
3258 delphine 589 
	        OR ce_utilisateur = 0) and courriel_utilisateur like '%@%'";
590 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
591 
 
592 
	    echo "modification des observations ayant un identifiant";
3439 delphine 593 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` join ".$this->bd_cel.".`users` ON ID = ce_utilisateur SET pseudo = user_nicename,
3513 delphine 594 
	        `courriel_utilisateur` =  `user_email` WHERE (ce_utilisateur IS NULL OR char_length(ce_utilisateur) > 6) and (courriel_utilisateur is null or courriel_utilisateur='')";
3258 delphine 595 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
596 
 
3296 delphine 597 
	    echo "suppression des autres valeurs ce_utilisateur";
3513 delphine 598 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_obs` SET ce_utilisateur = NULL, courriel_utilisateur = if (ce_utilisateur like '%@%'and (courriel_utilisateur is null or courriel_utilisateur='') , ce_utilisateur, courriel_utilisateur) WHERE ce_utilisateur IS NOT NULL AND char_length(ce_utilisateur) > 6";
3296 delphine 599 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
600 
 
3438 delphine 601 
	    echo "suppression des obs anonymes";
3513 delphine 602 
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_obs` WHERE (ce_utilisateur IS NULL OR char_length(ce_utilisateur) > 6
3438 delphine 603 
	        OR ce_utilisateur = 0) and (`courriel_utilisateur` is null or `courriel_utilisateur` not like '%@%')";
604 
	    $this->bdd->requeter($requete_anonyme);
3297 delphine 605 
 
3439 delphine 606 
	    $requete_verif = "SELECT `ce_utilisateur`, `prenom_utilisateur`, `nom_utilisateur`, `courriel_utilisateur`  FROM ".$this->bd_cel.".cel_obs
3513 delphine 607 
	            WHERE ce_utilisateur IS NOT NULL OR char_length(ce_utilisateur) > 6";
3438 delphine 608 
	    $verif = $this->bdd->recupererTous($requete_verif);
609 
	    if ($verif != array()) print_r($verif);
610 
	    echo "effectuée \n";
3456 delphine 611 
	    $this->unifierUtilisateurTag("cel_arbre_mots_cles_obs");
612 
	    $this->unifierUtilisateurTag("cel_arbre_mots_cles_images");
3438 delphine 613 
	}
614 
 
3456 delphine 615 
	private function unifierUtilisateurTag($table) {
616 
	    echo "séparation des identifiants en ce_utilisateur et courriel";
617 
	    $requete = "ALTER TABLE ".$this->bd_cel.".".$table." ADD courriel varchar(255);";
618 
	    $this->bdd->requeter($requete);
3462 delphine 619 
	    $requete = "UPDATE ".$this->bd_cel.".".$table." SET courriel = id_utilisateur,
3676 delphine 620 
	        id_utilisateur = 0 WHERE id_utilisateur like '%@%';";
3456 delphine 621 
	    $this->bdd->requeter($requete);
622 
	    echo "recherche des identifiants pour les tags ayant que des courriels dans users";
3461 delphine 623 
	    $requete = "UPDATE ".$this->bd_cel.".".$table." join ".$this->bd_cel.".`users` ON `user_email` = courriel SET `id_utilisateur` = `ID`
3456 delphine 624 
	        WHERE courriel like '%@%';";
625 
	    $this->bdd->requeter($requete);
626 
	    echo "recherche des identifiants pour les tags ayant que des courriels dans obs";
627 
	    $requete = "UPDATE ".$this->bd_cel.".".$table." t join ".$this->bd_cel.".`cel_obs` o ON
3461 delphine 628 
	        `courriel` = courriel_utilisateur SET t.`id_utilisateur` = o.`ce_utilisateur`
3456 delphine 629 
	        WHERE courriel_utilisateur like '%@%';";
630 
	    $this->bdd->requeter($requete);
631 
	    echo "suppression des tags sans identifiant";
3463 delphine 632 
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".".$table." WHERE
3513 delphine 633 
	        (id_utilisateur IS NULL OR trim(id_utilisateur) = '') OR char_length(id_utilisateur) > 6";
3456 delphine 634 
	    $this->bdd->requeter($requete_anonyme);
635 
	    if ($table == "cel_arbre_mots_cles_obs") {
636 
    	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison`
637 
    	        WHERE `id_element_lie` not in (SELECT `id_observation` FROM ".$this->bd_cel.".`cel_obs`)
638 
    	            OR `id_mot_cle` NOT IN (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs`);";
639 
    	    $this->bdd->requeter($requete_anonyme);
640 
	    } else {
641 
	        $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison`
642 
	            WHERE `id_element_lie` not in (SELECT `id_image` FROM ".$this->bd_cel.".`cel_images`)
643 
	                OR `id_mot_cle` NOT IN (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_images`);";
644 
	        $this->bdd->requeter($requete_anonyme);
645 
	    }
646 
	}
647 
 
3663 delphine 648 
	private function unifierInfosEspeces() {
649 
	    echo "maj infos espèces \n";
650 
	    /*$requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD infosnn  varchar(2),
651 
	       ADD bd_nom_sci varchar(250), ADD bd_num_nom int(11), ADD bd_nom_sci_retenu varchar(250),
652 
	       ADD bd_num_nom_retenu int(11) ;";
653 
	    $this->bdd->requeter($requete);
654 
	    */
655 
	    $liste_referentiels = array("bdtfx" => "bdtfx_v6_00", "bdtre" => "bdtre_v1_00",
656 
	        "isfan" => "isfan_v2013", "apd" => "apd_v3_4_0", "bdtxa" => "bdtxa_v1_01",
657 
	        "aublet" => "aublet_v2016_09", "florical" => "florical_v2016_04_22", "lbf" => "lbf_v1_00");
658 
 
659 
	    $this->unifierInfosEspecesBDTFX();
660 
	    foreach ($liste_referentiels as $ref => $version) {
661 
    	    //Num nom et nom sci sont les mêmes
662 
    	    // chercher les versions
663 
    	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs`
664 
    	        join (SELECT `num_nom`, `num_nom_retenu`, `nom_sci`,
665 
    	        case when annee = '' THEN concat(`nom_sci`, ' ', auteur) ELSE concat(`nom_sci`, ' ', auteur, ' [',annee,']') END as nom_sci_complet,
666 
    	        nom_sci_complet_ret FROM ".$this->bd_flore.".".$version.
667 
 
668 
    	        'left join (select `num_nom` as nn, `nom_sci` as nom_sci_ret,
669 
    	        case when annee = "" THEN concat(`nom_sci`, " ", auteur) ELSE concat(`nom_sci`, " ", auteur, " [",annee,"]") END as nom_sci_complet_ret
670 
    	        from ".$this->bd_flore.".".$version." where `num_nom` = `num_nom_retenu`) ret
671 
    	            on `num_nom_retenu` = nn) bdtfx
672 
    	        on `nom_sel_nn` = num_nom and `nom_sel` like concat(nom_sci,"%")
673 
    	        SET `nom_sel` = nom_sci_complet, `nom_sel_nn` = num_nom , `nom_ret` = nom_sci_complet_ret, `nom_ret_nn` = num_nom_retenu,
674 
    	        infosnn = 1
675 
    	        WHERE nom_referentiel = "'.$ref.'"';
676 
    	    $this->bdd->requeter($requete);
677 
 
678 
    	    //Num nom id, nom sci !=
679 
    	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs`
680 
    	        join (SELECT `num_nom`, `num_nom_retenu`, `nom_sci`,
681 
    	        case when annee = '' THEN concat(`nom_sci`, ' ', auteur) ELSE concat(`nom_sci`, ' ', auteur, ' [',annee,']') END as nom_sci_complet,
682 
    	        nom_sci_complet_ret FROM ".$this->bd_flore.".".$version.
683 
 
684 
    	        'left join (select `num_nom` as nn, `nom_sci` as nom_sci_ret,
685 
    	        case when annee = "" THEN concat(`nom_sci`, " ", auteur) ELSE concat(`nom_sci`, " ", auteur, " [",annee,"]") END as nom_sci_complet_ret
686 
    	        from ".$this->bd_flore.".".$version." where `num_nom` = `num_nom_retenu`) ret
687 
    	            on `num_nom_retenu` = nn) bdtfx
688 
    	            on `nom_sel_nn` = num_nom and and (nom_sel like concat(nom_sci,"%") and nom_ret like concat(nom_sci,"%"))
689 
    	                and (nom_sel like concat(nom_sci_ret,"%") and nom_ret like concat(nom_sci_ret,"%"))
690 
    	        SET `nom_sel` = nom_sci_complet, `nom_sel_nn` = num_nom , `nom_ret` = nom_sci_complet_ret, `nom_ret_nn` = num_nom_retenu,
691 
    	        infosnn = 2
692 
    	        WHERE nom_referentiel = "'.$ref.'" and infosnn != 1';
693 
    	    $this->bdd->requeter($requete);
694 
    	    //
695 
	    }
696 
	}
697 
 
698 
	private function unifierInfosEspecesBDTFX() {
699 
	    echo "maj infos espèces \n";
700 
	    /*$requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD infosnn  varchar(2),
701 
	     ADD bd_nom_sci varchar(250), ADD bd_num_nom int(11), ADD bd_nom_sci_retenu varchar(250),
702 
	     ADD bd_num_nom_retenu int(11) ;";
703 
	     $this->bdd->requeter($requete);
704 
	     */
705 
 
706 
	        //Num nom et nom sci sont les mêmes
707 
	        // chercher les versions
708 
	        $requete = "UPDATE ".$this->bd_cel.".`cel_obs`"
709 
    	        .' join bdtfx on `nom_sel_nn` = num_nom and `nom_sel` like concat(nom_sci, "%")
710 
    	            SET `nom_sel` = nom_sci_complet, `nom_sel_nn` = num_nom ,
711 
    	            `nom_ret` = nom_ret_complet, `nom_ret_nn` = num_nom_retenu,
712 
    	            infosnn = 1
713 
    	            where `nom_referentiel` = "bdtfx" ';
714 
	        $this->bdd->requeter($requete);
715 
 
716 
	        //Num nom id, nom sci +-=
717 
	        $requete = "UPDATE ".$this->bd_cel.".`cel_obs`"
718 
	            .' join bdtfx on `nom_sel_nn` = num_nom and and (nom_sel like concat(nom_sci,"%") and nom_ret like concat(nom_sci,"%"))
719 
    	            and (nom_sel like concat(nom_sci_ret,"%") and nom_ret like concat(nom_sci_ret,"%"))
720 
	                SET `nom_sel` = nom_sci_complet, `nom_sel_nn` = num_nom ,
721 
    	            `nom_ret` = nom_ret_complet, `nom_ret_nn` = num_nom_retenu,
722 
    	            infosnn = 2
723 
    	            where `nom_referentiel` = "bdtfx"  and infosnn != "1"';
724 
	        $this->bdd->requeter($requete);
725 
 
726 
	        //Num nom id, nom sci +-=
727 
	        $requete = "UPDATE ".$this->bd_cel.".`cel_obs`"
728 
	            .' join bdtfx on `nom_sel_nn` = num_nom and and (nom_sel not like concat(nom_sci,"%") and nom_ret not like concat(nom_sci,"%"))
729 
    	            and (nom_sel not like concat(nom_sci_ret,"%") and nom_ret not like concat(nom_sci_ret,"%"))
730 
	                SET `bd_nom_sci` = nom_sci_complet, `bd_num_nom` = num_nom ,
731 
    	            `bd_nom_sci_retenu` = nom_ret_complet, `bd_num_nom_retenu` = num_nom_retenu,
732 
    	            infosnn = 3
733 
    	            where `nom_referentiel` = "bdtfx"  and infosnn not in ("1", "2")';
734 
	            $this->bdd->requeter($requete);
735 
	}
736 
 
3438 delphine 737 
	private function supprimerImagesetTagAnonymes() {
3463 delphine 738 
	    echo "vérification de la présence de l'annuaire \n";
739 
	    $requete = "SELECT * FROM ".$this->bd_cel.".`users`;";
740 
	    $result = $this->bdd->requeter($requete);
3663 delphine 741 
	    if ($result === NULL) {
742 
	        echo $requete;
743 
	        echo "Il manque la table annuaire (à recopier de telaorg users\n";
744 
	        exit;
3463 delphine 745 
	    }
746 
 
747 
	    echo "suppression de le colonne ordre \n";
748 
	    $requete = "ALTER TABLE ".$this->bd_cel.".cel_images DROP INDEX id_img;";
749 
	    $this->bdd->requeter($requete);
750 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_images` DROP IF EXISTS `ordre`;";
751 
	    $this->bdd->requeter($requete);
752 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_images` ADD IF NOT EXISTS pseudo  varchar(250);";
753 
	    $this->bdd->requeter($requete);
754 
 
755 
	    echo "modification des images ayant une adresse mail en identifiant";
756 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_images` right join ".$this->bd_cel.".`users` ON `user_email` = ce_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
757 
	        `courriel_utilisateur` =  `user_email`  WHERE ce_utilisateur like '%@%'";
758 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
759 
 
760 
	    echo "modification des images ayant une adresse mail mais pas d'identifiant";
761 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_images` join ".$this->bd_cel.".`users` ON `user_email` = courriel_utilisateur SET `ce_utilisateur` = `ID`, pseudo = user_nicename,
3513 delphine 762 
	        `courriel_utilisateur` =  `user_email`  WHERE (ce_utilisateur IS NULL OR char_length(ce_utilisateur) > 6
3463 delphine 763 
	        OR ce_utilisateur = 0) and courriel_utilisateur like '%@%'";
764 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
765 
 
766 
	    echo "modification des images ayant un identifiant";
767 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_images` join ".$this->bd_cel.".`users` ON ID = ce_utilisateur SET pseudo = user_nicename,
3513 delphine 768 
	        `courriel_utilisateur` =  `user_email` WHERE (ce_utilisateur IS NULL OR char_length(ce_utilisateur) > 6) and (courriel_utilisateur is null or courriel_utilisateur='')";
3463 delphine 769 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
770 
 
771 
	    echo "suppression des autres valeurs ce_utilisateur";
772 
	    $requete_annu_mail = "UPDATE ".$this->bd_cel.".`cel_images` SET ce_utilisateur = NULL, courriel_utilisateur = if (ce_utilisateur like '%@%'and (courriel_utilisateur is null or courriel_utilisateur='') , ce_utilisateur, courriel_utilisateur)
3465 delphine 773 
	        WHERE ce_utilisateur IS NOT NULL AND (LENGTH(ce_utilisateur) > 6 OR trim(ce_utilisateur) = '')";
3463 delphine 774 
	    $utilisateur_mail = $this->bdd->recupererTous($requete_annu_mail);
775 
 
776 
 
3465 delphine 777 
	    echo "suppression des images\n";
3513 delphine 778 
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_images` WHERE (ce_utilisateur IS NULL OR char_length(ce_utilisateur) > 6
3297 delphine 779 
	        OR ce_utilisateur = 0) and (`courriel_utilisateur` is null or `courriel_utilisateur` not like '%@%')";
780 
	    $this->bdd->requeter($requete_anonyme);
3463 delphine 781 
 
782 
 
3456 delphine 783 
	  /*  echo "suppression des tags obs anonymes";
3439 delphine 784 
	    $requete_create = "CREATE TABLE ".$this->bd_cel.".user_mot_cle_absent AS SELECT distinct id_utilisateur FROM ".$this->bd_cel.".cel_arbre_mots_cles_obs WHERE id_utilisateur not in
785 
	            (SELECT distinct id_utilisateur FROM ".$this->bd_cel.".cel_arbre_mots_cles_obs WHERE id_utilisateur in
786 
	            (select distinct ce_utilisateur from ".$this->bd_cel.".cel_obs) or
787 
	            id_utilisateur in (SELECT distinct courriel_utilisateur FROM ".$this->bd_cel.".cel_obs))";
3438 delphine 788 
	    $this->bdd->requeter($requete_create);
3450 delphine 789 
	    $requete_index = "ALTER TABLE ".$this->bd_cel.".`user_mot_cle_absent` ADD PRIMARY KEY(`id_utilisateur`);";
3438 delphine 790 
	    $this->bdd->requeter($requete_index);
3451 delphine 791 
	    $requete_anonyme = "DELETE FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs` WHERE `id_utilisateur` in (SELECT * FROM ".$this->bd_cel.".`user_mot_cle_absent`);";
3297 delphine 792 
	    $this->bdd->requeter($requete_anonyme);
3450 delphine 793 
	    $requete_anonyme = "DROP TABLE ".$this->bd_cel.".user_mot_cle_absent;";
3297 delphine 794 
	    $this->bdd->requeter($requete_anonyme);
3450 delphine 795 
	    $requete_anonyme = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_obs` a join ".$this->bd_cel.".cel_obs b on a.`id_utilisateur` = b.courriel_utilisateur SET a.`id_utilisateur` = b.ce_utilisateur
3438 delphine 796 
	        WHERE b.ce_utilisateur IS NOT NULL AND b.ce_utilisateur != ''";
3456 delphine 797 
	    $this->bdd->requeter($requete_anonyme);*/
798 
 
3258 delphine 799 
	}
800 
 
2893 delphine 801 
	private function unifierNomReferentiel() {
802 
		echo "Uniformisation du nom de référentiel";
3456 delphine 803 
		$referentiels = array("bdtfx", "bdtre", "bdtxa", "apd", "lbf", "isfan");
2893 delphine 804 
		foreach ($referentiels as $referentiel) {
3439 delphine 805 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = '".$referentiel."' WHERE nom_referentiel like '".$referentiel."%'";
2893 delphine 806 
			$this->bdd->requeter($requete);
3513 delphine 807 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'Autre/inconnu' WHERE nom_sel_nn IS NULL or nom_sel_nn = '0'";
2894 delphine 808 
			$this->bdd->requeter($requete);
3456 delphine 809 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'apd' WHERE nom_referentiel like 'bdtao%'";
2895 delphine 810 
			$this->bdd->requeter($requete);
3456 delphine 811 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'bdtfx' WHERE nom_referentiel like 'bdnff%'";
2895 delphine 812 
			$this->bdd->requeter($requete);
2893 delphine 813 
			echo "effectuée \n";
3513 delphine 814 
			$requete = "UPDATE ".$this->bd_cel.".cel_obs SET nom_referentiel = 'Autre/inconnu' WHERE nom_referentiel IS NULL or nom_referentiel = ''";
3296 delphine 815 
			$this->bdd->requeter($requete);
816 
			echo "effectuée \n";
2893 delphine 817 
		}
3513 delphine 818 
		$requete_verif = "SELECT nom_referentiel FROM ".$this->bd_cel.".cel_obs WHERE nom_referentiel NOT IN ('".implode("', '", $referentiels)."', 'Autre/inconnu')";
2893 delphine 819 
		$verif = $this->bdd->recupererTous($requete_verif);
820 
		if ($verif != array()) print_r($verif);
821 
	}
822 
 
3258 delphine 823 
	private function supprimerInfosLiesObsInexistante() {
824 
	    echo "Supprimer infos liés à obs inexistante";
3439 delphine 825 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_obs_etendues` WHERE `id_observation` not in (select `id_observation` from ".$this->bd_cel.".cel_obs);";
3258 delphine 826 
	    $this->bdd->requeter($requete);
3439 delphine 827 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison` WHERE `id_element_lie` not in (select `id_observation` from ".$this->bd_cel.".cel_obs);";
3258 delphine 828 
	    $this->bdd->requeter($requete);
3456 delphine 829 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_obs_liaison` WHERE `id_mot_cle` not in (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_obs`);";
3258 delphine 830 
	    $this->bdd->requeter($requete);
3456 delphine 831 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_images`  WHERE `ce_observation` is not null and `ce_observation` not in (select id_observation from ".$this->bd_cel.".cel_obs)";
3438 delphine 832 
	    $this->bdd->requeter($requete);
3439 delphine 833 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison` WHERE `id_element_lie` not in (select `id_image` from ".$this->bd_cel.".cel_images);";
3438 delphine 834 
	    $this->bdd->requeter($requete);
3456 delphine 835 
	    $requete = "DELETE FROM ".$this->bd_cel.".`cel_mots_cles_images_liaison` WHERE `id_mot_cle` not in (SELECT `id_mot_cle` FROM ".$this->bd_cel.".`cel_arbre_mots_cles_images`);";
3438 delphine 836 
	    $this->bdd->requeter($requete);
3258 delphine 837 
	    echo "effectuée \n";
838 
	}
839 
 
2893 delphine 840 
	private function verifierGeodatum() {
841 
		echo "Uniformisation du geodatum";
3439 delphine 842 
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET geodatum = 'WGS84' WHERE (latitude IS NOT NULL or latitude != '0.00000') AND geodatum IS NULL";
2893 delphine 843 
		$this->bdd->requeter($requete);
3439 delphine 844 
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET geodatum = NULL WHERE (latitude IS NULL or latitude = '0.00000')";
2895 delphine 845 
		$this->bdd->requeter($requete);
2893 delphine 846 
		echo "effectuée \n";
3456 delphine 847 
		echo "Suppression des coordonnées fausses : ";
848 
		$requete = "UPDATE ".$this->bd_cel.".cel_obs SET latitude = NULL, longitude = NULL WHERE latitude < -90 OR latitude > 90 OR longitude < -180 OR longitude > 180";
849 
		$this->bdd->requeter($requete);
850 
		echo "effectuée \n";
2893 delphine 851 
	}
3258 delphine 852 
 
853 
	private function verifierCodeInsee() {
3456 delphine 854 
	    echo "Mise à jour des valeurs code_insee";
855 
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = NULL,
856 
	        commentaire = concat(if(commentaire is null, "", concat(commentaire, ", ")), if(ce_zone_geo is null, "", concat("Zone geo : ",ce_zone_geo))) where `ce_zone_geo` not like "insee-c%"';
857 
	    $this->bdd->requeter($requete);
858 
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = substr(`ce_zone_geo`, 9, 5) where `ce_zone_geo` like "insee-c:%"';
859 
	    $this->bdd->requeter($requete);
860 
	    $requete = 'UPDATE `cel_obs` SET `ce_zone_geo` = NULL where trim(`ce_zone_geo`) = ""';
861 
	    $this->bdd->requeter($requete);
862 
	    echo "effectuée \n";
863 
 
864 
 
3258 delphine 865 
	    echo "Vérification du code insee";
3456 delphine 866 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `locality_consistency` INT(1) ;";
3297 delphine 867 
	    $this->bdd->requeter($requete);
868 
 
3439 delphine 869 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET locality_consistency = '0' WHERE
3258 delphine 870 
	        ((ce_zone_geo != 'INSEE-C:' and ce_zone_geo like 'INSEE-C:%') and code_insee_calcule != '') and
871 
	        replace(`ce_zone_geo`, 'INSEE-C:', '') != `code_insee_calcule`";
872 
	    $this->bdd->requeter($requete);
3439 delphine 873 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET locality_consistency = '1' WHERE
3258 delphine 874 
	        ((ce_zone_geo != 'INSEE-C:' and ce_zone_geo like 'INSEE-C:%') and code_insee_calcule != '') and
3296 delphine 875 
	        replace(`ce_zone_geo`, 'INSEE-C:', '') = `code_insee_calcule`";
876 
	    $this->bdd->requeter($requete);
877 
 
878 
	    $requete_verif = "SELECT `ce_zone_geo`, `code_insee_calcule`, `locality_consistency` FROM `cel_obs` WHERE `locality_consistency` IS NOT NULL";
879 
	    $verif = $this->bdd->recupererTous($requete_verif);
880 
	    if ($verif != array()) print_r($verif);
3258 delphine 881 
	    echo "effectuée \n";
882 
	}
883 
 
884 
	private function analyserMotsCles(){
3296 delphine 885 
	    echo "Input source \n";
3456 delphine 886 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `input_source` VARCHAR(15)";
3297 delphine 887 
	    $this->bdd->requeter($requete);
888 
 
3510 killian 889 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'PlantNet' WHERE `mots_cles_texte` like '%plantnet%'";
3296 delphine 890 
	    $this->bdd->requeter($requete);
3258 delphine 891 
 
3439 delphine 892 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'autre' WHERE `mots_cles_texte` like '%MobileSauvages%'";
3296 delphine 893 
	    $this->bdd->requeter($requete);
894 
 
3447 delphine 895 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'widget' WHERE `mots_cles_texte` like '%Projets coopératifs%' and (input_source = '' OR input_source IS NULL)";
3296 delphine 896 
	    $this->bdd->requeter($requete);
897 
 
3447 delphine 898 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'widget' WHERE `mots_cles_texte` like '%widget%' and (input_source = '' OR input_source IS NULL)";
3296 delphine 899 
	    $this->bdd->requeter($requete);
900 
 
3510 killian 901 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET input_source = 'CEL' WHERE input_source = '' OR input_source IS NULL";
3296 delphine 902 
	    $this->bdd->requeter($requete);
3438 delphine 903 
 
3296 delphine 904 
	    echo "Suppression motcle du chemin \n";
3513 delphine 905 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_obs` SET chemin =
906 
	        if(CHAR_LENGTH(chemin)-CHAR_LENGTH(`mot_cle`) = 2, '\/', substr(`chemin`, 1, CHAR_LENGTH(chemin)-CHAR_LENGTH(`mot_cle`)-2))";
3296 delphine 907 
	    $this->bdd->requeter($requete);
908 
 
3513 delphine 909 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_arbre_mots_cles_images` SET chemin =
910 
	        substr(`chemin`, 1, CHAR_LENGTH(chemin)-CHAR_LENGTH(`mot_cle`)-1)";
3296 delphine 911 
	    $this->bdd->requeter($requete);
912 
 
913 
	    echo "Certitude à certaine quand obs validée sur ip \n";
3439 delphine 914 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c left join
3438 delphine 915 
	        (SELECT distinct `ce_observation`, `nom_sel_nn`
3439 delphine 916 
	        FROM ".$this->bd_del.".`del_commentaire` WHERE `proposition_retenue` = 1) d on
3296 delphine 917 
	        `ce_observation` = `id_observation` SET `certitude` = 'certain'
3438 delphine 918 
	        WHERE (c.`mots_cles_texte` LIKE '%adeterminer%'
3446 delphine 919 
	        or c.`certitude` = 'à déterminer') and c.`nom_sel_nn` = d.`nom_sel_nn`";
3296 delphine 920 
	    $this->bdd->requeter($requete);
921 
 
922 
	    echo "Certitude à douteux quand obs validée sur ip mais num_nom diff entre ip et cel \n";
3439 delphine 923 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c left join
3438 delphine 924 
	        (SELECT distinct `ce_observation`, `nom_sel_nn`
3439 delphine 925 
	        FROM ".$this->bd_del.".`del_commentaire`  WHERE `proposition_retenue` = 1 ) d on
3296 delphine 926 
	        `ce_observation` = `id_observation` SET `certitude` = 'douteux'
3438 delphine 927 
	        WHERE (c.`mots_cles_texte` LIKE '%adeterminer%'
3446 delphine 928 
	        or c.`certitude` = 'à déterminer') and c.`nom_sel_nn` != d.`nom_sel_nn`";
3296 delphine 929 
	    $this->bdd->requeter($requete);
930 
 
931 
	    echo "Certitude à aDeterminer quand obs non validée sur ip \n";
3446 delphine 932 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` c SET `certitude` = 'à déterminer'
3296 delphine 933 
	        WHERE c.`mots_cles_texte` LIKE '%adeterminer%' AND
934 
	        (c.`certitude` = '' or c.certitude IS NULL)";
935 
	    $this->bdd->requeter($requete);
936 
 
3439 delphine 937 
	    $requete = "UPDATE ".$this->bd_cel.".`cel_obs` SET
3296 delphine 938 
	        `mots_cles_texte` = REPLACE(`mots_cles_texte`, 'aDeterminer,', '')
939 
	        WHERE `mots_cles_texte` LIKE '%adeterminer,%'";
940 
	    $this->bdd->requeter($requete);
941 
 
3438 delphine 942 
 
3258 delphine 943 
	}
3303 delphine 944 
 
3438 delphine 945 
 
946 
 
3303 delphine 947 
	private function changerSensible(){
948 
	    echo "Sensible \n";
3456 delphine 949 
	    $requete = "ALTER TABLE ".$this->bd_cel.".`cel_obs` ADD IF NOT EXISTS `published_location` varchar(50)";
3303 delphine 950 
	    $this->bdd->requeter($requete);
951 
 
3439 delphine 952 
	    $requete = "UPDATE ".$this->bd_cel.".cel_obs SET published_location = 'localité' WHERE `mots_cles_texte` like '%sensible%'";
3303 delphine 953 
	    $this->bdd->requeter($requete);
954 
	}
2893 delphine 955 
}