Changeset 2594 for cpc/trunk/project

Timestamp:

Jan 10, 2012, 6:55:16 AM (9 years ago)

Author:

goya

Message:

adaptation load députés aux nouveaux champs du nouveau parseur. WARNING: nouveau DM

Location:

cpc/trunk/project

Files:

• apps/frontend/modules/api/actions/actions.class.php (modified) (4 diffs)
• apps/frontend/modules/parlementaire/templates/_fiche.php (modified) (3 diffs)
• batch/depute/parse_tous.sh (modified) (1 diff)
• config/doctrine/schema.yml (modified) (5 diffs)
• lib/model/doctrine/OrganismeTable.class.php (modified) (3 diffs)
• lib/model/doctrine/Parlementaire.class.php (modified) (3 diffs)
• lib/model/doctrine/Personnalite.class.php (modified) (1 diff)
• lib/task/updateDeputesTask.class.php (modified) (2 diffs)

cpc/trunk/project/apps/frontend/modules/api/actions/actions.class.php

@@ -103 +103 @@
       $this->multi['adresse'] = 1;
       $this->multi['mandat'] = 1;
+      $this->multi['site'] = 1;
     }
     $deputes = $query->execute();
@@ -152 +153 @@
     $this->multi['adresse'] = 1;
     $this->multi['mandat'] = 1;
+    $this->multi['site'] = 1;
     $this->champ = 'depute';
     $this->breakline = '';
@@ -167 +169 @@
     $res['prenom'] = $parl->getPrenom();
     $res['sexe'] = $parl->sexe;
+    $res['date_naissance'] = $parl->date_naissance;
+    $res['lieu_naissance'] = $parl->lieu_naissance;
     $res['num_deptmt'] = $parl->getNumDepartement();
     $res['nom_circo'] = $parl->nom_circo;
@@ -179 +183 @@
     $res['responsabilites'] = self::array2hash($parl->getResponsabilites(), 'responsabilite');
     $res['responsabilites_extra_parlementaires'] = self::array2hash($parl->getExtras(), 'responsabilite');
-    $res['site_web'] = $parl->site_web;
+    $res['groupes_parlementaires'] = self::array2hash($parl->getGroupes(), 'responsabilite');
+    $res['sites_web'] = self::array2hash(unserialize($parl->sites_web), 'site');
     $res['url_an'] = $parl->url_an;
     $res['emails'] = self::array2hash(unserialize($parl->mails), 'email');
     $res['adresses'] = self::array2hash(unserialize($parl->adresses), 'adresse');
+    $res['anciens_mandats'] = self::array2hash(unserialize($parl->anciens_mandats), 'mandat');
     $res['autres_mandats'] = self::array2hash(unserialize($parl->autres_mandats), 'mandat');
+    $res['anciens_autres_mandats'] = self::array2hash(unserialize($parl->anciens_autres_mandats), 'mandat');
     $res['profession'] = $parl->profession;
     $res['place_en_hemicycle'] = $parl->place_hemicycle;

cpc/trunk/project/apps/frontend/modules/parlementaire/templates/_fiche.php

@@ -8 +8 @@
       <li>Mandat clos rempli du <?php echo myTools::displayDate($parlementaire->debut_mandat); ?> au <?php echo myTools::displayDate($parlementaire->fin_mandat); ?></li>
 <?php else : ?>
-      <li>Mandat en cours depuis le <?php echo myTools::displayDate($parlementaire->debut_mandat); ?></li>
-<?php endif; 
+      <li>Mandat en cours depuis le <?php echo myTools::displayDate($parlementaire->debut_mandat); ?>
+      <?php foreach ($missions as $resp)
+        if (preg_match('/^Mission temporaire/', $resp->getNom())) {
+          echo '<br/>&nbsp;(en cours de mission pour le gouvernement)';
+          break;
+        } ?>
+      </li>
+<?php endif;
+      if ($parlementaire->suppleant_de_id && $supplee = $parlementaire->getSuppleantDe())
+        echo '<li>Suppléant'.($parlementaire->sexe == "F" ? 'e' : '').' de&nbsp;: '.link_to($supplee->nom, "@parlementaire?slug=".$supplee->slug).'</li>'; 
       if ($parlementaire->groupe_acronyme != "") : ?>
       <li>Groupe politique : <?php echo link_to(Organisme::getNomByAcro($parlementaire->groupe_acronyme), '@list_parlementaires_groupe?acro='.$parlementaire->groupe_acronyme); ?> (<?php echo $parlementaire->getgroupe()->getFonction(); ?>)</li>
@@ -16 +24 @@
       <li><?php echo link_to('Fiche sur le site de l\'Assemblée nationale', $parlementaire->url_an, array('title' => 'Lien externe', 'rel'=>'nofollow')); ?></li>
       <li><a href="http://fr.wikipedia.org/wiki/<?php echo rawurlencode($parlementaire->nom); ?>">Page sur Wikipédia</a></li>
-      <?php if ($parlementaire->site_web) : ?>
-      <li><?php echo link_to('Site web', $parlementaire->site_web, array('title' => 'Lien externe', 'rel'=>'nofollow')); ?></li>
-      <?php endif; ?>  
+      <?php if ($parlementaire->sites_web) {
+        $moreweb = "";
+        foreach (unserialize($parlementaire->sites_web) as $site) if ($site) {
+                $nomsite = "Site web";
+                if (preg_match('/twitter/', $site)) $nomsite = "Sur Twitter";
+                else if (preg_match('/facebook/', $site)) $nomsite = "Sur Facebook";
+                $link = "<li>".link_to($nomsite, $site, array('title' => 'Lien externe', 'rel'=>'nofollow'))."</li>";
+                if (preg_match('/twitter|facebook/', $site)) $moreweb .= $link;
+                else echo $link;
+        }
+        echo $moreweb;
+      } ?>
     </ul>
     <?php if ($parlementaire->fin_mandat == null || $parlementaire->fin_mandat < $parlementaire->debut_mandat) : ?>
@@ -43 +60 @@
         </li>
         <?php } ?>
+        <?php // if ($parlementaire->getGroupes()) {
+//         echo "<li>Groupes d'études et d'amitié interparlementaires&nbsp;:<ul>";
+//         foreach ($parlementaire->getGroupes() as $groupe)
+//           echo "<li>".link_to($groupe->getNom(),'@list_parlementaires_organisme?slug='.$groupe->getSlug())." (".$groupe->getFonction().")</li>";
+//         echo "</ul></li>";
+//       } ?>
       </ul>
       <?php endif; ?> <!-- else : ajouter les infos venant de parsing ancien (anciennes responsabilités) et avant les respon actuelles de ministre machin via les personnalites get fonctions? -->

cpc/trunk/project/batch/depute/parse_tous.sh

@@ -17 +17 @@
             echo $ID;
     fi
-    perl parse_depute.pl html/$ID.asp > out/$ID.xml
+#    perl parse_depute.pl html/$ID.asp > out/$ID.xml
+    perl parse_depute.new html/$ID.asp > out/$ID.xml
 done

cpc/trunk/project/config/doctrine/schema.yml

@@ -17 +17 @@
       type: enum
       values: ['H', 'F']
+    date_naissance: date
+    lieu_naissance: string(255)
   inheritance:
     extends: ObjectCommentable
@@ -28 +30 @@
       description: [villes]
       moretags: [profession]
+      date: debut_mandat
   columns:
     nom_circo: string(255)
     num_circo: integer
-    site_web: string(255)
+    sites_web: string
     debut_mandat: date
     fin_mandat: date
@@ -46 +49 @@
     groupe_acronyme: string(8)
     adresses: string
+    suppleant_de_id: integer
+    anciens_mandats: string
     autres_mandats: string
+    anciens_autres_mandats: string
     mails: string
     top: string
@@ -58 +64 @@
       refClass: ParlementaireOrganisme
       foreignAlias: Parlementaires
+    SuppleantDe:
+      class: Parlementaire
+      local: suppleant_de_id
+      foreignAlias: Suppleants
   indexes:
     uniq_url:
@@ -87 +97 @@
     type:
       type: enum
-      values: ['parlementaire', 'groupe', 'extra']
+      values: ['parlementaire', 'groupe', 'extra', 'groupes']
 
 ParlementaireOrganisme:

cpc/trunk/project/lib/model/doctrine/OrganismeTable.class.php

@@ -23 +23 @@
     $org = $this->createQuery('o')
       ->where('o.nom LIKE ?', $nom.'%')
+      ->andWhere('o.type = ?', $type)
       ->orderBy('LENGTH(o.nom) DESC')
       ->fetchOne();
-    if ($type != 'parlementaire' || strlen($org->nom) < 50)
+    if ($type != 'parlementaire' || !$org || strlen($org->nom) < 50)
       $org = $this->findOneByNom($nom);
 
@@ -37 +38 @@
     }
    // echo "- $nom (pas trouve)\n";
-    
 
     $orgs = Doctrine::getTable('Organisme')->createQuery('o')->where('type = ?', $type)->execute();
@@ -67 +67 @@
     $nom = strtolower($nom);
     $nom = preg_replace('/(&#8217;|\')/', '’', $nom);
-    $nom = preg_replace('/\W+$/', '', $nom);
+    $nom = preg_replace('/[^a-zàâéèêëîïôùûü]+$/', '', $nom);
     $nom = preg_replace('/\([^\)]*\)/', '', $nom);
     $nom = preg_replace('/\([^\)]*$/', '', $nom);

cpc/trunk/project/lib/model/doctrine/Parlementaire.class.php

@@ -118 +118 @@
   public function setGroupe($array) {
     return $this->setPOrganisme('groupe', $array);
+  }
+  public function setGroupes($array) {
+    return $this->setPOrganisme('groupes', $array);
   }
 
@@ -183 +186 @@
     $this->_set('autres_mandats', serialize($array));
   }
+  public function setAnciensMandats($array) {
+    $this->_set('anciens_mandats', serialize($array));
+  }
+  public function setAnciensAutresMandats($array) {
+    $this->_set('anciens_autres_mandats', serialize($array));
+  }
+  public function setSuppleantDe($nom) {
+    if ($p = doctrine::getTable('Parlementaire')->findOneByNomSexeGroupeCirco($nom))
+      $this->_set('SuppleantDe', $p);
+  }
   public function setMails($array) {
     $this->_set('mails', serialize($array));
+  }
+  public function setSitesWeb($array) {
+    $this->_set('sites_web', serialize($array));
   }
   public function setAdresses($array) {
@@ -202 +218 @@
       if ($po->type == 'extra') 
         array_push($res, $po);
+    }
+    return $res;
+  }
+  public function getGroupes() {
+    $res = array();
+    foreach($this->getParlementaireOrganismes() as $po) {
+      if ($po->type == 'groupes')
+        array_push($res, $po);
     }
     return $res;

cpc/trunk/project/lib/model/doctrine/Personnalite.class.php

@@ -20 +20 @@
     return null;
   }
+
+  public function setDateNaissance($str) {
+    if (preg_match('/(\d{2})\/(\d{2})\/(\d{4})/', $str, $m)) {
+      $this->_set('date_naissance', $m[3].'-'.$m[2].'-'.$m[1]);
+    }
+  }
+
 }

cpc/trunk/project/lib/task/updateDeputesTask.class.php

@@ -51 +51 @@
               $parl->sexe = $json->sexe;
             }
+            if ($json->date_naissance)
+              $parl->date_naissance = $json->date_naissance;
+            if ($json->lieu_naissance)
+              $parl->lieu_naissance = $json->lieu_naissance;
             if ($json->circonscription)
               $parl->circonscription = $json->circonscription;
             if (count($json->adresses))
               $parl->adresses = $json->adresses;
+            if (count($json->premiers_mandats))
+              $parl->anciens_mandats = $json->premiers_mandats;
             if (count($json->autresmandats))
               $parl->autres_mandats = $json->autresmandats;
+            if (count($json->anciensmandats))
+              $parl->anciens_autres_mandats = $json->anciensmandats;
             if ($json->groupe)
               $parl->groupe = $this->splitArrayJson($json->groupe);
+            if (count($json->fonctions))
+              $parl->fonctions = $this->splitArrayJson($json->fonctions);
             if (count($json->extras))
               $parl->extras = $this->splitArrayJson($json->extras);
-            if (count($json->fonctions))
-              $parl->fonctions = $this->splitArrayJson($json->fonctions);
+            if (count($json->groupes))
+              $parl->groupes = $this->splitArrayJson($json->groupes);
             $parl->debut_mandat = $json->debut_mandat;
             $parl->fin_mandat = $json->fin_mandat;
             if ($json->id_an)
-              $parl->id_an = $json->id_an;
+              $parl->id_an = $json->id_institution;
             if (count($json->mails))
                 $parl->mails = $json->mails;
@@ -75 +85 @@
             if ($json->profession)
               $parl->profession = $json->profession;
-            if ($json->site_web)
-              $parl->site_web = $json->site_web;
+            if (count($json->sites_web))
+              $parl->sites_web = $json->sites_web;
             if ($json->url_an)
-              $parl->url_an = $json->url_an;
+              $parl->url_an = $json->url_institution;
+            if ($json->suppleant_de)
+              $parl->setSuppleantDe($json->suppleant_de);
             $parl->villes = $villes->{$parl->getNumDepartement()}->{$parl->num_circo};
             $parl->save();
+            if ($json->suppleant) {
+              $suppl = Doctrine::getTable('Parlementaire')->findOneByNom(preg_replace('/^\s*M[.mle]* /', '', $json->suppleant));
+              if ($suppl) {
+                $suppl->setSuppleantDe($parl->nom);
+                $suppl->save();
+              }              
+            }
           }
         }