mn2_rec.py 32 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585586587588589590591592593594595
  1. '''
  2. Schéma de validation des données MN2
  3. @author: olivier.massot, 2018
  4. '''
  5. import logging
  6. from qgis.core import QgsProject
  7. from core.cerberus_ import is_float, is_multi_int, is_int, \
  8. is_modern_french_date, CerberusValidator, CerberusErrorHandler, \
  9. _translate_messages, is_positive_int, is_strictly_positive_float, \
  10. is_positive_float, is_strictly_positive_int
  11. from core.checking import BaseChecker
  12. from core.mncheck import QgsModel
  13. logger = logging.getLogger("mncheck")
  14. SCHEMA_NAME = "Schéma MN v2 REC"
  15. STATUTS = ['EN ETUDE', 'EN REALISATION', 'EN SERVICE', 'HORS SERVICE',
  16. 'En étude', 'En réalisation', 'En service', 'Hors service']
  17. XMIN, XMAX, YMIN, YMAX = 1341999, 1429750, 8147750, 8294000
  18. CRS = 'EPSG:3949' # Coordinate Reference System
  19. TOLERANCE = 1.0
  20. ##### Modeles
  21. class Artere(QgsModel):
  22. layername = "artere_geo"
  23. geom_type = QgsModel.GEOM_LINE
  24. crs = CRS
  25. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  26. pk = "AR_CODE"
  27. schema = {'AR_CODE': {'type': 'string', 'empty': False, 'maxlength': 30},
  28. 'AR_NOM': {'type': 'string', 'empty': False, 'maxlength': 30},
  29. 'AR_ID_INSE': {'type': 'string', 'empty': False, 'regex': r'50\d{3}'},
  30. 'AR_LONG': {'empty': False, 'validator': is_float},
  31. 'AR_ETAT': {'type': 'string', 'empty': False, 'allowed': ['0', '1', '2', '3', '4']},
  32. 'AR_OCCP': {'type': 'string', 'empty': False, 'allowed': ['0', '1.1', '1.2', '2', '3', '4']},
  33. 'AR_NOEUD_A': {'type': 'string', 'empty': False, 'maxlength': 30},
  34. 'AR_NOEUD_B': {'type': 'string', 'empty': False, 'maxlength': 30},
  35. 'AR_NB_FOUR': {'empty': False, 'validator': is_multi_int},
  36. 'AR_FOU_DIS': {'empty': False, 'validator': is_int},
  37. 'AR_TYPE_FO': {'type': 'string', 'empty': False, 'multiallowed': ['PVC', 'PEHD', 'SOUS-TUBAGE PEHD', 'SOUS-TUBAGE SOUPLE', 'FACADE', 'AERIEN', 'ENCORBELLEMENT', 'AUTRE']},
  38. 'AR_TYFO_AI': {'type': 'string', 'empty': False, 'multiallowed': ['PVC', 'PEH', 'TUB', 'FAC', 'ENC', 'APP']},
  39. 'AR_DIAM_FO': {'type': 'string', 'multiallowed': ['10', '14', '18', '25', '28', '32', '40', '45', '60', '80', '150', 'NUL', '']},
  40. 'AR_PRO_FOU': {'type': 'string', 'empty': False, 'multiallowed': ['MANCHE NUMERIQUE', 'COLLECTIVITE', 'ORANGE', 'PRIVE', 'ERDF', 'AUTRE (à préciser)']},
  41. 'AR_FAB': {'type': 'string', 'empty': False, 'maxlength': 100},
  42. 'AR_REFFAB': {'type': 'string', 'empty': False, 'maxlength': 100},
  43. 'AR_COULEUR': {'type': 'string', 'empty': False, 'maxlength': 20},
  44. 'AR_AIGUIL': {'type': 'string', 'empty': False, 'maxlength': 3, 'allowed': ['OUI', 'NON']},
  45. 'AR_NBCABL': {'empty': False, 'validator': is_positive_int},
  46. 'AR_PRO_CAB': {'type': 'string', 'empty': False, 'allowed': ['MANCHE NUMERIQUE']},
  47. 'AR_GEST_FO': {'type': 'string', 'multiallowed': ['MANCHE NUMERIQUE', 'MANCHE TELECOM', 'COLLECTIVITE', 'ORANGE', 'MANCHE FIBRE', 'PRIVE', 'ERDF', 'AUTRE (à préciser)', 'NUL']},
  48. 'AR_UTIL_FO': {'type': 'string', 'multiallowed': ['MANCHE NUMERIQUE', 'MANCHE TELECOM', 'COLLECTIVITE', 'ORANGE', 'MANCHE FIBRE', 'PRIVE', 'AUTRE (à préciser)', 'NUL', '']},
  49. 'AR_DATE_IN': {'empty': True, 'validator': is_modern_french_date},
  50. 'AR_DATE_RE': {'empty': True, 'validator': is_modern_french_date},
  51. 'AR_REF_PLA': {'type': 'string', 'maxlength': 100},
  52. 'AR_SRC_GEO': {'type': 'string', 'empty': False, 'maxlength': 50},
  53. 'AR_QLT_GEO': {'type': 'string', 'empty': False, 'allowed': ['A', 'B', 'C']},
  54. 'AR_PRO_MD': {'type': 'string', 'empty': False, 'default': 'MANCHE NUMERIQUE', 'allowed': ['MANCHE NUMERIQUE']},
  55. 'AR_COMMENT': {'type': 'string', 'maxlength': 300, 'empty': True},
  56. 'AR_STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  57. class Cable(QgsModel):
  58. layername = "cable_geo"
  59. geom_type = QgsModel.GEOM_LINE
  60. crs = CRS
  61. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  62. pk = "CA_CODE"
  63. schema = {'CA_CODE': {'type': 'string', 'empty': False, 'maxlength': 30},
  64. 'CA_NOM': {'type': 'string', 'empty': False, 'maxlength': 30},
  65. 'CA_NUMERO': {'type': 'string', 'empty': False, 'maxlength': 30},
  66. 'CA_EMPRISE': {'type': 'string', 'empty': False, 'maxlength': 10},
  67. 'CA_FAB': {'type': 'string', 'empty': False, 'maxlength': 100},
  68. 'CA_REFFAB': {'type': 'string', 'empty': False, 'maxlength': 100},
  69. 'CA_MODELE': {'type': 'string', 'empty': False, 'maxlength': 10},
  70. 'CA_TYPE': {'type': 'string', 'maxlength': 10, 'empty': False, 'allowed': ['AERIEN', 'IMMEUBLE', 'FACADE', 'MIXTE', 'SOUTERRAIN']},
  71. 'CA_TYPFCT': {'type': 'string', 'maxlength': 3, 'empty': False, 'allowed': ['CDI', 'CTR', 'CBM', 'RAC', 'CBO']},
  72. 'CA_ETAT': {'type': 'string', 'maxlength': 1, 'empty': False, 'allowed': ['0', '1', '2', '3', '4']},
  73. 'CA_LONG': {'empty': False, 'validator': is_strictly_positive_float},
  74. 'CA_EQ_A': {'type': 'string', 'empty': False, 'maxlength': 30},
  75. 'CA_EQ_B': {'type': 'string', 'empty': False, 'maxlength': 30},
  76. 'CA_DIAMETR': {'empty': False, 'validator': is_positive_float},
  77. 'CA_COULEUR': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['NOIR', 'BLEU', 'BLANC']},
  78. 'CA_TECHNOL': {'type': 'string', 'maxlength': 17, 'empty': False, 'allowed': ['G657A2_M6', 'G657A2_M12']},
  79. 'CA_NB_FO_U': {'empty': False, 'validator': is_positive_int},
  80. 'CA_NB_FO_D': {'empty': False, 'validator': is_positive_int},
  81. 'CA_PRO': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['MANCHE NUMERIQUE']},
  82. 'CA_GEST': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['MANCHE FIBRE']},
  83. 'CA_DATE_IN': {'empty': False, 'validator': is_modern_french_date},
  84. 'CA_COMMENT': {'type': 'string', 'maxlength': 300, 'empty': True},
  85. 'CA_STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  86. class Equipement(QgsModel):
  87. layername = "equipement_passif"
  88. geom_type = QgsModel.GEOM_POINT
  89. crs = CRS
  90. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  91. pk = "EQ_CODE"
  92. schema = {'EQ_CODE': {'type': 'string', 'empty': False, 'maxlength': 30},
  93. 'EQ_NOM': {'type': 'string', 'empty': False, 'maxlength': 30},
  94. 'EQ_NOM_NOE': {'type': 'string', 'empty': False, 'maxlength': 30},
  95. 'EQ_REF': {'type': 'string', 'empty': False, 'maxlength': 100},
  96. 'EQ_EMPRISE': {'type': 'string', 'empty': False, 'maxlength': 7},
  97. 'EQ_FABR': {'type': 'string', 'empty': False, 'maxlength': 100},
  98. 'EQ_CAPFO': {'empty': False, 'validator': is_strictly_positive_int},
  99. 'EQ_NBMXEQ': {'empty': False, 'validator': is_strictly_positive_int},
  100. 'EQ_NBCAB': {'empty': False, 'validator': is_strictly_positive_int},
  101. 'EQ_DIMENS': {'type': 'string', 'empty': False, 'maxlength': 50},
  102. 'EQ_TYPEQ': {'type': 'string', 'empty': False, 'maxlength': 100},
  103. 'EQ_ETAT': {'type': 'string', 'empty': False, 'allowed': ['0', '1', '2', '3', '4']},
  104. 'EQ_OCCP': {'type': 'string', 'empty': False, 'allowed': ['0', '1.1', '1.2', '2', '3', '4']},
  105. 'EQ_TYPE': {'type': 'string', 'empty': False, 'allowed': ['PBO', 'PBOE', 'BPE', 'BAI']},
  106. 'EQ_TYPSTRC': {'type': 'string', 'empty': False, 'allowed': ['CHAMBRE', 'AERIEN', 'FACADE', 'COLONNE MONTANTE', 'PIED IMMEUBLE', 'DTIO']},
  107. 'EQ_TYPE_LQ': {'type': 'string', 'empty': False, 'allowed': ['PBO', 'BPE JB', 'BPE JD', 'BAIDC', 'BAIOP']},
  108. 'EQ_TYPE_PH': {'type': 'string', 'empty': False, 'allowed': ['PBO 6', 'PBO 12', 'BPE 12EP', 'BPE 24EP', 'BPE 48EP', 'BPE 72EP', 'BPE 96EP', 'BPE 144EP', 'BPE 288EP', 'BPE 576EP', 'BPE 720EP', 'BAI']},
  109. 'EQ_PRO': {'type': 'string', 'empty': False, 'allowed': ['MANCHE NUMERIQUE', 'COLLECTIVITE', 'ORANGE', 'PRIVE', 'AUTRE (à préciser)', 'NUL']},
  110. 'EQ_GEST': {'type': 'string', 'empty': False, 'allowed': ['MANCHE NUMERIQUE', 'MANCHE TELECOM', 'COLLECTIVITE', 'ORANGE', 'MANCHE FIBRE', 'PRIVE', 'AUTRE (à préciser)', 'NUL']},
  111. 'EQ_HAUT': {'empty': True, 'validator': is_positive_float},
  112. 'EQ_DATE_IN': {'empty': False, 'validator': is_modern_french_date},
  113. 'EQ_COMMENT': {'type': 'string', 'maxlength': 300, 'empty': True},
  114. 'EQ_STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  115. class Noeud(QgsModel):
  116. layername = "noeud_geo"
  117. geom_type = QgsModel.GEOM_POINT
  118. crs = CRS
  119. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  120. pk = "NO_CODE"
  121. schema = {'NO_CODE': {'type': 'string', 'empty': False, 'maxlength': 30},
  122. 'NO_NOM': {'type': 'string', 'empty': False, 'maxlength': 30},
  123. 'NO_ID_INSE': {'type': 'string', 'empty': False, 'regex': r'50\d{3}'},
  124. 'NO_VOIE': {'type': 'string', 'empty': False, 'maxlength': 100},
  125. 'NO_EMPRISE': {'type': 'string', 'empty': False, 'maxlength': 7},
  126. 'NO_ETAT': {'type': 'string', 'empty': False, 'allowed': ['0', '1', '2', '3', '4']},
  127. 'NO_OCCP': {'type': 'string', 'empty': False, 'allowed': ['0', '1.1', '1.2', '2', '3', '4']},
  128. 'NO_TYPE': {'type': 'string', 'empty': False, 'allowed': ['CHA', 'POT', 'LTE', 'SEM', 'FAC', 'OUV', 'IMM']},
  129. 'NO_TYPFCT': {'type': 'string', 'empty': False, 'allowed': ['INTERCONNEXION', 'SATELLITE', 'PASSAGE', 'REGARD', 'INDETERMINE']},
  130. 'NO_TYPE_LQ': {'type': 'string', 'empty': False, 'allowed': ['CHTIR', 'CHRACC', 'POT', 'NRO', 'PM', 'MIMO', 'FAC', 'OUV', 'IMM']},
  131. 'NO_TYPE_PH': {'type': 'string', 'empty': False, 'allowed': ['CHAMBRE', 'POTEAU', 'ARMOIRE', 'SHELTER', 'BATIMENT', 'SITE MIMO', 'FACADE', 'OUVRAGE', 'IMMEUBLE']},
  132. 'NO_CODE_PH': {'type': 'string', 'maxlength': 20},
  133. 'NO_TECH_PS': {'type': 'string', 'maxlength': 20, 'multiallowed': ['COAX', 'CUT', 'ECL', 'ELEC', 'VP', 'OPT', 'NC']},
  134. 'NO_AMO': {'type': 'string', 'maxlength': 30},
  135. 'NO_PLINOX': {'required':False, 'type': 'string', 'maxlength': 3, 'allowed': ['OUI', 'NON']},
  136. 'NO_X': {'validator': is_float},
  137. 'NO_Y': {'validator': is_float},
  138. 'NO_PRO': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['MANCHE NUMERIQUE', 'COLLECTIVITE', 'ORANGE', 'ERDF', 'PRIVE', 'ENEDIS', 'AUTRE (à préciser)', 'NUL']},
  139. 'NO_GEST': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['MANCHE NUMERIQUE', 'MANCHE TELECOM', 'COLLECTIVITE', 'ORANGE', 'ERDF', 'ENEDIS', 'MANCHE FIBRE', 'PRIVE', 'AUTRE (à préciser)', 'NUL']},
  140. 'NO_HAUT': {'validator': is_positive_float},
  141. 'NO_DATE_IN': {'empty': False, 'validator': is_modern_french_date},
  142. 'NO_REF_PLA': {'type': 'string', 'maxlength': 100},
  143. 'NO_SRC_GEO': {'type': 'string', 'maxlength': 50},
  144. 'NO_QLT_GEO': {'type': 'string', 'maxlength': 1, 'empty': False, 'allowed': ['A', 'B', 'C']},
  145. 'NO_PRO_MD': {'type': 'string', 'maxlength': 20, 'empty': False, 'allowed': ['MANCHE NUMERIQUE']},
  146. 'NO_COMMENT': {'type': 'string', 'maxlength': 300, 'empty': True},
  147. 'NO_STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  148. class Tranchee(QgsModel):
  149. layername = "tranchee_geo"
  150. geom_type = QgsModel.GEOM_LINE
  151. crs = CRS
  152. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  153. pk = "TR_CODE"
  154. schema = {'TR_CODE': {'type': 'string', 'empty': False, 'maxlength': 30},
  155. 'TR_NOM': {'type': 'string', 'empty': False, 'maxlength': 30},
  156. 'TR_ID_INSE': {'type': 'string', 'empty': False, 'regex': r'50\d{3}'},
  157. 'TR_VOIE': {'type': 'string', 'empty': False, 'maxlength': 200},
  158. 'TR_TYP_IMP': {'type': 'string', 'empty': False, 'allowed': ['ACCOTEMENT STABILISE', 'ACCOTEMENT NON STABILISE', 'CHAUSSEE LOURDE', 'CHAUSSEE LEGERE', 'FOSSE', 'TROTTOIR', 'ESPACE VERT', 'ENCORBELLEMENT']},
  159. 'TR_MOD_POS': {'type': 'string', 'empty': False, 'allowed': ['TRADITIONNEL', 'MICRO TRANCHEE', 'FONCAGE 60', 'FONCAGE 90', 'FONCAGE 120', 'TRANCHEUSE', 'FORAGE URBAIN', 'FORAGE RURAL', 'ENCORBELLEMENT']},
  160. 'TR_MPOS_AI': {'type': 'string', 'empty': False, 'allowed': ['TRA', 'ALL', 'FONCAGE 60', 'FON', 'FOR', 'ENC']},
  161. 'TR_LONG': {'empty': True, 'validator': is_strictly_positive_float},
  162. 'TR_LARG': {'empty': True, 'validator': is_strictly_positive_float},
  163. 'TR_REVET': {'empty':True, 'type': 'string', 'allowed': ['SABLE', 'BICOUCHE', 'ENROBE', 'BETON', 'PAVE', 'TERRAIN NATUREL']},
  164. 'TR_CHARGE': {'empty': True, 'validator': is_positive_float},
  165. 'TR_GRILLAG': {'empty':True, 'validator': is_positive_float},
  166. 'TR_REMBLAI': {'type': 'string', 'maxlength': 50},
  167. 'TR_PLYNOX': {'type': 'string', 'empty': False, 'allowed': ['OUI', 'NON']},
  168. 'TR_PRO_VOI': {'type': 'string', 'empty': False, 'allowed': ['COMMUNE', 'COMMUNAUTE DE COMMUNES', 'DEPARTEMENT', 'ETAT', 'PRIVE']},
  169. 'TR_GEST_VO': {'type': 'string', 'empty': False, 'allowed': ['COMMUNE', 'COMMUNAUTE DE COMMUNES', 'DEPARTEMENT', 'ETAT', 'PRIVE']},
  170. 'TR_SCHEMA': {'maxlength': 100, 'type': 'string'},
  171. 'TR_DATE_IN': {'empty': False, 'validator': is_modern_french_date},
  172. 'TR_SRC_GEO': {'type': 'string', 'maxlength': 50},
  173. 'TR_QLT_GEO': {'type': 'string', 'empty': False, 'allowed': ['A', 'B', 'C']},
  174. 'TR_PRO_MD': {'type': 'string', 'empty': False, 'maxlength': 20, 'allowed': ['MANCHE NUMERIQUE']},
  175. 'TR_COMMENT': {'type': 'string', 'maxlength': 300, 'empty': True},
  176. 'TR_STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  177. class Zapbo(QgsModel):
  178. layername = "zapbo_geo"
  179. geom_type = QgsModel.GEOM_POLYGON
  180. crs = CRS
  181. bounding_box = (XMIN,YMIN,XMAX,YMAX)
  182. pk = "ID_ZAPBO"
  183. schema = {'ID_ZAPBO': {'type': 'string', 'empty': False, 'maxlength': 30, 'contains_any_of': ['PBO', 'BPE', 'PEC']},
  184. 'COMMENTAIR': {'type': 'string', 'maxlength': 254, 'empty': True},
  185. 'STATUT': {'type': 'string', 'empty': False, 'allowed': STATUTS}}
  186. models = [Artere, Cable, Equipement, Noeud, Tranchee, Zapbo]
  187. ####### Validateur
  188. class Mn2Checker(BaseChecker):
  189. def setUp(self):
  190. self.dataset = {}
  191. for model in models:
  192. model.layer = next((l for l in QgsProject.instance().mapLayers().values() \
  193. if l.name().lower() == model.layername.lower()), None)
  194. self.dataset[model] = [model(f) for f in model.layer.getFeatures()]
  195. self.arteres = self.dataset.get(Artere, [])
  196. self.cables = self.dataset.get(Cable, [])
  197. self.equipements = self.dataset.get(Equipement, [])
  198. self.noeuds = self.dataset.get(Noeud, [])
  199. self.tranchees = self.dataset.get(Tranchee, [])
  200. self.zapbos = self.dataset.get(Zapbo, [])
  201. for artere in self.arteres:
  202. artere.noeud_a = next((n for n in self.noeuds if n.NO_CODE == artere.AR_NOEUD_A), None)
  203. artere.noeud_b = next((n for n in self.noeuds if n.NO_CODE == artere.AR_NOEUD_B), None)
  204. for cable in self.cables:
  205. cable.equipement_a = next((e for e in self.equipements if e.EQ_CODE == cable.CA_EQ_A), None)
  206. cable.equipement_b = next((e for e in self.equipements if e.EQ_CODE == cable.CA_EQ_B), None)
  207. for equipement in self.equipements:
  208. equipement.noeud = next((n for n in self.noeuds if n.NO_CODE == equipement.EQ_NOM_NOE), None)
  209. def test_load_layers(self):
  210. """ Chargement des données
  211. Contrôle la présence des couches attendues
  212. """
  213. for model in models:
  214. if model.layer is None:
  215. self.log_critical("Couche manquante", model=model)
  216. continue
  217. if model.pk:
  218. if not model.pk.lower() in [f.name().lower() for f in model.layer.fields()]:
  219. self.log_critical(f"Clef primaire manquante ({model.pk})", model=model)
  220. continue
  221. def test_scr(self):
  222. """ Contrôle des projections
  223. Vérifie que les couches ont le bon sytème de projection
  224. """
  225. for model in models:
  226. if model.layer.crs().authid() != model.crs:
  227. self.log_error(f"Mauvaise projection (attendu: {model.crs})", model=model)
  228. def _validate_structure(self, model, items):
  229. v = CerberusValidator(model.schema, purge_unknown=True, error_handler=CerberusErrorHandler, require_all=True)
  230. for item in items:
  231. v.validate(item.__dict__)
  232. for field, verrors in v.errors.items():
  233. for err in verrors:
  234. self.log_error(f"{field} : {_translate_messages(err)}", item=item)
  235. def test_structure_arteres(self):
  236. """ Structure des données: Artères
  237. Contrôle les données attributaires de la couche ARTERE_GEO:
  238. présence, format, valeurs autorisées...
  239. """
  240. self._validate_structure(Artere, self.arteres)
  241. def test_structure_cables(self):
  242. """ Structure des données: Cables
  243. Contrôle les données attributaires de la couche CABLE_GEO:
  244. présence, format, valeurs autorisées...
  245. """
  246. self._validate_structure(Cable, self.cables)
  247. def test_structure_equipements(self):
  248. """ Structure des données: Equipements
  249. Contrôle les données attributaires de la couche EQUIPEMENT_GEO:
  250. présence, format, valeurs autorisées...
  251. """
  252. self._validate_structure(Equipement, self.equipements)
  253. def test_structure_noeuds(self):
  254. """ Structure des données: Noeuds
  255. Contrôle les données attributaires de la couche NOEUD_GEO:
  256. présence, format, valeurs autorisées...
  257. """
  258. self._validate_structure(Noeud, self.noeuds)
  259. def test_structure_tranchees(self):
  260. """ Structure des données: Tranchées
  261. Contrôle les données attributaires de la couche TRANCHEE_GEO:
  262. présence, format, valeurs autorisées...
  263. """
  264. self._validate_structure(Tranchee, self.tranchees)
  265. def test_structure_zapbos(self):
  266. """ Structure des données: Zapbos
  267. Contrôle les données attributaires de la couche ZAPBO_GEO:
  268. présence, format, valeurs autorisées...
  269. """
  270. self._validate_structure(Zapbo, self.zapbos)
  271. def test_geometry_validity(self):
  272. """ Contrôle de la validité des géométries
  273. """
  274. for model in models:
  275. for item in self.dataset[model]:
  276. if not item.is_geometry_valid():
  277. self.log_error("La géométrie de l'objet est invalide", item=item)
  278. def test_geometry_type(self):
  279. """ Contrôle des types de géométries
  280. """
  281. for model in models:
  282. for item in self.dataset[model]:
  283. item_geom_type = item.get_geom_type()
  284. if item_geom_type != model.geom_type:
  285. self.log_error(f"Type de géométrie invalide (attendu: {QgsModel.GEOM_NAMES[model.geom_type]}, trouvé: {QgsModel.GEOM_NAMES[item_geom_type]})", item=item)
  286. def test_bounding_box(self):
  287. """ Contrôle des emprises
  288. Vérifie que les objets sont dans le périmètre attendu
  289. """
  290. for model in models:
  291. xmin, ymin, xmax, ymax = model.bounding_box
  292. for item in self.dataset[model]:
  293. if not item.is_geometry_valid():
  294. continue
  295. x1, y1, x2, y2 = item.get_bounding_box()
  296. if any(x < xmin or x > xmax for x in (x1, x2)) or \
  297. any(y < ymin or y > ymax for y in (y1, y2)):
  298. self.log_error("Hors de l'emprise autorisée", item=item)
  299. def test_duplicates(self):
  300. """ Recherche de doublons
  301. Recherche d'éventuels doublons dans des champs qui supposent l'unicité
  302. """
  303. tmp = []
  304. for noeud in self.noeuds:
  305. if not noeud.NO_NOM:
  306. continue
  307. if not noeud.NO_NOM in tmp:
  308. tmp.append(noeud.NO_NOM)
  309. else:
  310. self.log_error("Doublons dans le champs NO_NOM", item=noeud)
  311. tmp = []
  312. for equipement in self.equipements:
  313. if not equipement.EQ_NOM:
  314. continue
  315. if not equipement.EQ_NOM in tmp:
  316. tmp.append(equipement.EQ_NOM)
  317. else:
  318. self.log_error("Doublons dans le champs EQ_NOM", item=equipement)
  319. tmp = []
  320. for zapbo in self.zapbos:
  321. if not zapbo.ID_ZAPBO:
  322. continue
  323. if not zapbo.ID_ZAPBO in tmp:
  324. tmp.append(zapbo.ID_ZAPBO)
  325. else:
  326. self.log_error("Doublons dans le champs ID_ZAPBO", item=zapbo)
  327. def test_constraints_arteres_noeuds(self):
  328. """ Application des contraintes: Artères / Noeuds
  329. Vérifie que les noeuds attachés aux artères existent
  330. """
  331. for artere in self.arteres:
  332. if artere.noeud_a is None:
  333. self.log_error(f"Le noeud lié '{artere.AR_NOEUD_A}' n'existe pas", item=artere)
  334. if artere.noeud_b is None:
  335. self.log_error(f"Le noeud lié '{artere.AR_NOEUD_B}' n'existe pas", item=artere)
  336. def test_constraints_cables_equipements(self):
  337. """ Application des contraintes: Equipements / Cables
  338. Vérifie que les équipements attachés aux cables existent """
  339. for cable in self.cables:
  340. if cable.equipement_a is None:
  341. self.log_error(f"L'équipement lié '{cable.CA_EQ_A}' n'existe pas", item=cable)
  342. if cable.equipement_b is None:
  343. self.log_error(f"L'équipement lié '{cable.CA_EQ_B}' n'existe pas", item=cable)
  344. def test_constraints_cables_equipements_b(self):
  345. """ Application des contraintes: Equipements B
  346. Vérifie que tous les équipements sont l'équipement B d'au moins un cable """
  347. equipements_b = [cable.CA_EQ_B for cable in self.cables]
  348. for equipement in self.equipements:
  349. if equipement.EQ_TYPE == "BAI":
  350. continue
  351. if not equipement.EQ_NOM in equipements_b:
  352. self.log_error(f"L'equipement '{equipement.EQ_NOM}' n'est l'équipement B d'aucun cable et n'est pas un PM", item=equipement)
  353. def test_constraints_equipements_noeuds(self):
  354. """ Application des contraintes: Noeuds / Equipements
  355. Vérifie que les noeuds attachés aux équipements existent
  356. """
  357. for equipement in self.equipements:
  358. if equipement.noeud is None:
  359. self.log_error(f"Le noeud lié '{equipement.EQ_NOM_NOE}' n'existe pas", item=equipement)
  360. def test_graphic_duplicates(self):
  361. """ Recherche de doublons graphiques """
  362. for i, tranchee in enumerate(self.tranchees):
  363. for other in self.tranchees[i+1:]:
  364. if tranchee.geom.equals(other.geom):
  365. self.log_error("Une entité graphique est dupliquée", item=tranchee)
  366. continue
  367. for i, artere in enumerate(self.arteres):
  368. for other in self.arteres[i+1:]:
  369. if artere.geom.equals(other.geom):
  370. self.log_error("Une entité graphique est dupliquée", item=artere)
  371. continue
  372. for i, cable in enumerate(self.cables):
  373. for other in self.cables[i+1:]:
  374. if cable.geom.equals(other.geom) and cable.CA_EQ_A == other.CA_EQ_A and cable.CA_EQ_B == other.CA_EQ_B:
  375. self.log_error("Une entité graphique est dupliquée", item=cable)
  376. continue
  377. for i, noeud in enumerate(self.noeuds):
  378. for other in self.noeuds[i+1:]:
  379. if noeud.geom.equals(other.geom):
  380. self.log_error("Une entité graphique est dupliquée", item=noeud)
  381. continue
  382. for i, zapbo in enumerate(self.zapbos):
  383. for other in self.zapbos[i+1:]:
  384. if zapbo.geom.equals(other.geom):
  385. self.log_error("Une entité graphique est dupliquée", item=zapbo)
  386. continue
  387. def test_positions_noeuds(self):
  388. """ Topologie: Noeuds / Artères
  389. Compare la géométrie des noeuds à celle des artères
  390. """
  391. for artere in self.arteres:
  392. if not artere.noeud_a or not artere.noeud_b:
  393. continue
  394. artere_points = artere.get_points()
  395. noeud_a_point = artere.noeud_a.get_points()[0]
  396. noeud_b_point = artere.noeud_b.get_points()[0]
  397. if not (artere_points[0].distanceSquared(noeud_a_point) <= TOLERANCE and \
  398. artere_points[-1].distanceSquared(noeud_b_point) <= TOLERANCE) \
  399. and not (artere_points[-1].distanceSquared(noeud_a_point) <= TOLERANCE and \
  400. artere_points[0].distanceSquared(noeud_b_point) <= TOLERANCE):
  401. self.log_error(f"Pas de noeud aux coordonnées attendues (noeuds attendus: {artere.noeud_a.NO_CODE} ou {artere.noeud_b.NO_CODE})", item=artere)
  402. def test_positions_equipements(self):
  403. """ Topologie: Equipements / Cables
  404. Compare la géométrie des équipements à celle des cables """
  405. for cable in self.cables:
  406. if not cable.equipement_a or not cable.equipement_b or not cable.is_geometry_valid() or not cable.equipement_a.noeud or not cable.equipement_b.noeud:
  407. continue
  408. #! attention: on utilise la géométrie du noeud associé à l'équipement, pas celle de l'équipement lui-même
  409. cable_points = cable.get_points()
  410. equip_a_point = cable.equipement_a.noeud.get_points()[0]
  411. equip_b_point = cable.equipement_b.noeud.get_points()[0]
  412. if not (cable_points[0].distanceSquared(equip_a_point) <= TOLERANCE and \
  413. cable_points[-1].distanceSquared(equip_b_point) <= TOLERANCE) \
  414. and not (cable_points[-1].distanceSquared(equip_a_point) <= TOLERANCE and \
  415. cable_points[0].distanceSquared(equip_b_point) <= TOLERANCE):
  416. self.log_error(f"Pas d'équipement aux coordonnées attendues (equipements attendus: {cable.equipement_a.EQ_CODE} ou {cable.equipement_b.EQ_CODE})", item=cable)
  417. def test_tranchee_artere(self):
  418. """ Topologie: Tranchées / Artères
  419. Compare la géométrie des tranchées à celle des artères """
  420. arteres_full_buffer = Artere.full_buffer(TOLERANCE)
  421. for tranchee in self.tranchees:
  422. if not arteres_full_buffer.contains(tranchee.geom):
  423. self.log_error("Tranchée ou portion de tranchée sans artère", item=tranchee)
  424. def test_cable_artere(self):
  425. """ Topologie: Cables / Artères
  426. Compare la géométrie des cables à celle des artères """
  427. # Vérifie que chaque cable a au moins une artère (sauf si commentaire contient 'baguette')
  428. arteres_full_buffer = Artere.full_buffer(TOLERANCE)
  429. for cable in self.cables:
  430. if "baguette" in cable.CA_COMMENT.lower() or not cable.is_geometry_valid():
  431. continue
  432. if not arteres_full_buffer.contains(cable.geom):
  433. self.log_error("Cable ou portion de cable sans artère", item=cable)
  434. def test_artere_cable(self):
  435. """ Topologie: Artères / Cables
  436. Compare la géométrie des artères à celle des cables """
  437. # Vérifie que chaque artère a au moins un cable (sauf si commentaire contient un de ces mots 'racco client adductio attente bus 'sans cable'')
  438. cables_full_buffer = Cable.full_buffer(TOLERANCE)
  439. for artere in self.arteres:
  440. if any(x in artere.AR_COMMENT.lower() for x in ['racco','client','adductio','attente','bus','sans cable']):
  441. continue
  442. if not cables_full_buffer.contains(artere.geom):
  443. self.log_error("Artère ou portion d'artère sans cable", item=artere)
  444. def test_dimensions_fourreaux(self):
  445. """ Dimensions logiques: fourreaux
  446. Vérifie que les nombres de fourreaux renseignés sont cohérents """
  447. for artere in self.arteres:
  448. try:
  449. if not int(artere.AR_FOU_DIS) <= int(artere.AR_NB_FOUR):
  450. self.log_error("Le nombre de fourreaux disponibles (AR_FOU_DIS) doit être inférieur au nombre total (AR_NB_FOUR)", item=artere)
  451. except (TypeError, ValueError):
  452. pass
  453. def test_pbos(self):
  454. """ Topologie: PBO / ZAPBO
  455. Compare la géométrie et le nom des équipements de type PBO à celle des ZAPBO
  456. """
  457. # Verifier que chaque equipement de type PBO est contenu dans une zapbo, et que le nom de la zapbo contient le nom de l'equipement
  458. for equipement in self.equipements:
  459. if not equipement.EQ_TYPE == "PBO":
  460. continue
  461. #zapbos englobant l'equipement
  462. candidates = []
  463. for zapbo in self.zapbos:
  464. if zapbo.geom.contains(equipement.geom):
  465. candidates.append(zapbo)
  466. # le pbo doit être contenu dans une zapbo
  467. if not candidates:
  468. self.log_error("Le PBO n'est contenu dans aucune ZAPBO", item=equipement)
  469. continue
  470. # On se base sur le nom pour trouver la zapbo correspondante
  471. try:
  472. equipement.zapbo = next((z for z in candidates if equipement.EQ_CODE in z.ID_ZAPBO))
  473. except StopIteration:
  474. self.log_error("Le nom du PBO ne coincide avec le nom d'aucune des ZAPBO qui le contiennent", item=equipement)
  475. break
  476. # a venir (webservice?)
  477. def __test_pbo_dimension(self):
  478. """ Dimensionnement des PBO """
  479. for equipement in self.equipements:
  480. if not equipement.EQ_TYPE == "PBO":
  481. continue
  482. if not hasattr(equipement.zapbo, "nb_prises") or equipement.zapbo.nb_prises is None:
  483. equipement.zapbo.nb_prises = 0
  484. # Controle du dimensionnement des PBO
  485. if equipement.EQ_TYPE_PH == 'PBO 6' and not equipement.zapbo.nb_prises < 6:
  486. self.log_error("Le PBO 6 contient plus de 5 prises", item=equipement)
  487. if equipement.EQ_TYPE_PH == 'PBO 12' and not equipement.zapbo.nb_prises >= 6 and equipement.zapbo.nb_prises <= 8:
  488. self.log_error("Le PBO 12 contient mois de 6 prises ou plus de 8 prises", item=equipement)
  489. if equipement.zapbo.STATUT == "REC" and not equipement.EQ_STATUT == "REC":
  490. self.log_error("Le statut du PBO n'est pas cohérent avec le statut de sa ZAPBO", item=equipement)
  491. if equipement.EQ_STATUT == "REC" and not equipement.zapbo.STATUT == "REC" and not equipement.zapbo.ID_ZAPBO[:4].lower() == "att_":
  492. self.log_error("Le statut du PBO n'est pas cohérent avec le statut de sa ZAPBO", item=equipement)
  493. checkers = [Mn2Checker]