XMLFragmenter

Catégories

Spécifique à un format

Web

Appaire des éléments d'un document XML en fragments XML et optionnellement aplatit le contenu des éléments XML permettant aux enfants des éléments correspondants de devenir des attributs.

Ce Transformer peut être utilisé pour décomposer de gros documents XML en parties, celles-ci pouvant être traitées ultérieurement par des Transformers XML, XQuery, XSLT ou des Transformers génériques de traitement de textes.

Configuration

Ports de sortie

Chaque fragment est produit comme une entité FME séparée via le port Fragments. Chaque entité du port aura un attribut xml_fragment contenant le fragment. Le fragment est un document XML valide qui peut être traité ultérieurement par des Transformers basés sur XML et/ou XQuery.

Trois attributs supplémentaires sont ajoutés aux entités Fragments.

  • xml_matched_element - enregistre l'élément qui a été mis en correspondance. Cet attribut peut être utilisé pour identifier l'élément correspondant à l'expression, si le dernier composant de l'expression correspondante est un caractère générique (*).
  • xml_id - contient un ID pour cet élément. Il n'est pas garanti que cet attribut soit unique au niveau mondial, mais il sera unique uniquement dans le contexte du document d'entrée.
  • xml_parent_id - contient un ID pour le parent de cet élément. Si le parent de l'élément ne correspond pas ou s'il n'a pas de parent, cet attribut est vide.
  • xml_parent_child_pos - contient la position de l'élément par rapport à son parent. Si le parent de l'élément ne correspond pas ou s'il n'a pas de parent, cet attribut est vide. L'attribut xml_parent_child_pos commence son compte à 0.

Si les Options d'aplatissement sont activées, alors les Fragments auront des attributs supplémentaire relatifs au contenu des éléments XML appairés.

Si Rejeter les entités sans fragments vaut Oui, les entités qui ne produisent aucun fragment ressortent via ce port.

Les entités qui n'ont pas pu être traitées avec succès sont également sorties par ce port. Cela se produit généralement lorsque l'attribut spécifié dans le paramètre Attribut XML n'a pas de valeur, ou a une valeur qui n'est pas un XML valide.

Paramètres

Type de XML source : fichier XML/Attribut XML

Le fichier source XML est soit un fichier XML soit un attribut dont la valeur est le document entier XML.

Éléments à apparier

Ce paramètre spécifie les fragments à mettre en correspondance. Les chemins d'entité sont soit des expressions de correspondance xfMap séparées par des espaces, soit chaque expression peut être spécifiée sur une nouvelle ligne.

Ce paramètre peut être saisi directement dans le champs approprié ou cliquez sur le bouton parcourir pour afficher l'éditeur ou choisir un attribut.

Exemples

<dc:metadata xmlns:dc="http://purl.org/dc/elements/1.1/">
<dc:subject>Utah</dc:subject>
<dc:subject>boundaries</dc:subject>
<dc:subject>County</dc:subject>
<dc:subject>Administrative</dc:subject>
<dc:subject>geoscientificInformation</dc:subject>
<dc:description>This data set represents county boundaries in Utah at 1:24,000 scale.</dc:description>
<dc:date>2004-04-20T00:00:00.000</dc:date>
<dc:type>dataset</dc:type>
<dc:identifier xmlns:dc="http://purl.org/dc/elements/1.1/">{42AE2814-FCC1-4BC2-BAF4-CA3E55514997}</dc:identifier>
<dc:language>en</dc:language>
<dc:spatial>
<dcmiBox:Box name="Geographic" projection="EPSG:4326" xmlns:dcmiBox="http://dublincore.org/documents/2000/07/11/dcmi-box/">
<dcmiBox:northlimit units="decimal degrees">42.01</dcmiBox:northlimit>
<dcmiBox:eastlimit units="decimal degrees">-109.21</dcmiBox:eastlimit>
<dcmiBox:southlimit units="decimal degrees">36.98</dcmiBox:southlimit>
<dcmiBox:westlimit units="decimal degrees">-114.1</dcmiBox:westlimit>
</dcmiBox:Box>
</dc:spatial>
<dc:rights></dc:rights>
</dc:metadata>

Il y a quelques expressions xfMap permettant de cibler le document d'entrée <dc:metadata> ci-dessus :

* "dc:subject"

Extrait tous les <dc:subject> en fragment XML, produisant 5 entités fragments au total.

* "dc:spatial/dcmiBox:Box"

Extrait le fragment <dcmiBox:Box>, mais <dc:spatial> doit être le parent.

* "dcmiBox:Box/*"

Extrait chaque enfant de <dcmiBox:Box> dans des fragments, 4 entités correspondant à <dcmiBox:northlimit>, <dcmiBox:eastlimit>, <dcmiBox:southlimit> et <dcmiBox:westlimit> seront générées en sortie.

* "dc:subject dc:spatial/dcmiBox:Box dcmiBox:Box/*"

Les trois expressions de correspondance précédentes combinées, chacune séparée par un espace.

Eléments à exclure

Si un chemin d'entité dans 'Elements to Match' correspond à plusieurs éléments, ce paramètre peut être utilisé pour spécifier quels éléments doivent être exclus des résultats. L'entrée de ce paramètre prend également la forme des expressions xfMap du chemin des entités décrites dans le paramètre "Elements to Match".

Dans l'exemple ci-dessus, si les 'éléments à apparier' sont définis à 'dcmi:Box/*' et les 'éléments à exclure' sont définis à 'dcmi:northlimit dcmi:eastlimit' alors seulement deux fragments seront générés correspondront uniquement aux éléments <dcmi:southlimit> et <dcmi:westlimit>.

Rejeter les entités sans fragments

Si Oui, les entités qui ne produisent aucun fragment ressortent via le port <Rejected>.

Regrouper les attributs des entités entrantes

Définir ce paramètre à Oui regroupe les attributs de l'entité en entrée dans les entités en sortie.

Eléments comme fragments XML

Le paramètre peut être spécifié pour extraire les enfants des éléments appariés en tant que fragments XML.

Exemples

La même entrée XML que celle de l'exemple ci-dessus - avec l'expression xfMap Feature Paths définie sur "dcmiBox:Box", les options par défaut acceptées dans Flatten Options et les Elements As XML Fragments définis sur 'dcmi:northlimit dcmi:southlimit' - produira l'entité suivante. (Les différences par rapport à l'exemple précédent sont mises en évidence en gras).

+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
Feature Type: `XMLFragmenter_FRAGMENTS'
Attribute(encoded: utf-16): `eastlimit' has value `-109.21'
Attribute(encoded: utf-16): `eastlimit.units' has value `decimal degrees'
Attribute(string)          : `fme_type' has value `fme_no_geom'
Attribute(encoded: utf-16): `northlimit' has value `42.01'
Attribute(encoded: utf-16): `northlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `southlimit' has value `36.98'
Attribute(encoded: utf-16): `southlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `westlimit' has value `-114.1'
Attribute(encoded: utf-16): `westlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `xml_fragment' has value `?<?xml version="1.0" encoding="UTF-
16"?><dcmiBox:Box name="Geographic" projection="EPSG:4326"
xmlns:dcmiBox="http://dublincore.org/documents/2000/07/11/dcmi-box/">
<dcmiBox:northlimit units="decimal degrees">42.01</dcmiBox:northlimit>
<dcmiBox:eastlimit units="decimal degrees">-109.21</dcmiBox:eastlimit>
<dcmiBox:southlimit units="decimal degrees">36.98</dcmiBox:southlimit>
<dcmiBox:westlimit units="decimal degrees">-114.1</dcmiBox:westlimit>
</dcmiBox:Box>'
Attribute(encoded: utf-16): `xml_fragment_northlimit{0}' has value `<?xml 
version="1.0" encoding="UTF-16"?><dcmiBox:northlimit units="decimal degrees" 
xmlns:dcmiBox="http://dublincore.org/documents/2000/07/11/dcmi-box/">42.01</dcmiBox:northlimit>'
Attribute(encoded: utf-16): `xml_fragment_southlimit{0}' has value `<?xml 
version="1.0" encoding="UTF-16"?><dcmiBox:southlimit units="decimal degrees" 
xmlns:dcmiBox="http://dublincore.org/documents/2000/07/11/dcmi-box/">36.98</dcmiBox:southlimit>'
Attribute(encoded: utf-16): `xml_id' has value `id-Box-1.2.1.11.1'
Attribute(encoded: utf-16): `xml_matched_element' has value `Box'
Attribute(string)          : `xml_type' has value `xml_no_geom'
Type de géométrie : Inconnu (0)
=================================================

Options d'aplatissement

Le bouton Options ouvre la boîte de dialogue Options d'aplatissement XML. Ces options contrôlent les enfants des éléments correspondants à aplatir comme attributs/listes d'attributs sur les entités produites.

La vue par défaut est le mode basique où de nombreuses options sont disponibles :

  • Ignorer des sous-éléments spécifiques > Sous-éléments à ignorer : spécifiez les enfants des éléments correspondants (de Flatten Paths) qui doivent être ignorés. Par exemple, dans l'exemple ci-dessus, si Flatten Paths est "shipto", alors si cette option est définie sur "country city", alors les contenus du pays et de la ville sont ignorés dans la sortie.
  • Sauter les éléments vides : spécifie si les éléments vides doivent être pris en compte comme des attributs d'entités vides.
  • Ajouter un préfixe personnalisé : spécifie le préfixe pour tous les attributs de l'entité qui seront ajoutés depuis la structure XML aplatie.
  • Intégrer la position enfant dans le XML > Nom de l'attribut : spécifie le nom de l'attribut dont la valeur sera la position de l'élément enfant dans son parent.
  • Ajouter les attributs ancêtres > Elément(s) ancêtre(s) : spécifie les éléments parents des éléments du chemin dont les attributs seront également ajoutés aux attributs de l'entité de sortie.

Le bouton Avancé ouvre l'éditeur avancé, qui fournit des options supplémentaires pour personnaliser les attributs de l'entité. La fonctionnalité de chaque option est décrite dans le tableau ci-dessous. Les options proposées ici permettent de personnaliser les attributs et les listes d'attributs du sous-arbre XML correspondant qui sera ajouté aux entités FME.

Option (avec valeur exemple) Description Valeur par défaut Valeurs possibles
separator="." La valeur de cette option est utilisée comme séparateur lors de la désignation des attributs des enfants de l'élément apparié. period (.) chaîne quelconque
map-empty-elements="yes"

Si elle est définie sur Oui, tout élément vide sera ajouté aux entités en tant qu'attributs avec des valeurs vides. Sinon, les attributs ne seront pas ajoutés aux entités.

Valeur par défaut si non spécifié : yes

yes | no

Valeurs possibles : toute chaînes de caractères
matched-prefix="attributes"

Cette option contrôle si les attributs de l'entité FME générés seront préfixés avec le nom de l'élément apparié.

Si la valeur est yes, alors à la fois les attributs des éléments appariés et de tous leurs enfants sont préfixés.

Si la valeur est no, alors aucun des attributs de l'entité ne seront préfixés avec le nom de l'élément apparié.

Si la valeur est children, alors seuls les enfants de l'élément apparié seront préfixés.

Si la valeur est attributes, alors seuls les attributs de l'élément apparié seront préfixés.

Valeur par défaut si non spécifié : yes

yes | no | children | attributes
matched-attributes="yes"

Si cette option est définie sur Oui, les attributs de l'élément correspondant sont mappés en tant qu'attributs d'entité FME. Sinon, les attributs de l'élément correspondant sont ignorés.

L'option matched-prefix peut également être définie à attributes ou yes pour autoriser les attributs à être préfixés par le nom de l'élément apparié.

Valeur par défaut si non spécifié : yes

 yes | no
matched-ancestor-attributes=""

Cette option contrôle si les attributs XML de l'ancêtre de l'élément apparié doivent être inclus en tant qu'attributs de l'entité FME.

- 'parent' ou '1' : Les attributs XML du parent de l'élément apparié sont ajoutés

- 'grandparent' ou '2' : Les attributs XML du grand parent de l'élément apparié sont ajoutés

- 'root' ou '-1' : Les attributs XML de la racine du document sont ajoutés

- tout nombre non négatif : les attributs XML de l'ancêtre en remontant x niveaux à partir de l'élément apparié sont ajoutés. 0 est l'élément apparié.

Pour inclure plus d'un ancêtre, des valeurs multiples peuvent être séparées par un espace.

Par exemple : pour avoir les attributs de la racine, du parent et du grand parent, on peut spécifier :

matched-ancestor-attributes="parent grandparent root"

  

parent | grandparent | root
cardinality="+{?}"

Cette option spécifie une liste de directives de cardinalité séparées par des espaces.

Valeur par défaut : +{?} (Traite les éléments enfants comme une liste s'il y a plus d'un élément de même nom)

Valeurs possibles : Consulter la section xfMap de la documentation du Reader XML.
except=""

L'option except accepte le même type d'expressions que l'attribut match ou except d'une régle de correspondance.

Par exemple, l'expression except="€parent/child{2}" peut être utilisée pour exclure le deuxième élément <child> contenu dans un élément <parent>

   toute expression chemin
structure-prefix=""

Cette option peut être définie par une chaîne non vide qui sera utilisée comme préfixe pour tous les attributs générés pour un élément apparié.

   chaîne quelconque
child-position-attribute=""

Quand cette option est définie par une chaîne non vide, chaque élément enfant générera un attribut supplémentaire dans l'entité FME dont la valeur sera la position de l'élément enfant à l'intérieur de son parent.

  

chaîne quelconque
attribute-identifier=""

Les attributs XML peuvent être différenciés des éléments feuilles. En donnant à cette option la valeur d'une chaîne non vide, le Reader XML ajoutera un préfixe aux attributs des éléments de la feuille.

    

Toutes les options ont des exemples et des descriptions plus détaillés dans le manuel FME Readers/Writers : XML (Extensible Markup Language) Reader/Writer.

Exemples

Le XML en entrée ci-dessous et l'expression xfMap valant "dcmiBox:Box" avec les options d'applatissement par défaut produit l'entité suivante :

+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
Feature Type: `XMLFragmenter_FRAGMENTS'
Attribute(encoded: utf-16): `eastlimit' has value `-109.21'
Attribute(encoded: utf-16): `eastlimit.units' has value `decimal degrees'
Attribute(string)         : `fme_type' has value `fme_no_geom'
Attribute(encoded: utf-16): `northlimit' has value `42.01'
Attribute(encoded: utf-16): `northlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `southlimit' has value `36.98'
Attribute(encoded: utf-16): `southlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `westlimit' has value `-114.1'
Attribute(encoded: utf-16): `westlimit.units' has value `decimal degrees'
Attribute(encoded: utf-16): `xml_fragment' has value `?<?xml version="1.0" encoding="UTF-
16"?><dcmiBox:Box name="Geographic" projection="EPSG:4326"
xmlns:dcmiBox="http://dublincore.org/documents/2000/07/11/dcmi-box/">
<dcmiBox:northlimit units="decimal degrees">42.01</dcmiBox:northlimit>
<dcmiBox:eastlimit units="decimal degrees">-109.21</dcmiBox:eastlimit>
<dcmiBox:southlimit units="decimal degrees">36.98</dcmiBox:southlimit>
<dcmiBox:westlimit units="decimal degrees">-114.1</dcmiBox:westlimit>
</dcmiBox:Box>'
Attribute(encoded: utf-16): `xml_id' has value `id-Box-1.2.1.11.1'
Attribute(encoded: utf-16): `xml_matched_element' has value `Box'
Attribute(string)         : `xml_type' has value `xml_no_geom'
Type de géométrie : Inconnu (0)
=================================================

Ignorer la DTD externe

En donnant à ce paramètre la valeur Oui, on demande à l'analyseur XML sous-jacent de désactiver le chargement d'une DTD externe.

Résolveur d'entités

Par défaut, ce paramètre est activé et un résolveur d'entités personnalisé est utilisé pour résoudre les entités externes telles que les DTD.

Le résolveur d'entités personnalisé installé s'appuie sur une carte d'URI qui relie les URI aux URI résolus. Les URI résolus sont généralement des URL contenant des copies locales de la ressource.

Si un document XML ne contient pas d'entités externes à résoudre, ce paramètre peut être désactivé et la carte URI ne sera pas chargée inutilement.

Attributs à exposer :

Expose les attributs afin qu'ils puissent être utilisés ailleurs dans le traitement.

Les noms des attributs peuvent être saisis directement ou fournis dans la fenêtre Entrer des valeurs pour les attributs à exposer, à laquelle on accède par le bouton "...", où le type de données peut également être spécifié.

Pour plus d'informations sur les attributs exposés et non exposés, voir Comprendre les types d'entités et les attributs.

Éditer les paramètres des Transformers

À l'aide d'un ensemble d'options de menu, les paramètres du Transformer peuvent être attribués en faisant référence à d'autres éléments de traitement. Des fonctions plus avancées, telles qu'un éditeur avancé et un éditeur arithmétique, sont également disponibles dans certains Transformers. Pour accéder à un menu de ces options, cliquez sur à côté du paramètre applicable. Pour plus d'informations, voir Options de menus et paramètres de Transformer.

Définir les valeurs

Il existe plusieurs façons de définir une valeur à utiliser dans un Transformer. La plus simple est de simplement taper une valeur ou une chaîne de caractères, qui peut inclure des fonctions de différents types comme des références d'attributs, des fonctions mathématiques et de chaînes de caractères, et des paramètres de traitement. Il existe un certain nombre d'outils et de raccourcis qui peuvent aider à construire des valeurs, généralement disponibles dans le menu contextuel déroulant adjacent au champ de valeur.

Utilisation de l'éditeur de texte

L'éditeur de texte fournit un moyen efficace de construire des chaînes de textes (dont les expressions régulières) à partir de données source diverses, telles que des attributs, des paramètres et des constantes, et le résultat est directement utilisé dans le paramètre.

Editeur de texte

Utilisation de l'éditeur arithmétique

L'éditeur arithmétique fournit un moyen simple de construire des expressions mathématiques à partir de plusieurs données source, telles que des attributs et des fonctions, et le résultat est directement utilisé dans un paramètre.

Éditeur arithmétique

Valeur conditionnelle

Définit des valeurs selon un ou plusieurs tests.

Fenêtre de définition de conditions

Contenu

Les expressions et chaînes de caractères peuvent inclure des fonctions, caractères, paramètres et plus.

Lors du paramétrage des valeurs - qu'elles soient entrées directement dans un paramètre ou construites en utilisant l'un des éditeurs - les chaînes de caractères et les expressions contenant des fonctions Chaîne de caractères, Math, Date et heure ou Entité FME auront ces fonctions évaluées. Par conséquent, les noms de ces fonctions (sous la forme @<nom_de_fonction>) ne doivent pas être utilisés comme valeurs littérales de chaîne de caractères.

Fonctions chaînes de caractères

Ces fonctions manipulent les chaînes de caractères.

Caractères spéciaux

 Un ensemble de caractères de contrôle est disponible dans l'éditeur de texte.

Fonctions mathématiques

Plusieurs fonctions sont disponibles dans les deux éditeurs.
Fonctions Date/heure Les fonctions de dates et heures sont disponibles dans l'Editeur texte.

Opérateurs mathématiques

Ces opérateur sont disponibles dans l'éditeur arithmétique.

Fonctions d'entités

Elles retournent des valeurs spécifiques aux entités.

Paramètres FME

Les paramètres FME et spécifiques au traitement peuvent être utilisés.
Créer et modifier un paramètre publié Créer ses propres paramètres éditables.

Options - Tables

Les Transformers avec des paramètres de style table possèdent des outils additionnels pour remplir et manipuler des valeurs.

Réordonner

Activé une fois que vous avez cliqué sur un élément de ligne. Les choix comprennent :

  • Ajouter une ligne
  • Supprimer une ligne
  • Déplacer la ligne en cours au dessus
  • Déplacer la ligne en cours en dessous
  • Déplacer la ligne en cours en haut de liste
  • Déplacer la ligne en cours en bas de liste

Couper, Copier et Coller

Activé une fois que vous avez cliqué sur un élément de ligne. Les choix comprennent :

  • Couper une ligne - supprime et copie dans le presse-papiers.
  • Copie une ligne dans le presse-papiers.
  • Colle une ligne depuis le presse-papiers.

Copier, copier et coller peuvent être utilisés au sein d'un Transformer ou entre Transfromers.

Filtre

Commencez à taper une chaîne de caractères, et la matrice n'affichera que les lignes correspondant à ces caractères. Recherche dans toutes les colonnes. Cela n'affecte que l'affichage des attributs dans le Transformer - cela ne change pas les attributs qui sont sortis.

Importer

Le bouton d'import remplit la table avec un jeu de nouveaux attributs lus depuis un jeu de données. L'application spécifique varie selon les Transformers.

Réinitialiser/Rafraîchir

Réinitialise la table à son état initial, et peut fournir des options additionnelles pour supprimer des entrées invalides. Le comportement varie d'un Transformer à l'autre.

Note : Tous les outils ne sont pas disponibles dans tous les Transformers.

FME Community

FME Community est l'endroit où trouver des démos, des tutoriaux, des articles, des FAQ et bien plus encore. Obtenez des réponses à vos questions, apprenez des autres utilisateurs et suggérez, votez et commentez de nouvelles entités.

Voir tous les résultats à propos de ce Transformer sur FME Community.

Mots clefs : XMLExploder