FMEFlowJobSubmitter

Catégories

Intégrations

Web

Exécution

Soumet des jobs FME à exécuter sur FME Flow. Un "job" se compose d'un traitement (hébergé dans un dépôt sur FME Flow) et de valeurs pour chacun de ses paramètres publiés.

Ce Transformers soumet un job par entité qui y entre. Tous les paramètres publiés du traitement sur le serveur recevront les valeurs spécifiées dans le Transformers ou seront extraits des attributs de l'entité qui y entre.

FMEFlowJobSubmitter soumet les demandes de traitements via l'API REST de FME Flow et n'utilise pas les services de transformation.

Ce Transformer nécessite une connexion FME Flow.

Configuration

Ports de sortie

Les entités qui ont soumis les requêtes au serveur et qui ont réussi à les achever. Ce port n'est visible que lorsque l'option Attendre la complétion des traitements a pour valeur Oui.

Les entités qui ont soumis les demandes au serveur, mais qui n'ont pas réussi à les achever. Ce port n'est visible que si l'option Attendre la complétion des traitements a la valeur Oui.

Les entités qui ont soumis avec succès les demandes au serveur. Ce port n'est visible que lorsque l'option Attendre la complétion des jobs pour continuer est Non.

Une entité unique qui détaille les travaux qui ont été soumis et ceux qui ont abouti. Cette entité contient les attributs de liste suivants : _submitted_job_ids{}, _succeeded_job_ids{}, et_failed_job_ids{}.

Entités qui n'ont pas envoyé de requêtes au serveur.

Paramètres

Connexion

Vous pouvez vous connecter à FME Flow d'une de ces manières :

Spécifiez une connexion web à un FME Flow. Les connexions Web peuvent être réutilisées dans plusieurs traitements, et les paramètres de connexion sont masqués dans le traitement. Pour plus d'informations, voir Connexions web.

Authentification SAML

L'authentification SAML (Security Assertion Markup Language) n'est pas disponible pour ces Transformers FME Flow :

Voir Configuration SAML et Automations pour plus d'informations et d'alternatives.

Cochée, vous devez définir les paramètres de connexion à FME Flow manuellement. Les paramètres de connexion sont visibles dans le traitement. Pour se connecter, spécifier :

Entrez une URL pour accéder à FME Flow. Vous devrez peut-être contacter votre administrateur système pour obtenir l'URL.

Fournir vos identifiants FME Flow.

Note: Vous pouvez cliquer sur l'hyperlien Status pour s'assurer que la connexion FME Flow ait bien été établie.

Soumettre des jobs

Si ce paramètre est réglé sur En séquence, le Transformer soumet chaque demande dès qu'il reçoit une entité d'origine. Si le paramètre Attendre la complétion des jobs pour continuer est réglé sur Oui, le Transformer attendra que la tâche soit terminée avant de traiter l'entité suivante.

Note: Un processus de sous-moteur sera lancé pour exécuter tous les travaux enfants. Ce moteur suivra la convention de dénomination Engine_<n>@<ID> où <ID> est l'ID du travail parent et <n> est le nom du moteur sur lequel le parent s'exécute.

Si ce paramètre est réglé sur En parallèle , le Transformer attendra que toutes les entités d'entrée soient reçues, puis enverra un ensemble de demandes pour chaque combinaison unique de dépôt et de traitement spécifié. Si le paramètre Attendre la complétion des jobs pour continuer vaut Oui, le Transformer attendra que tous les travaux soumis d'un ensemble de demandes soient terminés avant d'envoyer l'ensemble suivant.

Note: Un minimum de deux moteurs est nécessaire pour utiliser le FMEFlowJobSubmitter lorsque le mode de soumission est En parallèle et Attendre la complétion des traitements vaut Oui

Attendre que les tâches se terminent

Si ce paramètre a pour valeur Oui, le Transformer attendra que le travail soit complètement traité par le serveur avant de poursuivre. Dans ce cas, l'entité initiatrice ressort via le port Succeeded si le traitement s'est déroulé avec succès jusqu'à son terme, et ces attributs lui seront ajoutés :

  • _job_id : identifiant ID du traitement affecté par le serveur.
  • _NumFeaturesOutput : nombre d'entités ressortant après le traitement.
  • _priority: priorité assignée au traitement.
  • _requesterHost : nom de la machine hébergeant le FME Workbench qui a exécuté le traitement.
  • _requesterResultPort: port de la machine hôte à travers laquelle le résultat est retourné.
  • _status: les statuts possibles sont SUBMITTED, QUEUED, ABORTED, SUCCESS, FME_FAILURE, JOB_FAILURE ou PULLED.
  • _statusMessage : message retourné par FME Server.
  • _timeFinished: heure du traitement.
  • _timeRequested : heure à laquelle le serveur a reçu la demande de traitement (requête).
  • _timeStarted : heure à laquelle FME Server a commencé le traitement.

    • Toutes les heures sont définies au format AAAAMMJJhhmmss.

L'entité sortira par le port Failed si la tâche n'est pas complète ou sur le port <Rejected> si la tâche n'a pu être soumise, puis aura les attributs suivants :

  • _job_failure_type : Contient l'une des valeurs suivantes : "Problème de connexion ou de serveur" ou "Échec de la traduction". Dans ce dernier cas, les attributs suivants auront également des valeurs ; sinon, ils sont vides.
  • _NumFeaturesOutput : nombre d'entités ressortant après le traitement.
  • _priority: priorité assignée au traitement.
  • _requesterHost : nom de la machine hébergeant le FME Workbench qui a exécuté le traitement.
  • _requesterResultPort: port de la machine hôte à travers laquelle le résultat est retourné.
  • _job_id : identifiant ID du traitement affecté par le serveur.

    • Note: _job_id est inclus uniquement si l'échec du travail est lié à une erreur lors de la traduction. Si le travail n'a pas été exécuté en raison d'un problème de connexion ou de serveur, _job_id n'est pas inclus.

  • _status: les statuts possibles sont SUBMITTED, QUEUED, ABORTED, SUCCESS, FME_FAILURE, JOB_FAILURE ou PULLED.
  • _statusMessage : Message d'erreur retourné par FME Server expliquant pourquoi le traitement a échoué.
  • _timeFinished: heure du traitement.
  • _timeRequested : heure à laquelle le serveur a reçu la demande de traitement (requête).
  • _timeStarted : heure à laquelle FME Server a commencé le traitement.

Si ce paramètre a pour valeur Non, le Transformer émettra l'entité d'initiation dès que la tâche sera soumise au serveur. Dans ce cas, l'entité d'initiation ressort via le port Submitted si la requête a été soumise avec succès, et seul l'attribut _job_id lui sera ajouté.  Si le serveur n'a pu être contacté ou si la soumission du travail a échoué, l'entité ressort via le port <Rejected> et l'attribut _job_failure_type contient la valeur "Connection or Server Problem" ("Problème de connexion ou de serveur").

Repository (Dépôt)

Précise le dépôt FME Flow qui contient le traitement que vous souhaitez exécuter.

Traitement

Précise le traitement à exécuter pour chaque entité qui entre dans le Transformer.

Tous les paramètres publiés de traitement à exécuter apparaissent ici. Pour chacun d'eux, indiquez la valeur à transmettre lors du traitement. Pour rafraîchir les paramètres à partir de FME Flow, cliquez sur l'icône de rafraîchissement.

Priorité de job

Définit l'ordre dans lequel le traitement sera exécuté sur le serveur.

Priorité de job n'est pas disponible lors de la connexion à FME Flow 2018.1 ou plus récent.

Lors de la connexion à des versions antérieures de FME Flow et pendant la déconnexion, ce paramètre est disponible. Les valeurs de priorité vont de 1 à 200, où :

1 - Plus élevé

100 - Normal

200 - Plus bas

File d'attente de jobs

S'il est fourni, il soumet le traitement à la file d'attente spécifiée pour suivre les règles d'affectation du moteur associées. S'il est laissé vide, le traitement sera soumis à la file d'attente par défaut, à moins que le mode de soumission ne soit En séquence et Attendre que les travaux soient terminés égal à Oui, dans ce cas, FME utilise une file d'attente interne du système avec le nom context-id-<UUID>.

Pour plus d'informations, voir Contrôle des files d'attente.

Délais d'expiration de la file d'attente des jobs

Le temps, en secondes, après lequel un travail qui attend dans la file d'attente ne s'exécute pas. Si le travail ne s'exécute pas avant que ce délai soit atteint, il reste dans la file d'attente jusqu'à ce qu'il soit prêt à s'exécuter, mais l'exécution n'est pas tentée. Cette directive est utile pour les travaux sensibles au temps que vous ne voulez pas exécuter après que le temps spécifié soit dépassé.

Délais d'expiration d'exécution des jobs

Le temps, en secondes, pendant lequel un travail restera dans l'état d'exécution. Cette directive permet de s'assurer qu'un travail n'est pas suspendu et ne bloque pas indéfiniment un moteur FME. La valeur minimale autorisée est de 1.

Éditer les paramètres des Transformers

À l'aide d'un ensemble d'options de menu, les paramètres du Transformer peuvent être attribués en faisant référence à d'autres éléments de traitement. Des fonctions plus avancées, telles qu'un éditeur avancé et un éditeur arithmétique, sont également disponibles dans certains Transformers. Pour accéder à un menu de ces options, cliquez sur à côté du paramètre applicable. Pour plus d'informations, voir Options de menus et paramètres de Transformer.

Définir les valeurs

Il existe plusieurs façons de définir une valeur à utiliser dans un Transformer. La plus simple est de simplement taper une valeur ou une chaîne de caractères, qui peut inclure des fonctions de différents types comme des références d'attributs, des fonctions mathématiques et de chaînes de caractères, et des paramètres de traitement. Il existe un certain nombre d'outils et de raccourcis qui peuvent aider à construire des valeurs, généralement disponibles dans le menu contextuel déroulant adjacent au champ de valeur.

Utilisation de l'éditeur de texte

L'éditeur de texte fournit un moyen efficace de construire des chaînes de textes (dont les expressions régulières) à partir de données source diverses, telles que des attributs, des paramètres et des constantes, et le résultat est directement utilisé dans le paramètre.

Editeur de texte

Utilisation de l'éditeur arithmétique

L'éditeur arithmétique fournit un moyen simple de construire des expressions mathématiques à partir de plusieurs données source, telles que des attributs et des fonctions, et le résultat est directement utilisé dans un paramètre.

Éditeur arithmétique

Valeur conditionnelle

Définit des valeurs selon un ou plusieurs tests.

Fenêtre de définition de conditions

Contenu

Les expressions et chaînes de caractères peuvent inclure des fonctions, caractères, paramètres et plus.

Lors du paramétrage des valeurs - qu'elles soient entrées directement dans un paramètre ou construites en utilisant l'un des éditeurs - les chaînes de caractères et les expressions contenant des fonctions Chaîne de caractères, Math, Date et heure ou Entité FME auront ces fonctions évaluées. Par conséquent, les noms de ces fonctions (sous la forme @<nom_de_fonction>) ne doivent pas être utilisés comme valeurs littérales de chaîne de caractères.

Fonctions chaînes de caractères

Ces fonctions manipulent les chaînes de caractères.

Caractères spéciaux

 Un ensemble de caractères de contrôle est disponible dans l'éditeur de texte.

Fonctions mathématiques

Plusieurs fonctions sont disponibles dans les deux éditeurs.
Fonctions Date/heure Les fonctions de dates et heures sont disponibles dans l'Editeur texte.

Opérateurs mathématiques

Ces opérateur sont disponibles dans l'éditeur arithmétique.

Fonctions d'entités

Elles retournent des valeurs spécifiques aux entités.

Paramètres FME

Les paramètres FME et spécifiques au traitement peuvent être utilisés.
Créer et modifier un paramètre publié Créer ses propres paramètres éditables.

Options - Tables

Les Transformers avec des paramètres de style table possèdent des outils additionnels pour remplir et manipuler des valeurs.

Réordonner

Activé une fois que vous avez cliqué sur un élément de ligne. Les choix comprennent :

  • Ajouter une ligne
  • Supprimer une ligne
  • Déplacer la ligne en cours au dessus
  • Déplacer la ligne en cours en dessous
  • Déplacer la ligne en cours en haut de liste
  • Déplacer la ligne en cours en bas de liste

Couper, Copier et Coller

Activé une fois que vous avez cliqué sur un élément de ligne. Les choix comprennent :

  • Couper une ligne - supprime et copie dans le presse-papiers.
  • Copie une ligne dans le presse-papiers.
  • Colle une ligne depuis le presse-papiers.

Copier, copier et coller peuvent être utilisés au sein d'un Transformer ou entre Transfromers.

Filtre

Commencez à taper une chaîne de caractères, et la matrice n'affichera que les lignes correspondant à ces caractères. Recherche dans toutes les colonnes. Cela n'affecte que l'affichage des attributs dans le Transformer - cela ne change pas les attributs qui sont sortis.

Importer

Le bouton d'import remplit la table avec un jeu de nouveaux attributs lus depuis un jeu de données. L'application spécifique varie selon les Transformers.

Réinitialiser/Rafraîchir

Réinitialise la table à son état initial, et peut fournir des options additionnelles pour supprimer des entrées invalides. Le comportement varie d'un Transformer à l'autre.

Note : Tous les outils ne sont pas disponibles dans tous les Transformers.

FME Community

FME Community est l'endroit où trouver des démos, des tutoriaux, des articles, des FAQ et bien plus encore. Obtenez des réponses à vos questions, apprenez des autres utilisateurs et suggérez, votez et commentez de nouvelles entités.

Voir tous les résultats à propos de ce Transformer sur FME Community.

Mots clefs : ServerJobSubmitter