Dépannage : Messages d'avertissement NiFi lors du chargement de données de catalogue

Si les problèmes de chargement de données surviennent lors du chargement de 5000 ou de plusieurs produits/SKU sous une seule catégorie. Le système fournit des messages d'avertissement pour les données volumineuses avec génération d'index de recherche NRT du chargement de données lors du test LOT de chargement de données.

Problème

Si les problèmes de chargement de données surviennent lors du chargement de 5000 ou de plusieurs produits/SKU sous une seule catégorie. Les messages d'avertissement suivants s'affichent lors du test LOT de chargement de données pour de grandes quantités de données avec génération d'index de recherche NRT du chargement de données. 
2023-02-10T17:48:16.322Z [Timer-Driven Process Thread-42] [] WARN  o.a.n.p.standard.ReplaceText.warn:58 - ReplaceText[id=d1df0071-9d19-34c3-9805-ce88 ce416c3d] Transferred {} to 'failure' because it was larger than the buffer size.

Solution

Pour résoudre ce problème, modifiez NiFi en fonction des étapes ci-dessous pour augmenter la taille de la mémoire tampon.
  1. Dans la figure 1 en bas de l'écran, accédez à Flux NiFi > dataload.product.cas - Synchronisation de catégories > Mettre à jour les catégories.
  2. Dans la figure 1, cliquez avec le bouton droit de la souris sur Générer un message de catégorie et sélectionnez Afficher la configuration, puis cliquez sur l'onglet Propriétés. L'écran suivant s'affiche.
  3. Sous l'onglet Propriétés, vous pouvez modifier la valeur de la propriété dans Taille maximale de la mémoire tampon de 20 Mo à une taille souhaitée conformément à l'exigence et cliquer sur le bouton OK.

L'augmentation de la taille maximale de la mémoire tampon de 20 Mo à la taille souhaitée résout les problèmes de chargement de données.