Automatisation Screaming Frog avec n8n : génération de fichiers llms.txt

Ce workflow n8n a pour objectif de simplifier la création de fichiers llms.txt à partir des données extraites d'une analyse de site réalisée avec Screaming Frog. Dans un contexte où les entreprises cherchent à optimiser leur contenu pour les modèles d'IA, ce processus permet de transformer des données brutes en un format prêt à l'emploi. Les cas d'usage incluent la préparation de données pour des modèles d'apprentissage automatique ou l'analyse de contenu pour le SEO. Étape 1 : Le workflow débute par un déclencheur de type 'Form' qui permet à l'utilisateur de télécharger un fichier CSV contenant les résultats de l'analyse Screaming Frog. Étape 2 : Ensuite, le nœud 'Extract data from Screaming Frog file' extrait les données pertinentes du fichier téléchargé. Étape 3 : Les données sont ensuite filtrées via le nœud 'Filter URLs' pour ne conserver que celles qui répondent à des critères spécifiques. Étape 4 : Un classificateur de texte est utilisé pour analyser le contenu, suivi par un modèle de chat OpenAI qui génère des réponses basées sur ces données. Étape 5 : Les résultats sont ensuite résumés et formatés dans le fichier llms.txt grâce aux nœuds 'Summarize - Concatenate' et 'Generate llms.txt file'. Ce workflow offre une automatisation n8n efficace qui réduit le temps de traitement des données et améliore la qualité des fichiers générés, permettant ainsi aux équipes marketing et techniques de se concentrer sur des tâches à plus forte valeur ajoutée.

À qui s'adresse ce workflow ?

Ce que ce workflow résout

Comment ça fonctionne

Visualisation du workflow n8n

Schéma des nœuds et connexions de ce workflow n8n, généré à partir du JSON n8n.

Importer dans n8n en un clic

Inscris-toi gratuitement pour télécharger le fichier .json, puis fais Import from File dans n8n pour déployer le workflow en quelques secondes.

{
  "id": "",
  "meta": {
    "instanceId": "",
    "templateCredsSetupCompleted": true
  },
  "name": "Generate AI-Ready llms.txt Files from Screaming Frog Website Crawls",
  "tags": [],
  "nodes": [
    {
      "id": "ca701618-b2d5-48ee-a503-d3513d018a65",
      "name": "Sticky Note",
      "type": "n8n-nodes-base.stickyNote",
      "position": [
        360,
        -500
      ],
      "parameters": {
        "color": 7,
        "width": 360,
        "height": 860,
        "content": "## Form - Screaming Frog internal_html.csv upload  \n\nThis form node is used to trigger the workflow.  \n\nIt contains **three input fields**:  \n- Name of the website  \n- Short description of the website  \n- **Screaming Frog** export containing the internal URLs  \n\n\n\nIt is recommended to use the **internal_html.csv** export, but **internal_all.csv** will also work, as the workflow includes a filter to process only indexable URLs.\n"

Personnaliser ce workflow

Détail des nœuds n8n

• 01

  Sticky Note

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 02

  Sticky Note1

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 03

  Sticky Note2

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 04

  Set useful fields

  Ce noeud permet de définir des champs utiles en assignant des valeurs à des options spécifiées.

• 05

  Text Classifier

  Ce noeud classifie un texte d'entrée en fonction des catégories définies dans les options.

• 06

  OpenAI Chat Model

  Ce noeud interagit avec le modèle de chat OpenAI en utilisant les options et le modèle spécifiés.

• 07

  No Operation, do nothing

  Ce noeud ne réalise aucune opération, servant simplement de point de passage dans le workflow.

• 08

  Sticky Note3

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 09

  Filter URLs

  Ce noeud filtre les URLs en fonction des conditions définies dans les options.

• 10

  Sticky Note4

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 11

  Sticky Note5

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 12

  Sticky Note6

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 13

  Sticky Note7

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 14

  Sticky Note8

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 15

  Sticky Note9

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 16

  Summarize - Concatenate

  Ce noeud résume et concatène les champs spécifiés selon les options fournies.

• 17

  Set Fields - llms.txt Content

  Ce noeud définit des champs en assignant des valeurs à des options spécifiées pour le contenu de llms.txt.

• 18

  upload file anywhere

  Ce noeud ne réalise aucune opération, servant simplement de point de passage dans le workflow.

• 19

  Set Field - llms.txt Row

  Ce noeud définit un champ en assignant des valeurs à des options spécifiées pour une ligne de llms.txt.

• 20

  Sticky Note10

  Ce noeud crée une note autocollante avec des paramètres de couleur, largeur, hauteur et contenu spécifiés.

• 21

  Form - Screaming frog internal_html.csv upload

  Ce noeud déclenche un formulaire pour le téléchargement d'un fichier CSV avec des options et des champs définis.

• 22

  Extract data from Screaming Frog file

  Ce noeud extrait des données d'un fichier Screaming Frog selon les options et l'opération spécifiées.

• 23

  Generate llms.txt file

  Ce noeud génère un fichier llms.txt à partir des données sources spécifiées.