Administration
← Retour
Log : 20260423_080000
OK
Durée : 1167s
8 OK
5413 annonces
clio_4
i20
berlingo
c4
scenic
5008
fiesta
nv200
2026-04-23 08:06:58 [INFO] [berlingo] [LLM DESC] [3/8] BERLINGO (brand=citroen, pages=auto)
2026-04-23 08:06:58 [INFO] [berlingo] [LLM DESC] URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=C...
2026-04-23 08:06:58 [INFO] [berlingo] [SEARCH] $ /home/ubuntu/app/.venv/bin/python /home/ubuntu/app/crawler/leboncoin_search_export.py --output-file /home/ubuntu/app/leboncoin_ads.csv --model berlingo
2026-04-23 08:06:59 [INFO] [berlingo] [SEARCH] Recuperation de la page 1 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=1
2026-04-23 08:07:02 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 35)
2026-04-23 08:07:02 [INFO] [berlingo] [SEARCH] Recuperation de la page 2 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=2
2026-04-23 08:07:04 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 70)
2026-04-23 08:07:04 [INFO] [berlingo] [SEARCH] Recuperation de la page 3 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=3
2026-04-23 08:07:06 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 105)
2026-04-23 08:07:06 [INFO] [berlingo] [SEARCH] Recuperation de la page 4 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=4
2026-04-23 08:07:09 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 140)
2026-04-23 08:07:09 [INFO] [berlingo] [SEARCH] Recuperation de la page 5 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=5
2026-04-23 08:07:12 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 175)
2026-04-23 08:07:12 [INFO] [berlingo] [SEARCH] Recuperation de la page 6 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=6
2026-04-23 08:07:14 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 210)
2026-04-23 08:07:14 [INFO] [berlingo] [SEARCH] Recuperation de la page 7 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=7
2026-04-23 08:07:17 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 245)
2026-04-23 08:07:17 [INFO] [berlingo] [SEARCH] Recuperation de la page 8 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=8
2026-04-23 08:07:20 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 280)
2026-04-23 08:07:20 [INFO] [berlingo] [SEARCH] Recuperation de la page 9 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=9
2026-04-23 08:07:22 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 315)
2026-04-23 08:07:22 [INFO] [berlingo] [SEARCH] Recuperation de la page 10 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=10
2026-04-23 08:07:25 [INFO] [berlingo] [SEARCH] 35 annonces recuperees (total: 350)
2026-04-23 08:07:25 [INFO] [berlingo] [SEARCH] Recuperation de la page 11 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=11
2026-04-23 08:07:29 [INFO] [berlingo] [SEARCH] 21 annonces recuperees (total: 371)
2026-04-23 08:07:29 [INFO] [berlingo] [SEARCH] Recuperation de la page 12 avec l'URL: https://www.leboncoin.fr/recherche?category=5&text=berlingo+xl&u_utility_brand=CITROEN&u_utility_model=CITROEN_Berlingo&page=12
2026-04-23 08:07:31 [INFO] [berlingo] [SEARCH] Page 12 : aucune annonce, arret de la pagination.
2026-04-23 08:07:31 [INFO] [berlingo] [SEARCH] Termine : 371 annonces au total dans /home/ubuntu/app/leboncoin_ads_berlingo_20260423_080659.csv
2026-04-23 08:07:31 [INFO] [berlingo] [SEARCH] CSV : leboncoin_ads_berlingo_20260423_080659.csv
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] $ /home/ubuntu/app/.venv/bin/python -m db.migrate_csv --input /home/ubuntu/app/leboncoin_ads_berlingo_20260423_080659.csv --db /home/ubuntu/app/db/lbc.sqlite --model berlingo
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] Model override : berlingo
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] MIGRATION CSV -> SQLite unifie
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] Fichier: leboncoin_ads_berlingo_20260423_080659.csv
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] 371 lus, 371 inseres, 0 ignores, 0 erreurs
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] TOTAL : 371 lus, 371 inseres — Base : /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:07:31 [INFO] [berlingo] [IMPORT] 14202 annonces en base
2026-04-23 08:07:31 [INFO] [berlingo] [AVAILABILITY] $ /home/ubuntu/app/.venv/bin/python /home/ubuntu/app/scripts/check_availability.py --csv /home/ubuntu/app/leboncoin_ads_berlingo_20260423_080659.csv --brand citroen --model berlingo --db /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:07:31 [INFO] [berlingo] [AVAILABILITY] CHECK DISPONIBILITE — CSV: leboncoin_ads_berlingo_20260423_080659.csv, Brand: citroen, Model: berlingo
2026-04-23 08:07:31 [INFO] [berlingo] [AVAILABILITY] 369 list_id lus dans le CSV.
2026-04-23 08:07:32 [INFO] [berlingo] [AVAILABILITY] 379 annonces actives en base pour citroen berlingo.
2026-04-23 08:07:32 [INFO] [berlingo] [AVAILABILITY] 10 annonce(s) marquées indisponibles.
2026-04-23 08:07:32 [INFO] [berlingo] [AVAILABILITY] CSV: 369, Actives DB: 379, Absentes: 10
2026-04-23 08:07:32 [INFO] [berlingo] [AVAILABILITY] Marquees indisponibles: 10
2026-04-23 08:07:32 [INFO] [berlingo] [DETAIL] $ /home/ubuntu/app/.venv/bin/python -m crawler.leboncoin_ad_detail --model berlingo --delay 0.5 --limit 200
2026-04-23 08:07:32 [INFO] [berlingo] [DETAIL] ENRICHISSEMENT AD DETAIL — Modele: berlingo — Limite: 200
2026-04-23 08:07:32 [INFO] [berlingo] [DETAIL] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:07:32 [INFO] [berlingo] [DETAIL] 6 annonce(s) à enrichir (modèle: berlingo)
2026-04-23 08:07:47 [INFO] [berlingo] [DETAIL] RESULTAT : 6 traitee(s), 6 enrichies, 0 introuvables, 0 erreurs
2026-04-23 08:07:47 [INFO] [berlingo] [STATS] $ /home/ubuntu/app/.venv/bin/python -m stats.main --model berlingo --skip-plots
2026-04-23 08:07:47 [INFO] [berlingo] [STATS] ANALYSEUR LEBONCOIN — Base: /home/ubuntu/app/db/lbc.sqlite, Figures: /home/ubuntu/app/stats/berlingo/figures, Modele: berlingo, Graphiques: Non
2026-04-23 08:07:51 [INFO] [berlingo] [STATS] Using categorical units to plot a list of strings that are all parsable as floats or dates. If these strings should be plotted as numbers, cast to the appropriate data type before plotting.
2026-04-23 08:07:51 [INFO] [berlingo] [STATS] Using categorical units to plot a list of strings that are all parsable as floats or dates. If these strings should be plotted as numbers, cast to the appropriate data type before plotting.
2026-04-23 08:07:51 [INFO] [berlingo] [STATS] M05 — Extraction LLM des titres (GPT-5 Nano)
2026-04-23 08:07:52 [INFO] [berlingo] [STATS] Annonces sans evaluation LLM : 6
2026-04-23 08:08:18 [INFO] [berlingo] [STATS] HTTP Request: POST https://api.openai.com/v1/chat/completions "HTTP/1.1 200 OK"
2026-04-23 08:08:18 [INFO] [berlingo] [STATS] LLM OUTPUT batch 1/1: 6 resultats extraits (modele=gpt-5-nano)
2026-04-23 08:08:18 [INFO] [berlingo] [STATS] Resultats extraits : 6
2026-04-23 08:08:18 [INFO] [berlingo] [STATS] Evaluations inserees : 6
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] stats_descriptives : 5 lignes insérées
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] modele_regression : 2 lignes insérées
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] referentiel_prix : 67 segments insérés
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] ads.deal_columns : 801 annonces mises à jour
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] M06 — Extraction LLM des descriptions (GPT-5 Nano)
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] Champs actifs : 8
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] Annonces Excellente/Bonne affaire sans analyse description : 2
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] ━━━ LLM DESC SYSTEM PROMPT ━━━
Tu es un expert automobile français. On te donne des descriptions d'annonces de véhicules d'occasion avec leur identifiant.
Pour chaque annonce, extrais depuis la description les informations suivantes :
- courroie_changee : true si la courroie de distribution a été changée ou remplacée, false si explicitement non changée, null si non mentionné
- embrayage_change : true si l'embrayage est neuf ou a été remplacé, false si explicitement non changé, null si non mentionné
- travaux_recents : liste des travaux ou réparations récentes mentionnés dans la description (ex: 'freins refaits', 'pneus neufs', 'vidange faite'). Liste vide si aucun.
- negociabilite : négociable si le vendeur indique être ouvert aux offres, ferme si le prix est indiqué ferme, null si non mentionné
- contexte_vente : contexte notable de la vente s'il est mentionné (ex: 'urgent', 'déménagement', 'décès', 'achat neuf'). null si rien de notable
- nb_proprietaires : nombre de propriétaires du véhicule si mentionné (ex: 1 pour '1ère main', 2 pour '2ème main'). null si non mentionné
- options_description : liste des équipements et options cités dans la description (ex: 'GPS', 'Caméra recul', 'Clim auto', 'Toit ouvrant'). Liste vide si aucun.
- accidente : true si le véhicule a subi un accident, un choc, une collision, des airbags déclenchés ou une carrosserie endommagée mentionné explicitement. false si le vendeur indique explicitement non accidenté ou sans accident. null si non mentionné.
Règles :
- Extrais UNIQUEMENT ce qui est explicitement dans la description
- Ne déduis pas, n'invente pas
- Pour les champs de type liste, retourne une liste vide si rien n'est mentionné
- Conserve le list_id exact tel que fourni
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-23 08:08:19 [INFO] [berlingo] [STATS] ━━━ LLM DESC INPUT batch 1/1 (2 annonces) ━━━
3151392956: "Citroën Berlingo XL (T2) utilitaire de 2019, motorisation 1.6L diesel 100ch (boîte manuelle) totalisant 79 574 km. ✔️ Entretien complet avec factures ✔️ Contrôle technique vierge du 16/02/2026 ✔️ Véhicule non-fumeur ✔️ Aucun frais à prévoir ✔️ Disponible immédiatement Équipements & options : - Régulateur et limiteur de vitesse - Climatisation - Caméra de recul - Radars de stationnement avant et arrière - Kit mains-libres Bluetooth - Autoradio MP3 avec commandes au volant - Prise USB - Vitres électriques - Allumage automatique des phares - Phares antibrouillard - Barres de toit - Lecteur CD - Aide au démarrage en côte - etc. Véhicule en excellent état mécanique et général. Vente suite à arrêt d’activité professionnelle. 📸 Dossier photos complet et vidéo de présentation disponibles sur demande. N’hésitez pas à me contacter par téléphone, SMS ou via la messagerie Leboncoin pour plus d’informations."
3184596294: "Citroën Berlingo 2 XL HDI 100 CV 2021 CAMERA TVA récupérab utilitaire, blanche, 5 cv, première mise en circulation le 28/01/2021, garantie 3 mois. JOLIE Berlingo XL HDI 100 cv 2021 3 places camera PX 8290 € HORS TAXE 9948 € TTC boîte de vitesse : manuelle OPTIONS ET ÉQUIPEMENTS : Audio - Télécommunications : - Bluetooth - Prise audio usb Conduite : - Détecteurs de pluie - allumage automatique des feux - limiteur de vitesse Extérieur : - caméra de recul - radar arrière de détection d'obstacles - radar d'aide au stationnement - rétroviseurs électriques Intérieur : - 3 sièges avant - Banquette 2/3 - 1/3 - climatisation : manuelle - climatisation manuelle - intérieur bois - ordinateur de bord Pack : - Régulateur - Verrouillage automatique Sécurité : - ABS - Anti-brouillard - roue de secours Autres équipements et informations : - Révision OK - Classe Crit'air : 2 - GARAGE EAR 42 - USB - émission CO2 : 117 g/km Référence annonce : 2242719"
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-23 08:09:06 [INFO] [berlingo] [STATS] HTTP Request: POST https://api.openai.com/v1/chat/completions "HTTP/1.1 200 OK"
2026-04-23 08:09:06 [INFO] [berlingo] [STATS] ━━━ LLM DESC OUTPUT batch 1/1 (2 résultats, modèle=gpt-5-nano) ━━━
[
{
"list_id": "3151392956",
"courroie_changee": null,
"embrayage_change": null,
"travaux_recents": [
"Entretien complet avec factures",
"Contrôle technique vierge du 16/02/2026"
],
"negociabilite": null,
"contexte_vente": "arrêt d’activité professionnelle",
"nb_proprietaires": null,
"options_description": [
"Régulateur et limiteur de vitesse",
"Climatisation",
"Caméra de recul",
"Radars de stationnement avant et arrière",
"Kit mains-libres Bluetooth",
"Autoradio MP3 avec commandes au volant",
"Prise USB",
"Vitres électriques",
"Allumage automatique des phares",
"Phares antibrouillard",
"Barres de toit",
"Lecteur CD",
"Aide au démarrage en côte"
],
"accidente": null
},
{
"list_id": "3184596294",
"courroie_changee": null,
"embrayage_change": null,
"travaux_recents": [
"Révision OK"
],
"negociabilite": null,
"contexte_vente": null,
"nb_proprietaires": null,
"options_description": [
"Bluetooth",
"Prise audio usb",
"Détecteurs de pluie",
"allumage automatique des feux",
"limiteur de vitesse",
"caméra de recul",
"radar arrière de détection d'obstacles",
"radar d'aide au stationnement",
"rétroviseurs électriques",
"3 sièges avant",
"Banquette 2/3 - 1/3",
"climatisation : manuelle",
"climatisation manuelle",
"intérieur bois",
"ordinateur de bord",
"Régulateur",
"Verrouillage automatique",
"ABS",
"Anti-brouillard",
"roue de secours",
"USB"
],
"accidente": null
}
]
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-23 08:09:06 [INFO] [berlingo] [STATS] Batch persisté : 2 évaluation(s) sauvegardée(s)
2026-04-23 08:09:06 [INFO] [berlingo] [STATS] Évaluations insérées : 2
2026-04-23 08:09:06 [INFO] [berlingo] [STATS] ANALYSE TERMINEE en 31.3s — 801 annonces (run #758) — Modele: berlingo
2026-04-23 08:09:07 [INFO] [berlingo] [LLM] $ /home/ubuntu/app/.venv/bin/python -m stats.m05_llm_title_analysis --model berlingo
2026-04-23 08:09:07 [INFO] [berlingo] [LLM] M05 — Extraction LLM des titres (GPT-5 Nano)
2026-04-23 08:09:07 [INFO] [berlingo] [LLM] Annonces sans evaluation LLM : 0
2026-04-23 08:09:07 [INFO] [berlingo] [LLM] Toutes les annonces ont deja ete analysees.
2026-04-23 08:09:07 [INFO] [berlingo] [LLM DESC] $ /home/ubuntu/app/.venv/bin/python -m stats.m06_llm_description_analysis --model berlingo
2026-04-23 08:09:08 [INFO] [berlingo] [LLM DESC] M06 — Extraction LLM des descriptions (GPT-5 Nano)
2026-04-23 08:09:08 [INFO] [berlingo] [LLM DESC] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-23 08:09:08 [INFO] [berlingo] [LLM DESC] Champs actifs : 8
2026-04-23 08:09:08 [INFO] [berlingo] [LLM DESC] Annonces Excellente/Bonne affaire sans analyse description : 0
2026-04-23 08:09:08 [INFO] [berlingo] [LLM DESC] Toutes les annonces éligibles ont déjà été analysées.