Administration

← Retour

Log : 20260430_080000

OK
Durée : 761s 8 OK 5476 annonces
clio_4 i20 berlingo c4 scenic 5008 fiesta nv200
Tout 5008 berlingo c4 clio_4 fiesta i20 nv200 scenic 
2026-04-30 08:05:05 [INFO] [c4] [LLM DESC] [4/8] C4 (brand=citroen, pages=auto)
2026-04-30 08:05:05 [INFO] [c4] [LLM DESC] URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=20...
2026-04-30 08:05:05 [INFO] [c4] [SEARCH] $ /home/ubuntu/app/.venv/bin/python /home/ubuntu/app/crawler/leboncoin_search_export.py --output-file /home/ubuntu/app/leboncoin_ads.csv --model c4
2026-04-30 08:05:05 [INFO] [c4] [SEARCH] Recuperation de la page 1 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=1
2026-04-30 08:05:08 [INFO] [c4] [SEARCH] 35 annonces recuperees (total: 35)
2026-04-30 08:05:08 [INFO] [c4] [SEARCH] Recuperation de la page 2 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=2
2026-04-30 08:05:10 [INFO] [c4] [SEARCH] 35 annonces recuperees (total: 70)
2026-04-30 08:05:10 [INFO] [c4] [SEARCH] Recuperation de la page 3 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=3
2026-04-30 08:05:13 [INFO] [c4] [SEARCH] 35 annonces recuperees (total: 105)
2026-04-30 08:05:13 [INFO] [c4] [SEARCH] Recuperation de la page 4 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=4
2026-04-30 08:05:15 [INFO] [c4] [SEARCH] 35 annonces recuperees (total: 140)
2026-04-30 08:05:15 [INFO] [c4] [SEARCH] Recuperation de la page 5 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=5
2026-04-30 08:05:19 [INFO] [c4] [SEARCH] 35 annonces recuperees (total: 175)
2026-04-30 08:05:19 [INFO] [c4] [SEARCH] Recuperation de la page 6 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=6
2026-04-30 08:05:21 [INFO] [c4] [SEARCH] 33 annonces recuperees (total: 208)
2026-04-30 08:05:21 [INFO] [c4] [SEARCH] Recuperation de la page 7 avec l'URL: https://www.leboncoin.fr/recherche?category=2&text=c4&price=min-11000&regdate=2013-max&mileage=min-150000&u_car_brand=CITROEN&seats=999999&u_car_model=CITROEN_C4%2CCITROEN_C4+Aircross%2CCITROEN_C4+Cactus%2CCITROEN_C4+Picasso%2CCITROEN_C4+SpaceTourer%2CCITROEN_C4+X&page=7
2026-04-30 08:05:22 [INFO] [c4] [SEARCH] Page 7 : aucune annonce, arret de la pagination.
2026-04-30 08:05:22 [INFO] [c4] [SEARCH] Termine : 208 annonces au total dans /home/ubuntu/app/leboncoin_ads_c4_20260430_080505.csv
2026-04-30 08:05:22 [INFO] [c4] [SEARCH] CSV : leboncoin_ads_c4_20260430_080505.csv
2026-04-30 08:05:22 [INFO] [c4] [IMPORT] $ /home/ubuntu/app/.venv/bin/python -m db.migrate_csv --input /home/ubuntu/app/leboncoin_ads_c4_20260430_080505.csv --db /home/ubuntu/app/db/lbc.sqlite --model c4
2026-04-30 08:05:22 [INFO] [c4] [IMPORT] Model override : c4
2026-04-30 08:05:22 [INFO] [c4] [IMPORT] MIGRATION CSV -> SQLite unifie
2026-04-30 08:05:22 [INFO] [c4] [IMPORT] Fichier: leboncoin_ads_c4_20260430_080505.csv
2026-04-30 08:05:22 [INFO] [c4] [IMPORT] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:23 [INFO] [c4] [IMPORT] 208 lus, 208 inseres, 0 ignores, 0 erreurs
2026-04-30 08:05:23 [INFO] [c4] [IMPORT] TOTAL : 208 lus, 208 inseres — Base : /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:23 [INFO] [c4] [IMPORT] 15736 annonces en base
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] $ /home/ubuntu/app/.venv/bin/python /home/ubuntu/app/scripts/check_availability.py --csv /home/ubuntu/app/leboncoin_ads_c4_20260430_080505.csv --brand citroen --model c4 --db /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] CHECK DISPONIBILITE — CSV: leboncoin_ads_c4_20260430_080505.csv, Brand: citroen, Model: c4
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] 208 list_id lus dans le CSV.
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] 213 annonces actives en base pour citroen c4.
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] 5 annonce(s) marquées indisponibles.
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] CSV: 208, Actives DB: 213, Absentes: 5
2026-04-30 08:05:23 [INFO] [c4] [AVAILABILITY] Marquees indisponibles: 5
2026-04-30 08:05:23 [INFO] [c4] [DETAIL] $ /home/ubuntu/app/.venv/bin/python -m crawler.leboncoin_ad_detail --model c4 --delay 0.5 --limit 200
2026-04-30 08:05:23 [INFO] [c4] [DETAIL] ENRICHISSEMENT AD DETAIL — Modele: c4 — Limite: 200
2026-04-30 08:05:23 [INFO] [c4] [DETAIL] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:23 [INFO] [c4] [DETAIL] 2 annonce(s) à enrichir (modèle: c4)
2026-04-30 08:05:27 [INFO] [c4] [DETAIL] RESULTAT : 2 traitee(s), 2 enrichies, 0 introuvables, 0 erreurs
2026-04-30 08:05:27 [INFO] [c4] [STATS] $ /home/ubuntu/app/.venv/bin/python -m stats.main --model c4 --skip-plots
2026-04-30 08:05:28 [INFO] [c4] [STATS] ANALYSEUR LEBONCOIN — Base: /home/ubuntu/app/db/lbc.sqlite, Figures: /home/ubuntu/app/stats/c4/figures, Modele: c4, Graphiques: Non
2026-04-30 08:05:31 [INFO] [c4] [STATS] Using categorical units to plot a list of strings that are all parsable as floats or dates. If these strings should be plotted as numbers, cast to the appropriate data type before plotting.
2026-04-30 08:05:31 [INFO] [c4] [STATS] Using categorical units to plot a list of strings that are all parsable as floats or dates. If these strings should be plotted as numbers, cast to the appropriate data type before plotting.
2026-04-30 08:05:32 [INFO] [c4] [STATS] M05 — Extraction LLM des titres (GPT-5 Nano)
2026-04-30 08:05:32 [INFO] [c4] [STATS] Annonces sans evaluation LLM : 2
2026-04-30 08:05:35 [INFO] [c4] [STATS] HTTP Request: POST https://api.openai.com/v1/chat/completions "HTTP/1.1 200 OK"
2026-04-30 08:05:35 [INFO] [c4] [STATS] LLM OUTPUT batch 1/1: 2 resultats extraits (modele=gpt-4.1-mini)
2026-04-30 08:05:35 [INFO] [c4] [STATS] Resultats extraits : 2
2026-04-30 08:05:35 [INFO] [c4] [STATS] Evaluations inserees : 2
2026-04-30 08:05:35 [INFO] [c4] [STATS]   stats_descriptives : 5 lignes insérées
2026-04-30 08:05:35 [INFO] [c4] [STATS]   modele_regression : 2 lignes insérées
2026-04-30 08:05:36 [INFO] [c4] [STATS]   referentiel_prix : 32 segments insérés
2026-04-30 08:05:36 [INFO] [c4] [STATS]   ads.deal_columns : 568 annonces mises à jour
2026-04-30 08:05:36 [INFO] [c4] [STATS] M06 — Extraction LLM des descriptions (GPT-5 Nano)
2026-04-30 08:05:36 [INFO] [c4] [STATS] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:36 [INFO] [c4] [STATS] Champs actifs : 8
2026-04-30 08:05:36 [INFO] [c4] [STATS] Annonces Excellente/Bonne affaire sans analyse description : 1
2026-04-30 08:05:36 [INFO] [c4] [STATS] ━━━ LLM DESC SYSTEM PROMPT ━━━
Tu es un expert automobile français. On te donne des descriptions d'annonces de véhicules d'occasion avec leur identifiant.

Pour chaque annonce, extrais depuis la description les informations suivantes :
- courroie_changee : true si la courroie de distribution a été changée ou remplacée, false si explicitement non changée, null si non mentionné
- embrayage_change : true si l'embrayage est neuf ou a été remplacé, false si explicitement non changé, null si non mentionné
- travaux_recents : liste des travaux ou réparations récentes mentionnés dans la description (ex: 'freins refaits', 'pneus neufs', 'vidange faite'). Liste vide si aucun.
- negociabilite : négociable si le vendeur indique être ouvert aux offres, ferme si le prix est indiqué ferme, null si non mentionné
- contexte_vente : contexte notable de la vente s'il est mentionné (ex: 'urgent', 'déménagement', 'décès', 'achat neuf'). null si rien de notable
- nb_proprietaires : nombre de propriétaires du véhicule si mentionné (ex: 1 pour '1ère main', 2 pour '2ème main'). null si non mentionné
- options_description : liste des équipements et options cités dans la description (ex: 'GPS', 'Caméra recul', 'Clim auto', 'Toit ouvrant'). Liste vide si aucun.
- accidente : true si le véhicule a subi un accident, un choc, une collision, des airbags déclenchés ou une carrosserie endommagée mentionné explicitement. false si le vendeur indique explicitement non accidenté ou sans accident. null si non mentionné.

Règles :
- Extrais UNIQUEMENT ce qui est explicitement dans la description
- Ne déduis pas, n'invente pas
- Pour les champs de type liste, retourne une liste vide si rien n'est mentionné
- Conserve le list_id exact tel que fourni
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-30 08:05:36 [INFO] [c4] [STATS] ━━━ LLM DESC INPUT batch 1/1 (1 annonces) ━━━
3188684221: "Citroen C4 picasso  Moteur: 1.2 130cv  Boite : automatique EAT6  Finition : Exclusive Shine  7 places avec sièges individuels rabatabbles  Mise en circulation janvier 2018  Critair 1  Kms: env 147 000   Toutes options: - Double écran couleur - Écran tactile avec bluetooth - Toit panoramique avec velum electrique - Rétroviseurs rabatables electriques - Caméra arrière - Capteur de stationnement avant et arrière - Climatisation automatique bizone - régulateur vitesse - hayon de coffre motorisé électrique - Sièges électriques avant massants et chauffants - repose molet type avion électrique siège passager avant - Sièges arrières rabatables individuellement - 3 isofix à l'arrière - Ventilations individuelles arrieres - Rideaux pare-soleil arrière intégré dans portières - vitre sur teintées arrières d'origine - Ouverture et démarrage main libre (la clé toujours dans la poche ou sac à main) - crochet attelage amovible sans outil - double clé disponible Équivalent d'un Peugeot 5008 et Spacetourer.  Très bon état intérieur et extérieur (luste des griffes présentes sur les plastiques intérieur du coffre). Petit accroc à l'arrière sur la carrosserie.  Batterie fevrier 2023, bobines et bougies mars 2023. filtre air et habitacle mars 2023. Disques, plaquettes avant et 4 pneus août 2023 (8000kms ont été parcourues depuis). Courroie de distribution remplacée en octobre 2024, contrôle de la crépine également. Contrôle technique sera fait pour la vente.  Plus de photos sur demande VENDU AVEC ..."
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-30 08:05:39 [INFO] [c4] [STATS] HTTP Request: POST https://api.openai.com/v1/chat/completions "HTTP/1.1 200 OK"
2026-04-30 08:05:39 [INFO] [c4] [STATS] ━━━ LLM DESC OUTPUT batch 1/1 (1 résultats, modèle=gpt-4.1-mini) ━━━
[
  {
    "list_id": "3188684221",
    "courroie_changee": true,
    "embrayage_change": null,
    "travaux_recents": [
      "Batterie février 2023",
      "bobines et bougies mars 2023",
      "filtre air et habitacle mars 2023",
      "Disques, plaquettes avant et 4 pneus août 2023 (8000 kms parcourues)",
      "contrôle de la crépine"
    ],
    "negociabilite": null,
    "contexte_vente": null,
    "nb_proprietaires": null,
    "options_description": [
      "Double écran couleur",
      "Écran tactile avec bluetooth",
      "Toit panoramique avec velum électrique",
      "Rétroviseurs rabattables électriques",
      "Caméra arrière",
      "Capteur de stationnement avant et arrière",
      "Climatisation automatique bizone",
      "régulateur vitesse",
      "hayon de coffre motorisé électrique",
      "Sièges électriques avant massants et chauffants",
      "repose mollet type avion électrique siège passager avant",
      "Sièges arrière rabattables individuellement",
      "3 isofix à l'arrière",
      "Ventilations individuelles arrières",
      "Rideaux pare-soleil arrière intégré dans portières",
      "vitres sur teintées arrières d'origine",
      "Ouverture et démarrage main libre",
      "crochet attelage amovible sans outil",
      "double clé disponible"
    ],
    "accidente": true
  }
]
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
2026-04-30 08:05:39 [INFO] [c4] [STATS] Batch persisté : 1 évaluation(s) sauvegardée(s)
2026-04-30 08:05:39 [INFO] [c4] [STATS] Évaluations insérées : 1
2026-04-30 08:05:39 [INFO] [c4] [STATS] ANALYSE TERMINEE en 7.4s — 568 annonces (run #935) — Modele: c4
2026-04-30 08:05:40 [INFO] [c4] [LLM] $ /home/ubuntu/app/.venv/bin/python -m stats.m05_llm_title_analysis --model c4
2026-04-30 08:05:40 [INFO] [c4] [LLM] M05 — Extraction LLM des titres (GPT-5 Nano)
2026-04-30 08:05:40 [INFO] [c4] [LLM] Annonces sans evaluation LLM : 0
2026-04-30 08:05:40 [INFO] [c4] [LLM] Toutes les annonces ont deja ete analysees.
2026-04-30 08:05:40 [INFO] [c4] [LLM DESC] $ /home/ubuntu/app/.venv/bin/python -m stats.m06_llm_description_analysis --model c4
2026-04-30 08:05:41 [INFO] [c4] [LLM DESC] M06 — Extraction LLM des descriptions (GPT-5 Nano)
2026-04-30 08:05:41 [INFO] [c4] [LLM DESC] Schéma initialisé dans /home/ubuntu/app/db/lbc.sqlite
2026-04-30 08:05:41 [INFO] [c4] [LLM DESC] Champs actifs : 8
2026-04-30 08:05:41 [INFO] [c4] [LLM DESC] Annonces Excellente/Bonne affaire sans analyse description : 0
2026-04-30 08:05:41 [INFO] [c4] [LLM DESC] Toutes les annonces éligibles ont déjà été analysées.