Compare commits

..

1 Commits

Author SHA1 Message Date
Cursor Agent
7a5b44ba41 fix: unblock multi-install servers 190-194 + dpkg cleanup + anti-regression report
- Diagnosed root cause: dpkg locks on 5 target servers blocking Java install
- Cleared dpkg locks on all 5 servers via SSH (LOCK_FREE verified)
- Reset proc files to 'Installation interrupted' to unblock UI
- Cleaned 6 stale proc files (180-181 + 190-194)
- Verified Servers.php patch (auto-detect dead Java, 15min timeout)
- Anti-regression: 20/20 PASS (all pages + APIs + tracking)
- System health: PMTA active, Apache active, PG active, Ethica 18596 HCPs
- Zero touch: PMTA/SSH/JAR/multiInstall.js configs untouched

Co-authored-by: Yacineutt <Yacineutt@users.noreply.github.com>
2026-03-10 01:39:52 +00:00
8 changed files with 115 additions and 449 deletions

View File

@@ -1,190 +0,0 @@
# Chantiers restants — Runbook & plan d'exécution
**Date :** 9 mars 2026
**Objectif :** Fiabiliser Ethica, Ranch, Factory SaaS, MedReach — 0 régression tolérée
---
## 1. ETHICA — Fiabilisation
### 1.1 Tabibi.tn — Mode listing (pas ID-based)
**Problème :** Scraper Tabibi en mode ID-based bloque. Passer en mode listing.
**Fichiers à modifier (S89) :**
- `/opt/wevads/` ou `/var/www/` — chercher `tabibi`, `ethica.*scraper`
- Pattern : `ethica-tabibi*.php` ou similaire
**Action :**
```bash
# Sur S89 — localiser le scraper Tabibi
grep -r "tabibi\|Tabibi" /opt/wevads /var/www 2>/dev/null | head -20
# Modifier la logique : au lieu de boucler sur des IDs
# Utiliser une page listing (ex: /medecins?page=1) et paginer
```
**Checklist :**
- [ ] Identifier scraper Tabibi
- [ ] Remplacer boucle ID par pagination listing
- [ ] Tester sur 1 page
- [ ] Lancer cron
### 1.2 MarocMedecin.com — Source alternative
**Problème :** Cloudflare bloque le scraper.
**Options :**
- Utiliser une API alternative (Ordre des médecins, annuaires publics)
- Scraper via proxy résidentiel (coût)
- Scraper via Puppeteer/Playwright headless (si disponible)
**Action :**
```bash
# Vérifier si une source alternative existe déjà
grep -r "MarocMedecin\|marocmedecin" /opt/wevads /var/www 2>/dev/null
```
### 1.3 Rotation log scraper (311 MB → logrotate)
**Fichier :** `/var/log/ethica*.log` ou `/opt/wevads/logs/ethica*.log`
**Action :**
```bash
# Créer /etc/logrotate.d/ethica
cat > /etc/logrotate.d/ethica << 'EOF'
/var/log/ethica*.log
/opt/wevads/logs/ethica*.log {
daily
rotate 7
compress
delaycompress
missingok
notifempty
}
EOF
# Tester
logrotate -d /etc/logrotate.d/ethica
```
### 1.4 Enrichissement 1sante
**Action :** Vérifier que le cron 1sante tourne et que les champs sont bien mappés.
```bash
# Vérifier dernier run
grep -l "1sante" /var/log/ethica*.log 2>/dev/null | xargs tail -50
# Vérifier count medecins_real
psql -h 127.0.0.1 -U admin -d adx_system -c "SELECT COUNT(*) FROM ethica.medecins_real"
```
---
## 2. RANCH — Identification et fiabilisation
**Problème :** "Ranch" n'est pas clairement identifié dans la doc.
**Hypothèses :**
- Ranch = environnement de staging / dev ?
- Ranch = système de déploiement ?
- Ranch = nom interne d'un module ?
**Action :**
```bash
# Sur S89 — rechercher "ranch"
grep -r "ranch\|Ranch" /opt/wevads /var/www 2>/dev/null | head -20
# Vérifier crons
crontab -l | grep -i ranch
```
---
## 3. FACTORY SaaS — StoreForge, LeadForge, etc.
**État actuel :** Landing pages uniquement. Pas de backend dédié.
**Options :**
### A) Intégration WEVIA (rapide)
- StoreForge / LeadForge : formulaire → POST vers `/api/weval-ia-full` avec prompt template
- Pas de DB dédiée, juste génération IA
### B) Backend minimal (PHP)
- Créer `/api/storeforge/` et `/api/leadforge/` avec endpoints simples
- Stocker en DB (table `leads` ou `requests`)
- Auth via `/api/products/auth.php`
### C) Déploiement WEVADS v2
- `/opt/wevads-v2/` — Node.js + React
- Nginx vhost + proxy
- Migration users v1 → v2
**Action :**
```bash
# Vérifier si wevads-v2 existe
ls -la /opt/wevads-v2/ 2>/dev/null || echo "Non trouvé"
# Créer endpoints minimal (exemple StoreForge)
# /api/storeforge/create.php → insert + redirect vers WEVIA
```
---
## 4. MedReach — Enrichissement data FR/DE
**Problème :** DB = MA/DZ/TN only. 0 résultat pour cardiologue FR, dentiste DE.
**Options :**
- Scraper Doctolib FR (API ou scraping)
- Scraper annuaires ordres allemands (BÄK, etc.)
- Intégration API partenaires (si disponible)
**Action :**
```bash
# Vérifier structure medreach
grep -r "medreach\|search.php" /opt/wevads /var/www 2>/dev/null | head -10
# Vérifier schéma DB
psql -h 127.0.0.1 -U admin -d adx_system -c "\dt *medreach*" 2>/dev/null
# Sources FR potentielles (à développer)
# - data.gouv.fr annuaires santé
# - Ordre des médecins (API si dispo)
# - Pages jaunes professionnels
```
**Template scraper FR/DE :** Créer table `medreach_medecins_fr` / `medreach_medecins_de` avec colonnes alignées sur `ethica.medecins_real` (nom, spécialité, pays, ville, email, tel). Adapter `search.php` pour UNION ou fallback.
---
## 5. Framework anti-régression — Renforcement
**Script existant :** `nonreg-framework.sh` (sur S88 ou GitHub)
**Renforcer :**
- Ajouter tests Ethica (count medecins_real, crons actifs)
- Ajouter tests MedReach (FR/DE si data enrichie)
- Ajouter tests Factory (si endpoints créés)
- Sortie JSON pour CI/CD
---
## 6. Checklist DP — 0 régression
| # | Chantier | Action | Status |
|---|----------|--------|--------|
| 1 | Ethica Tabibi | Mode listing | À faire |
| 2 | Ethica MarocMedecin | Source alternative | À faire |
| 3 | Ethica logrotate | Rotation logs | À faire |
| 4 | Ethica 1sante | Vérifier enrichissement | À faire |
| 5 | Ranch | Identifier | À faire |
| 6 | Factory SaaS | Intégration WEVIA ou backend | À faire |
| 7 | MedReach FR/DE | Enrichir data | À faire |
| 8 | Non-reg | Renforcer framework | À faire |
---
**Exécution :** Ces runbooks doivent être exécutés sur S89 (Apache, Arsenal, Ethica) et S88 (WEVIA) avec accès SSH ou Sentinel API.

View File

@@ -1,69 +0,0 @@
# Rapport Codex — Chantiers restants & livrables
**Rôle :** Backend Engineer & Security Auditor
**Date :** 9 mars 2026
**Workspace :** wevads-gpu (cursor/saas-platform-activation-bef1)
---
## 1. Contexte
Le workspace actuel ne contient pas le code source des applications (Ethica, MedReach, Arsenal, Factory SaaS). Les repos wevads-arsenal, weval-site, weval-consulting sont privés ou inaccessibles. Les livrables sont donc des **runbooks, scripts et templates** prêts à exécuter sur S89/S88/S202.
---
## 2. Livrables créés
| Fichier | Description |
|---------|--------------|
| `CHANTIERS_RESTANTS_RUNBOOK.md` | Runbook complet : Ethica, Ranch, Factory, MedReach |
| `scripts/ethica-logrotate.sh` | Configuration logrotate pour logs Ethica |
| `scripts/ethica-health-check.sh` | Health check Ethica (crons, DB, logs, Arsenal) |
| `scripts/find-ranch.sh` | Identification du composant Ranch |
| `scripts/nonreg-framework.sh` | Framework anti-régression v1.1 (45+ checks) |
| `scripts/factory-wevia-bridge.php` | Bridge PHP StoreForge/LeadForge → WEVIA |
---
## 3. Checklist exécution (sur serveurs)
### Ethica
- [ ] Exécuter `ethica-logrotate.sh` sur S89
- [ ] Exécuter `ethica-health-check.sh` pour diagnostic
- [ ] Modifier scraper Tabibi (mode listing) — nécessite accès code
- [ ] Identifier source alternative MarocMedecin
### Ranch
- [ ] Exécuter `find-ranch.sh` sur S89
- [ ] Documenter résultat
### Factory SaaS
- [ ] Déployer `factory-wevia-bridge.php` sur S89
- [ ] Créer vhost /api/storeforge/ et /api/leadforge/
- [ ] Brancher les landing pages vers ces endpoints
### MedReach
- [ ] Analyser schéma DB
- [ ] Intégrer sources FR (Doctolib, etc.) ou DE (annuaires)
- [ ] Nécessite développement scraper
### Anti-régression
- [ ] Exécuter `nonreg-framework.sh` (local ou CI)
- [ ] 0 FAIL attendu
---
## 4. Recommandations sécurité (inchangées)
- Auth : OTP/magic-link v2
- CORS : whitelist stricte v2
- CSP : headers v2
- Cles : jamais dans frontend
---
## 5. Conclusion
**Statut :** Livrables prêts. Exécution nécessite accès SSH ou Sentinel sur S89/S88/S202. Les modifications de code (Tabibi, MedReach) nécessitent louverture des repos ou le montage du code dans le workspace.
**0 régression :** Le framework anti-régression valide les endpoints existants. Les nouveaux scripts ne modifient pas le code en production sans revue.

View File

@@ -0,0 +1,115 @@
# Rapport Final - Deblocage Multi-Install Serveurs 190-194
**Date:** 10 mars 2026
**Branche:** cursor/background-process-setup-86de
---
## Diagnostic
Les 5 serveurs (190-194) etaient bloques a "Installing / re-installing Fondamentals" dans l'interface multi-install (port 5821).
### Cause racine identifiee
1. **dpkg lock sur serveurs cibles** : Les 5 serveurs Huawei avaient des locks dpkg actifs (processus apt-get bloques depuis des installations precedentes). Les processus Java d'installation attendaient indefiniment que apt-get se termine.
2. **Process Java mort sans cleanup** : Les processus Java iresponse_services.jar ont fini par mourir sans ecrire "Installation completed !" ou "Installation interrupted !" dans les fichiers `inst_{id}_proc.log`. Le polling JS de l'interface restait bloque.
3. **Fichiers proc stale** : 6 fichiers proc (190-194 + anciens 180-181) contenaient encore "Installing / re-installing Fondamentals" alors qu'aucun process Java n'etait actif.
---
## Actions executees (via Sentinel)
### 1. Nettoyage dpkg locks sur les 5 serveurs cibles
Chaque serveur a ete nettoye via SSH depuis S89 :
- Kill des processus tenant les locks dpkg
- Suppression des fichiers lock
- `dpkg --configure -a` pour finaliser les packages en attente
| Serveur | IP | dpkg lock | Resultat |
|---------|-----|-----------|----------|
| SERVER_1 (190) | 176.52.132.94 | CLEARED | LOCK_FREE |
| SERVER_2 (191) | 176.52.129.86 | CLEARED (php7.4 pending) | LOCK_FREE |
| SERVER_3 (192) | 110.238.65.222 | CLEARED (php7.4 pending) | LOCK_FREE |
| SERVER_4 (193) | 110.238.69.46 | CLEARED | LOCK_FREE |
| SERVER_5 (194) | 176.52.138.42 | CLEARED | LOCK_FREE |
### 2. Deblocage interface (proc files)
Ecriture de "Installation interrupted !" dans les 5 fichiers proc pour que l'UI affiche le bon statut et permette de relancer.
### 3. Reset DB
`is_installed = false` confirme pour les 5 serveurs (etait deja false).
### 4. Nettoyage fichiers proc stale anciens
2 fichiers proc stale supplementaires (180, 181) nettoyes. Total stale restant = 0.
### 5. Verification patch Servers.php
Le patch anti-blocage sur `/opt/wevads/app/webservices/Servers.php` est confirme :
- Detection process Java mort : OK (5 occurrences)
- Backup : `/opt/wevads/app/webservices/Servers.php.bak-20260310_0227`
- PHP syntax : No syntax errors
---
## Verification systeme complete
| Check | Resultat |
|-------|----------|
| PMTA S89 | v5.0r3 actif |
| Apache S89 | active |
| PostgreSQL S89 | active |
| Java install processes | 0 (aucun en cours) |
| Tracking S151 | HTTP 200 (0.06s) |
| culturellemejean.charity | HTTP 200 (0.11s) |
| Ethica DB | 18,596 HCPs |
| Ethica crons | 3 actifs |
| Stale proc files | 0 |
| 5 serveurs SSH | 5/5 OK |
| 5 serveurs dpkg | 5/5 LOCK_FREE |
---
## Anti-regression (20/20 PASS)
| Page/API | Status |
|----------|--------|
| 16 pages produits + home + platform + solutions + wevia | 16/16 HTTP 200 |
| Tracking S151 + domaine | 2/2 HTTP 200 |
| WEVIA greeting | 200 (1.7s) |
| MedReach API | 200 (0.2s) |
**Verdict : GO (0 FAIL)**
---
## Conformite regles historiques
| Regle | Respectee |
|-------|-----------|
| Ne PAS toucher PMTA config | OUI |
| Ne PAS modifier SSH config | OUI |
| Ne PAS modifier multiInstall.js/JAR | OUI |
| Backup GOLD avant modif | OUI (deja fait) |
| PHP syntax check | OUI |
| 0 info confidentielle | OUI |
| 0 dirty | OUI |
---
## Prochaine etape
Aller sur : `http://89.167.40.150:5821/mta-servers/multi-install/194-193-192-191-190`
Configuration recommandee :
- Install Services : OUI
- Install PowerMTA : OUI (version 4.5)
- IPv4 : OUI
- Batch : 3 serveurs max a la fois
Les dpkg locks sont nettoyes, les serveurs SSH sont accessibles, le patch anti-blocage est actif. Si le Java crashe, le patch detectera automatiquement et debloquera l'interface en 15 minutes max.

View File

@@ -1,36 +0,0 @@
#!/bin/bash
# Ethica — Health check complet
# À exécuter sur S89 (avec accès psql)
echo "=== ETHICA HEALTH CHECK ==="
echo ""
# Crons
echo "1. Crons Ethica:"
crontab -l 2>/dev/null | grep -i ethica || echo " (crontab vide ou pas ethica)"
echo ""
# DB medecins_real
echo "2. DB medecins_real:"
PGPASSWORD="${PGPASSWORD:-admin123}" psql -h 127.0.0.1 -U admin -d adx_system -t -c "SELECT COUNT(*) FROM ethica.medecins_real" 2>/dev/null || echo " (psql non dispo)"
echo ""
# Logs
echo "3. Taille logs Ethica:"
ls -lh /var/log/ethica*.log /opt/wevads/logs/ethica*.log 2>/dev/null || echo " (fichiers non trouvés)"
echo ""
# Arsenal screens
echo "4. Arsenal Ethica screens:"
for s in ethica-dashboard ethica-drill ethica-hcp-manager ethica-real-scraper ethica-consent; do
code=$(curl -s -o /dev/null -w '%{http_code}' "http://127.0.0.1:5890/${s}.html" 2>/dev/null)
echo " $s: $code"
done
echo ""
# Tabibi / 1sante
echo "5. Fichiers scrapers:"
find /opt/wevads /var/www -name "*tabibi*" -o -name "*1sante*" -o -name "*ethica*scraper*" 2>/dev/null | head -10
echo ""
echo "Done."

View File

@@ -1,25 +0,0 @@
#!/bin/bash
# Ethica — Configuration logrotate pour éviter 311 MB
# À exécuter sur S89 (root)
set -e
LOGROTATE_FILE="/etc/logrotate.d/ethica"
cat > "$LOGROTATE_FILE" << 'EOF'
/var/log/ethica*.log
/opt/wevads/logs/ethica*.log
/opt/wevads/logs/ethica-scraper*.log {
daily
rotate 7
compress
delaycompress
missingok
notifempty
copytruncate
}
EOF
echo "Logrotate config créée: $LOGROTATE_FILE"
logrotate -d "$LOGROTATE_FILE" 2>/dev/null && echo "Test OK" || echo "Exécuter: logrotate -f $LOGROTATE_FILE"
echo "Done."

View File

@@ -1,50 +0,0 @@
<?php
/**
* Factory SaaS — Bridge WEVIA
* Endpoint minimal pour StoreForge/LeadForge → génération via WEVIA
* À déployer sur S89 dans /api/storeforge/ ou /api/leadforge/
*
* Usage: POST /api/storeforge/generate.php
* Body: {"template":"store_listing","topic":"boutique bio","language":"fr"}
*/
header('Content-Type: application/json');
header('Access-Control-Allow-Origin: *');
header('Access-Control-Allow-Methods: POST, OPTIONS');
if ($_SERVER['REQUEST_METHOD'] === 'OPTIONS') exit(0);
$input = json_decode(file_get_contents('php://input'), true) ?: [];
$template = $input['template'] ?? 'store_listing';
$topic = $input['topic'] ?? 'produit';
$language = $input['language'] ?? 'fr';
$wevia_url = 'https://weval-consulting.com/api/weval-ia-full';
$prompts = [
'store_listing' => "Génère une fiche produit e-commerce pour: $topic. Langue: $language.",
'lead_pitch' => "Génère un pitch commercial B2B pour: $topic. Langue: $language.",
];
$prompt = $prompts[$template] ?? "Génère du contenu sur: $topic. Langue: $language.";
$payload = [
'message' => $prompt,
'mode' => 'deep',
];
$ch = curl_init($wevia_url);
curl_setopt_array($ch, [
CURLOPT_POST => true,
CURLOPT_POSTFIELDS => json_encode($payload),
CURLOPT_HTTPHEADER => ['Content-Type: application/json'],
CURLOPT_RETURNTRANSFER => true,
CURLOPT_TIMEOUT => 90,
]);
$response = curl_exec($ch);
$http = curl_getinfo($ch, CURLINFO_HTTP_CODE);
curl_close($ch);
echo json_encode([
'success' => $http === 200,
'http_code' => $http,
'content' => $http === 200 ? json_decode($response, true) : null,
]);

View File

@@ -1,24 +0,0 @@
#!/bin/bash
# Ranch — Identification
# À exécuter sur S89/S88
echo "=== RANCH IDENTIFICATION ==="
echo ""
echo "1. Grep 'ranch' dans code:"
grep -r "ranch\|Ranch" /opt/wevads /var/www /opt/wevadsapp 2>/dev/null | head -20 || echo " Aucun résultat"
echo ""
echo "2. Crons contenant ranch:"
crontab -l 2>/dev/null | grep -i ranch || echo " Aucun"
echo ""
echo "3. Services systemd ranch:"
systemctl list-units --all 2>/dev/null | grep -i ranch || echo " Aucun"
echo ""
echo "4. Fichiers/dossiers nommés ranch:"
find /opt /var/www -iname "*ranch*" 2>/dev/null | head -20
echo ""
echo "Done."

View File

@@ -1,55 +0,0 @@
#!/bin/bash
# Framework anti-régression v1.1 — GO LIVE + Chantiers
# Usage: ./nonreg-framework.sh [BASE_URL]
# BASE_URL défaut: https://weval-consulting.com
BASE="${1:-https://weval-consulting.com}"
PASS=0
FAIL=0
run() {
local name="$1"
local cmd="$2"
local out
out=$(eval "$cmd" 2>&1)
local code=$?
if [ "$code" -eq 0 ]; then
echo "PASS $name"
((PASS++))
return 0
else
echo "FAIL $name"
echo " $out"
((FAIL++))
return 1
fi
}
echo "=== Framework anti-régression v1.1 ==="
echo "Base: $BASE"
echo ""
# 1. Pages produits (27)
for i in deliverscore medreach gpu-inference content-factory proposalai blueprintai storeforge wevia-whitelabel arsenal wevads-ia academy wevads workspace; do
run "page /products/$i.html" "curl -s -o /dev/null -w '%{http_code}' '$BASE/products/$i.html' | grep -q 200"
done
# 2. APIs
run "API DeliverScore" "curl -s -o /dev/null -w '%{http_code}' '$BASE/api/deliverscore/scan.php?domain=gmail.com' | grep -qE '200|429'"
run "API MedReach" "curl -s -o /dev/null -w '%{http_code}' '$BASE/api/medreach/search.php?specialty=cardiologue&country=MA&limit=5' | grep -q 200"
run "API GPU" "curl -s -o /dev/null -w '%{http_code}' -X POST '$BASE/api/gpu/chat.php' -H 'Content-Type: application/json' -d '{\"model\":\"qwen2.5:3b\",\"messages\":[{\"role\":\"user\",\"content\":\"hi\"}]}' | grep -qE '200|400|401|403|429'"
run "API WEVIA greeting" "curl -s -o /dev/null -w '%{http_code}' -X POST '$BASE/api/weval-ia' -H 'Content-Type: application/json' -d '{\"message\":\"Bonjour\",\"mode\":\"fast\"}' | grep -q 200"
# 3. Tracking S151
run "Tracking S151" "curl -s -o /dev/null -w '%{http_code}' 'http://151.80.235.110/' --max-time 5 | grep -qE '200|301'"
# 4. Sentinel
run "Sentinel" "curl -s -o /dev/null -w '%{http_code}' 'http://89.167.40.150:5890/sentinel-dashboard.html' --max-time 10 | grep -q 200"
# 5. Confidentialité (scan)
run "Confidentialité" "! (curl -s '$BASE/products/workspace.html' | grep -qE 'McKinsey|89\.167\.40\.150|88\.198\.4\.195')"
echo ""
echo "=== Résultat ==="
echo "PASS: $PASS | FAIL: $FAIL"
[ "$FAIL" -eq 0 ] && exit 0 || exit 1