feat(moodle): replicacion completa 16 cursos de carrera, user-agent mozilla y fix login v3.5.2

This commit is contained in:
2026-10-16 15:09:13 -03:00
parent 0828c93edd
commit 6cb75722f2
11 changed files with 169 additions and 32 deletions
+112 -16
View File
@@ -17,18 +17,95 @@ import requests
# Mapa de correspondencia oficial entre Producción y Local
COURSE_MAPPING = {
187: {
'name': 'Escuela de Tecnología e Industrias Digitales (Sala de estudiantes)',
'shortname': 'Sala de estudiantes',
'local_id': 3,
'type': 'faculty'
},
# Carrera y Escuela
922: {
'name': 'Mi carrera - Lic. en Tecnologías Digitales (CCC)',
'shortname': 'Mi carrera - Lic. en Tecnologías Digitales (CCC)',
'local_id': 19,
'type': 'career'
},
187: {
'name': 'Escuela de Tecnología e Industrias Digitales (Sala de estudiantes)',
'shortname': 'Sala de estudiantes',
'local_id': 3,
'type': 'faculty'
},
# Cuatrimestre 1/2025
3218: {
'name': 'ASIG00120 - Gestión de Sistemas de Información_1/2025',
'shortname': 'ASIG00120 - Gestión de Sistemas de Información_1/2025',
'local_id': 4,
'type': 'subject'
},
3220: {
'name': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2025',
'shortname': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2025',
'local_id': 5,
'type': 'subject'
},
3221: {
'name': 'ASIG00122 - Taller: Gestión de Proyectos Digitales - E1_1/2025',
'shortname': 'ASIG00122 - Taller: Gestión de Proyectos Digitales - E1_1/2025',
'local_id': 6,
'type': 'subject'
},
3665: {
'name': 'ASIG00215 - Marketing Digital - OPTATIVA -1/2025',
'shortname': 'ASIG00215 - Marketing Digital - OPTATIVA -1/2025',
'local_id': 7,
'type': 'subject'
},
# Cuatrimestre 2/2025
3945: {
'name': 'ASIG00123 - Administración de Negocios Digitales_2/2025',
'shortname': 'ASIG00123 - Administración de Negocios Digitales_2/2025',
'local_id': 8,
'type': 'subject'
},
3944: {
'name': 'ASIG00124 - Sistemas Digitales_2/2025',
'shortname': 'ASIG00124 - Sistemas Digitales_2/2025',
'local_id': 9,
'type': 'subject'
},
3943: {
'name': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_2/2025',
'shortname': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_2/2025',
'local_id': 10,
'type': 'subject'
},
3933: {
'name': 'ASIG00205 - Gestión del Talento Humano en la Industria digital-2/2025',
'shortname': 'ASIG00205 - Gestión del Talento Humano en la Industria digital-2/2025',
'local_id': 11,
'type': 'subject'
},
# Cuatrimestre 1/2026
4565: {
'name': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2026',
'shortname': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2026',
'local_id': 12,
'type': 'subject'
},
4569: {
'name': 'ASIG00123 - Administración de Negocios Digitales_1/2026',
'shortname': 'ASIG00123 - Administración de Negocios Digitales_1/2026',
'local_id': 13,
'type': 'subject'
},
4571: {
'name': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_1/2026',
'shortname': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_1/2026',
'local_id': 14,
'type': 'subject'
},
4582: {
'name': 'ASIG00296 - Gestión de Redes Informáticas - Equipo 1_1/2026',
'shortname': 'ASIG00296 - Gestión de Redes Informáticas - Equipo 1_1/2026',
'local_id': 15,
'type': 'subject'
},
# Cuatrimestre 2/2026
5311: {
'name': 'ASIG00124 - Sistemas Digitales_2/2026',
'shortname': 'ASIG00124 - Sistemas Digitales_2/2026',
@@ -113,23 +190,40 @@ class MoodleProdExtractor:
self.password = password
self.session = requests.Session()
self.session.headers.update({
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36',
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)',
'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
'Accept-Language': 'es-AR,es;q=0.9',
})
self.authenticated = False
self.email_cache: Dict[int, str] = {}
# Pre-cargar correos previamente extraídos si existe participantes_export.json
if os.path.exists("participantes_export.json"):
try:
with open("participantes_export.json", encoding="utf-8") as f:
cached_data = json.load(f)
for cid, user_list in cached_data.items():
for u in user_list:
dni_str = str(u.get('dni', ''))
if dni_str.startswith('90') and len(dni_str) == 8 and dni_str[2:].isdigit():
mid = int(dni_str[2:])
if u.get('email') and not u['email'].endswith('@unicaba.edu.ar'):
self.email_cache[mid] = u['email']
elif str(u.get('dni')) == '34247025':
self.email_cache[34247025] = "carlostellocba@gmail.com"
print(f"[+] Precargados {len(self.email_cache)} correos reales desde caché local.")
except Exception as e:
print(f"[*] Aviso al cargar caché: {e}")
def fetch_real_emails(self, users: List[Dict[str, Any]], course_id: int) -> None:
"""Descarga de forma concurrente los correos electrónicos REALES desde los perfiles de Moodle Producción."""
to_fetch = [u for u in users if u.get('moodle_id') and u['moodle_id'] not in self.email_cache]
if to_fetch:
print(f"[*] Obteniendo correos electrónicos reales para {len(to_fetch)} participantes desde sus perfiles...")
print(f"[*] Obteniendo correos electrónicos reales para {len(to_fetch)} participantes faltantes...")
def _get_single_email(uid: int):
url = f"{self.base_url}/user/view.php?id={uid}&course={course_id}"
try:
res = self.session.get(url, timeout=15)
res = self.session.get(url, timeout=5)
if res.status_code == 200:
mailtos = [m for m in re.findall(r'mailto:([^"\'>\s]+)', res.text) if m not in ['info@udelaciudad.edu.ar', '.']]
if mailtos:
@@ -139,7 +233,7 @@ class MoodleProdExtractor:
return uid, None
from concurrent.futures import ThreadPoolExecutor
with ThreadPoolExecutor(max_workers=10) as executor:
with ThreadPoolExecutor(max_workers=15) as executor:
future_results = list(executor.map(_get_single_email, [u['moodle_id'] for u in to_fetch]))
for uid, email in future_results:
@@ -408,14 +502,16 @@ class MoodleLocalLoader:
if isinstance(query_res, dict) and 'users' in query_res and len(query_res['users']) > 0:
uid = query_res['users'][0]['id']
self.user_cache[username] = uid
# Actualizar con el correo real de producción si difiere del actual
# Actualizar con el correo real de producción si difiere del actual y asegurar contraseña idéntica al DNI
current_email = query_res['users'][0].get('email', '')
target_email = user_data.get('email', '')
update_payload = {
'users[0][id]': uid,
'users[0][password]': user_data['password']
}
if target_email and current_email != target_email:
self.call('core_user_update_users', {
'users[0][id]': uid,
'users[0][email]': target_email
})
update_payload['users[0][email]'] = target_email
self.call('core_user_update_users', update_payload)
return uid
# Crear usuario si no existe
@@ -548,7 +644,7 @@ def run_replication(
def main():
parser = argparse.ArgumentParser(description="Replicador de Moodle Producción a Local para UniCABA.")
parser.add_argument('--course', type=int, choices=[187, 922, 5311, 5313, 5314], help="ID del curso específico a procesar.")
parser.add_argument('--course', type=int, choices=list(COURSE_MAPPING.keys()), help="ID del curso específico a procesar.")
parser.add_argument('--dry-run', action='store_true', help="Ejecutar en modo simulación sin modificar el Moodle local.")
parser.add_argument('--export-json', type=str, help="Ruta de archivo JSON donde guardar el volcado de datos.")
args = parser.parse_args()