feat(moodle): replicacion completa 16 cursos de carrera, user-agent mozilla y fix login v3.5.2
This commit is contained in:
+112
-16
@@ -17,18 +17,95 @@ import requests
|
||||
|
||||
# Mapa de correspondencia oficial entre Producción y Local
|
||||
COURSE_MAPPING = {
|
||||
187: {
|
||||
'name': 'Escuela de Tecnología e Industrias Digitales (Sala de estudiantes)',
|
||||
'shortname': 'Sala de estudiantes',
|
||||
'local_id': 3,
|
||||
'type': 'faculty'
|
||||
},
|
||||
# Carrera y Escuela
|
||||
922: {
|
||||
'name': 'Mi carrera - Lic. en Tecnologías Digitales (CCC)',
|
||||
'shortname': 'Mi carrera - Lic. en Tecnologías Digitales (CCC)',
|
||||
'local_id': 19,
|
||||
'type': 'career'
|
||||
},
|
||||
187: {
|
||||
'name': 'Escuela de Tecnología e Industrias Digitales (Sala de estudiantes)',
|
||||
'shortname': 'Sala de estudiantes',
|
||||
'local_id': 3,
|
||||
'type': 'faculty'
|
||||
},
|
||||
# Cuatrimestre 1/2025
|
||||
3218: {
|
||||
'name': 'ASIG00120 - Gestión de Sistemas de Información_1/2025',
|
||||
'shortname': 'ASIG00120 - Gestión de Sistemas de Información_1/2025',
|
||||
'local_id': 4,
|
||||
'type': 'subject'
|
||||
},
|
||||
3220: {
|
||||
'name': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2025',
|
||||
'shortname': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2025',
|
||||
'local_id': 5,
|
||||
'type': 'subject'
|
||||
},
|
||||
3221: {
|
||||
'name': 'ASIG00122 - Taller: Gestión de Proyectos Digitales - E1_1/2025',
|
||||
'shortname': 'ASIG00122 - Taller: Gestión de Proyectos Digitales - E1_1/2025',
|
||||
'local_id': 6,
|
||||
'type': 'subject'
|
||||
},
|
||||
3665: {
|
||||
'name': 'ASIG00215 - Marketing Digital - OPTATIVA -1/2025',
|
||||
'shortname': 'ASIG00215 - Marketing Digital - OPTATIVA -1/2025',
|
||||
'local_id': 7,
|
||||
'type': 'subject'
|
||||
},
|
||||
# Cuatrimestre 2/2025
|
||||
3945: {
|
||||
'name': 'ASIG00123 - Administración de Negocios Digitales_2/2025',
|
||||
'shortname': 'ASIG00123 - Administración de Negocios Digitales_2/2025',
|
||||
'local_id': 8,
|
||||
'type': 'subject'
|
||||
},
|
||||
3944: {
|
||||
'name': 'ASIG00124 - Sistemas Digitales_2/2025',
|
||||
'shortname': 'ASIG00124 - Sistemas Digitales_2/2025',
|
||||
'local_id': 9,
|
||||
'type': 'subject'
|
||||
},
|
||||
3943: {
|
||||
'name': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_2/2025',
|
||||
'shortname': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_2/2025',
|
||||
'local_id': 10,
|
||||
'type': 'subject'
|
||||
},
|
||||
3933: {
|
||||
'name': 'ASIG00205 - Gestión del Talento Humano en la Industria digital-2/2025',
|
||||
'shortname': 'ASIG00205 - Gestión del Talento Humano en la Industria digital-2/2025',
|
||||
'local_id': 11,
|
||||
'type': 'subject'
|
||||
},
|
||||
# Cuatrimestre 1/2026
|
||||
4565: {
|
||||
'name': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2026',
|
||||
'shortname': 'ASIG00121 - Análisis de Datos I - TEC.DIG._1/2026',
|
||||
'local_id': 12,
|
||||
'type': 'subject'
|
||||
},
|
||||
4569: {
|
||||
'name': 'ASIG00123 - Administración de Negocios Digitales_1/2026',
|
||||
'shortname': 'ASIG00123 - Administración de Negocios Digitales_1/2026',
|
||||
'local_id': 13,
|
||||
'type': 'subject'
|
||||
},
|
||||
4571: {
|
||||
'name': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_1/2026',
|
||||
'shortname': 'ASIG00125 - Taller: Emprendedurismo en Innovación Digital_1/2026',
|
||||
'local_id': 14,
|
||||
'type': 'subject'
|
||||
},
|
||||
4582: {
|
||||
'name': 'ASIG00296 - Gestión de Redes Informáticas - Equipo 1_1/2026',
|
||||
'shortname': 'ASIG00296 - Gestión de Redes Informáticas - Equipo 1_1/2026',
|
||||
'local_id': 15,
|
||||
'type': 'subject'
|
||||
},
|
||||
# Cuatrimestre 2/2026
|
||||
5311: {
|
||||
'name': 'ASIG00124 - Sistemas Digitales_2/2026',
|
||||
'shortname': 'ASIG00124 - Sistemas Digitales_2/2026',
|
||||
@@ -113,23 +190,40 @@ class MoodleProdExtractor:
|
||||
self.password = password
|
||||
self.session = requests.Session()
|
||||
self.session.headers.update({
|
||||
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36',
|
||||
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)',
|
||||
'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
|
||||
'Accept-Language': 'es-AR,es;q=0.9',
|
||||
})
|
||||
self.authenticated = False
|
||||
self.email_cache: Dict[int, str] = {}
|
||||
# Pre-cargar correos previamente extraídos si existe participantes_export.json
|
||||
if os.path.exists("participantes_export.json"):
|
||||
try:
|
||||
with open("participantes_export.json", encoding="utf-8") as f:
|
||||
cached_data = json.load(f)
|
||||
for cid, user_list in cached_data.items():
|
||||
for u in user_list:
|
||||
dni_str = str(u.get('dni', ''))
|
||||
if dni_str.startswith('90') and len(dni_str) == 8 and dni_str[2:].isdigit():
|
||||
mid = int(dni_str[2:])
|
||||
if u.get('email') and not u['email'].endswith('@unicaba.edu.ar'):
|
||||
self.email_cache[mid] = u['email']
|
||||
elif str(u.get('dni')) == '34247025':
|
||||
self.email_cache[34247025] = "carlostellocba@gmail.com"
|
||||
print(f"[+] Precargados {len(self.email_cache)} correos reales desde caché local.")
|
||||
except Exception as e:
|
||||
print(f"[*] Aviso al cargar caché: {e}")
|
||||
|
||||
def fetch_real_emails(self, users: List[Dict[str, Any]], course_id: int) -> None:
|
||||
"""Descarga de forma concurrente los correos electrónicos REALES desde los perfiles de Moodle Producción."""
|
||||
to_fetch = [u for u in users if u.get('moodle_id') and u['moodle_id'] not in self.email_cache]
|
||||
if to_fetch:
|
||||
print(f"[*] Obteniendo correos electrónicos reales para {len(to_fetch)} participantes desde sus perfiles...")
|
||||
print(f"[*] Obteniendo correos electrónicos reales para {len(to_fetch)} participantes faltantes...")
|
||||
|
||||
def _get_single_email(uid: int):
|
||||
url = f"{self.base_url}/user/view.php?id={uid}&course={course_id}"
|
||||
try:
|
||||
res = self.session.get(url, timeout=15)
|
||||
res = self.session.get(url, timeout=5)
|
||||
if res.status_code == 200:
|
||||
mailtos = [m for m in re.findall(r'mailto:([^"\'>\s]+)', res.text) if m not in ['info@udelaciudad.edu.ar', '.']]
|
||||
if mailtos:
|
||||
@@ -139,7 +233,7 @@ class MoodleProdExtractor:
|
||||
return uid, None
|
||||
|
||||
from concurrent.futures import ThreadPoolExecutor
|
||||
with ThreadPoolExecutor(max_workers=10) as executor:
|
||||
with ThreadPoolExecutor(max_workers=15) as executor:
|
||||
future_results = list(executor.map(_get_single_email, [u['moodle_id'] for u in to_fetch]))
|
||||
|
||||
for uid, email in future_results:
|
||||
@@ -408,14 +502,16 @@ class MoodleLocalLoader:
|
||||
if isinstance(query_res, dict) and 'users' in query_res and len(query_res['users']) > 0:
|
||||
uid = query_res['users'][0]['id']
|
||||
self.user_cache[username] = uid
|
||||
# Actualizar con el correo real de producción si difiere del actual
|
||||
# Actualizar con el correo real de producción si difiere del actual y asegurar contraseña idéntica al DNI
|
||||
current_email = query_res['users'][0].get('email', '')
|
||||
target_email = user_data.get('email', '')
|
||||
update_payload = {
|
||||
'users[0][id]': uid,
|
||||
'users[0][password]': user_data['password']
|
||||
}
|
||||
if target_email and current_email != target_email:
|
||||
self.call('core_user_update_users', {
|
||||
'users[0][id]': uid,
|
||||
'users[0][email]': target_email
|
||||
})
|
||||
update_payload['users[0][email]'] = target_email
|
||||
self.call('core_user_update_users', update_payload)
|
||||
return uid
|
||||
|
||||
# Crear usuario si no existe
|
||||
@@ -548,7 +644,7 @@ def run_replication(
|
||||
|
||||
def main():
|
||||
parser = argparse.ArgumentParser(description="Replicador de Moodle Producción a Local para UniCABA.")
|
||||
parser.add_argument('--course', type=int, choices=[187, 922, 5311, 5313, 5314], help="ID del curso específico a procesar.")
|
||||
parser.add_argument('--course', type=int, choices=list(COURSE_MAPPING.keys()), help="ID del curso específico a procesar.")
|
||||
parser.add_argument('--dry-run', action='store_true', help="Ejecutar en modo simulación sin modificar el Moodle local.")
|
||||
parser.add_argument('--export-json', type=str, help="Ruta de archivo JSON donde guardar el volcado de datos.")
|
||||
args = parser.parse_args()
|
||||
|
||||
Reference in New Issue
Block a user