aboutsummaryrefslogtreecommitdiff
path: root/management/commands/_private.py
diff options
context:
space:
mode:
Diffstat (limited to 'management/commands/_private.py')
-rw-r--r--management/commands/_private.py73
1 files changed, 23 insertions, 50 deletions
diff --git a/management/commands/_private.py b/management/commands/_private.py
index 8f195a1..b663454 100644
--- a/management/commands/_private.py
+++ b/management/commands/_private.py
@@ -23,51 +23,16 @@ from edt.models import Group, Room, Course
from edt.utils import get_week
import requests
+import edt
def add_time(date, time):
ptime = datetime.datetime.strptime(time, "%H:%M")
delta = datetime.timedelta(hours=ptime.hour, minutes=ptime.minute)
return date + delta
-def consolidate_group(group):
- group_content_key = ("mention", "subgroup", "td", "tp")
- group_content_list = group.group_info[1:]
-
- if group.subgroup is not None:
- group_content = dict(zip(group_content_key, group_content_list))
-
- for i in range(len(group_content_list))[::-1]:
- del group_content[group_content_key[i]]
- group_content[group_content_key[i] + "__isnull"] = True
-
- if group_content_list[i] is not None:
- break
-
- group.parent = Group.objects.filter(timetable=group.timetable,
- **group_content).first()
- group.save()
-
- if group.tp is None:
- group_content = dict(zip(group_content_key, group_content_list))
- last_is_none = False
-
- for i, key in enumerate(group_content_key):
- if group_content_list[i] is None or last_is_none:
- del group_content[key]
- group_content[key + "__isnull"] = last_is_none
- last_is_none = True
-
- Group.objects.filter(timetable=group.timetable, parent__isnull=True,
- **group_content).update(parent=group)
-
-def consolidate_groups(groups):
- for group in groups:
- if group.parent is None:
- consolidate_group(group)
-
-def delete_courses_in_week(timetable, year, week):
+def delete_courses_in_week(timetable, year, week, today):
start, end = get_week(year, week)
- Course.objects.filter(begin__gte=start, begin__lt=end,
+ Course.objects.filter(begin__gte=max(start, today), begin__lt=end,
timetable=timetable).delete()
def get_from_db_or_create(cls, **kwargs):
@@ -80,7 +45,7 @@ def get_from_db_or_create(cls, **kwargs):
return obj
-def get_event(timetable, event, event_week):
+def get_event(timetable, event, event_week, today):
"""Renvoie une classe Course à partir d’un événement récupéré par BS4"""
# On récupère la date de l’évènement à partir de la semaine
# et de la semaine référencée, puis l’heure de début et de fin
@@ -88,31 +53,34 @@ def get_event(timetable, event, event_week):
begin = add_time(date, event.starttime.text)
end = add_time(date, event.endtime.text)
+ # On ne traite pas le cours si il commence après le moment du traitement
+ if begin < today:
+ return
+
# Création de l’objet cours
course = Course.objects.create(timetable=timetable, begin=begin, end=end)
- # On récupère les groupes concernés par les cours, on les
- # « consolide », puis on les insère dans l’objet cours.
+ # On récupère les groupes concernés par les cours
groups = [get_from_db_or_create(Group, timetable=timetable,
celcat_name=item.text)
for item in event.resources.group.find_all("item")]
- consolidate_groups(groups)
course.groups.add(*groups)
# On récupère le champ « remarque »
if event.notes is not None:
course.notes = event.notes.text
- # On récupère le nom du cours
+ # On récupère le champ « nom »
if event.resources.module is not None:
course.name = event.resources.module.item.text
- else:
+ elif event.category is not None:
# Il est possible qu’un cours n’ait pas de nom. Oui oui.
# Qui sont les concepteurs de ce système ? Quels sont leurs
# réseaux ?
- # Bref, dans ce cas, on déplace le champ « remarque » de
- # l’objet dans le champ « nom ».
- course.name, course.notes = course.notes, None
+ # Bref, dans ce cas, si le cours a un type, il devient son nom.
+ course.type = event.category.text
+ # Si il n’a pas de type (mais je ne pense pas que ça soit possible…),
+ # il obtiendra une valeur par défaut définie à l’avance.
# Récupération du type de cours
if event.category is not None:
@@ -128,7 +96,7 @@ def get_event(timetable, event, event_week):
return course
-def get_events(timetable, soup, weeks_in_soup, year=None, week=None):
+def get_events(timetable, soup, weeks_in_soup, today, year=None, week=None):
"""Récupère tous les cours disponibles dans l’emploi du temps Celcat.
Le traîtement se limitera à la semaine indiquée si il y en a une."""
for event in soup.find_all("event"):
@@ -142,7 +110,11 @@ def get_events(timetable, soup, weeks_in_soup, year=None, week=None):
year is None or week is None) and \
event.resources.group is not None and \
event.starttime is not None and event.endtime is not None:
- yield get_event(timetable, event, event_week)
+ course = get_event(timetable, event, event_week, today)
+
+ # On renvoie le cours si il n’est pas nul
+ if course is not None:
+ yield course
def get_update_date(soup):
# Explication de la regex
@@ -187,7 +159,8 @@ def get_weeks(soup):
return weeks
def get_xml(url):
- req = requests.get(url)
+ user_agent = "celcatsanitizer/" + edt.VERSION
+ req = requests.get(url, headers={"User-Agent": user_agent})
req.encoding = "utf8"
soup = BeautifulSoup(req.content, "html.parser")