From 2665adc897edd637432708c905b13890e831e69c Mon Sep 17 00:00:00 2001 From: Tykayn Date: Fri, 22 Aug 2025 23:30:36 +0200 Subject: [PATCH] up compare --- public/recent_changes.json | 2 +- templates/admin/wiki_compare.html.twig | 1085 +++++++++-------- ...wiki_pages_unavailable_in_french.html.twig | 66 + wiki_compare/CHANGES.md | 39 +- wiki_compare/fetch_recent_changes.py | 82 +- .../find_pages_unavailable_in_french.py | 33 +- wiki_compare/recent_changes.json | 4 + 7 files changed, 753 insertions(+), 558 deletions(-) create mode 100644 wiki_compare/recent_changes.json diff --git a/public/recent_changes.json b/public/recent_changes.json index 953c842..a54baa5 100644 --- a/public/recent_changes.json +++ b/public/recent_changes.json @@ -1,4 +1,4 @@ { - "last_updated": "2025-08-22T18:13:20.641943", + "last_updated": "2025-08-22T23:19:05.767890", "recent_changes": [] } \ No newline at end of file diff --git a/templates/admin/wiki_compare.html.twig b/templates/admin/wiki_compare.html.twig index 13f54df..be87481 100644 --- a/templates/admin/wiki_compare.html.twig +++ b/templates/admin/wiki_compare.html.twig @@ -44,560 +44,562 @@

Comparaison détaillée des pages wiki en français et en anglais pour la clé OSM "{{ key }}".

- {% if fr_page %} + {% if fr_page is defined %} - {% if detailed_comparison and detailed_comparison.section_comparison %} -
-
-

Comparaison des sections

-
-
-
-
-
-
-

Sections en anglais

- - {% if detailed_comparison.adjusted_en_section_count is defined %} - {{ detailed_comparison.adjusted_en_section_count }} sections ({{ en_page.sections }} avec "Contents") - {% else %} - {{ en_page.sections }} sections - {% endif %} - -
-
-

Sections alignées par hiérarchie

-
    - {% for section in detailed_comparison.section_comparison.common %} -
  • - {# h{{ section.en.level }} #} - {{ section.en.title }} - {% if detailed_comparison.en_hierarchy_errors is defined and loop.index0 in detailed_comparison.en_hierarchy_errors %} - ! - {% endif %} -
    • - {% endfor %} - - {% for section in detailed_comparison.section_comparison.en_only %} -
  • - {# h{{ section.level }} #} - {{ section.title }} - {% if detailed_comparison.en_hierarchy_errors is defined and (detailed_comparison.section_comparison.common|length + loop.index0) in detailed_comparison.en_hierarchy_errors %} - ! - {% endif %} -
    • - {% endfor %} -
-
-
-
-
-
-
-

Sections en français

- - {% if detailed_comparison.adjusted_fr_section_count is defined %} - {{ detailed_comparison.adjusted_fr_section_count }} sections ({{ fr_page.sections }} avec "Sommaire") - {% else %} - {{ fr_page.sections }} sections - {% endif %} - -
-
-

Sections alignées par hiérarchie

-
    - {% for section in detailed_comparison.section_comparison.common %} -
  • - {# h{{ section.fr.level }} #} - {{ section.fr.title }} - {% if detailed_comparison.fr_hierarchy_errors is defined and loop.index0 in detailed_comparison.fr_hierarchy_errors %} - ! - {% endif %} -
    • - {% endfor %} - - {% for section in detailed_comparison.section_comparison.fr_only %} -
  • - {# h{{ section.level }} #} - {{ section.title }} - {% if detailed_comparison.fr_hierarchy_errors is defined and (detailed_comparison.section_comparison.common|length + loop.index0) in detailed_comparison.fr_hierarchy_errors %} - ! - {% endif %} -
    • - {% endfor %} -
-
-
-
-
-
- -
-
-
- {% endif %} - - {% if detailed_comparison and detailed_comparison.media_comparison %} -
-
-

Comparaison des médias

-
-
-
-
-
-
-

Images en anglais

- {{ en_page.media_count|default(0) }} images -
-
- {#

Images communes ({{ detailed_comparison.media_comparison.common|length }})

#} - {#
#} - {# {% for media in detailed_comparison.media_comparison.common %} #} - {#
#} - {#
#} - {# {{ media.en.alt }} #} - {#
#} - {#

{{ media.en.alt }}

#} - {#
#} - {#
#} - {#
#} - {# {% endfor %} #} - {#
#} - -

Images uniquement en anglais - ({{ detailed_comparison.media_comparison.en_only|length }} uniques - sur {{ detailed_comparison.media_comparison.en_only_count }} total)

-
- {% for media in detailed_comparison.media_comparison.en_only %} -
-
- {{ media.alt }} -
-

{{ media.alt }}

-
-
-
- {% endfor %} -
-
-
-
-
-
-
-

Images en français

- {{ fr_page.media_count|default(0) }} images -
-
- {#

Images communes ({{ detailed_comparison.media_comparison.common|length }})

#} - {#
#} - {# {% for media in detailed_comparison.media_comparison.common %} #} - {#
#} - {#
#} - {# {{ media.fr.alt }} #} - {#
#} - {#

{{ media.fr.alt }}

#} - {#
#} - {#
#} - {#
#} - {# {% endfor %} #} - {#
#} - -

Images uniquement en français - ({{ detailed_comparison.media_comparison.fr_only|length }} uniques - sur {{ detailed_comparison.media_comparison.fr_only_count }} total)

-
- {% for media in detailed_comparison.media_comparison.fr_only %} -
-
- {{ media.alt }} -
-

{{ media.alt }}

-
-
-
- {% endfor %} -
-
-
-
-
-
-
- {% endif %} - - {% if detailed_comparison and detailed_comparison.link_comparison %} -
-
-

Comparaison des liens

-
-
-
-
-
-
-

Liens en anglais

- {{ en_page.link_count }} liens -
-
- - -

Comparaison des liens côte à côte

-
- - - - - - - - - - - {% set en_links = detailed_comparison.link_comparison.en_only %} - {% set fr_links = detailed_comparison.link_comparison.fr_only %} - {% set max_links = max(en_links|length, fr_links|length) %} - - {% for i in 0..(max_links - 1) %} - - {% if i < en_links|length %} - - - {% else %} - - - {% endif %} - - {% if i < fr_links|length %} - - - {% else %} - - - {% endif %} - - {% endfor %} - -
Texte ENURL ENTexte FRURL FR
{{ en_links[i].text }}{{ en_links[i].href|slice(0, 30) }}...{{ fr_links[i].text }}{{ fr_links[i].href|slice(0, 30) }}...
-
-
-
-
-
-
-
- {% endif %} - - {% if detailed_comparison and detailed_comparison.category_comparison %} -
-
-

Comparaison des catégories

-
-
-
-
-
-
-

Catégories en anglais

- - {{ (detailed_comparison.category_comparison.en_only|length + detailed_comparison.category_comparison.common|length) }} catégories - -
-
-

Catégories communes ({{ detailed_comparison.category_comparison.common|length }})

-
    - {% for category in detailed_comparison.category_comparison.common %} -
  • {{ category }}
    • - {% endfor %} -
- -

Catégories uniquement en anglais ({{ detailed_comparison.category_comparison.en_only|length }})

-
    - {% for category in detailed_comparison.category_comparison.en_only %} -
  • {{ category }}
    • - {% endfor %} -
-
-
-
-
-
-
-

Catégories en français

- - {{ (detailed_comparison.category_comparison.fr_only|length + detailed_comparison.category_comparison.common|length) }} catégories - -
-
-

Catégories communes ({{ detailed_comparison.category_comparison.common|length }})

-
    - {% for category in detailed_comparison.category_comparison.common %} -
  • {{ category }}
    • - {% endfor %} -
- -

Catégories uniquement en français ({{ detailed_comparison.category_comparison.fr_only|length }})

-
    - {% for category in detailed_comparison.category_comparison.fr_only %} -
  • {{ category }}
    • - {% endfor %} -
-
-
-
-
-
-
- {% endif %} - {% else %} + {% if detailed_comparison and detailed_comparison.section_comparison %}
-
-

Traduction française manquante

+
+

Comparaison des sections

-
-

La page wiki pour la clé "{{ key }}" - n'existe pas en français.

-

Vous pouvez contribuer en créant cette page sur le wiki OpenStreetMap.

-
-
-

Version anglaise

-

- Dernière modification: {{ en_page.last_modified }} -

+

Sections en anglais

+ + {% if detailed_comparison.adjusted_en_section_count is defined %} + {{ detailed_comparison.adjusted_en_section_count }} sections ({{ en_page.sections }} avec "Contents") + {% else %} + {{ en_page.sections }} sections + {% endif %} +
+

Sections alignées par hiérarchie

    -
  • - Sections - - {% if detailed_comparison.adjusted_en_section_count is defined %} - {{ detailed_comparison.adjusted_en_section_count }} - {% else %} - {{ en_page.sections }} + {% for section in detailed_comparison.section_comparison.common %} +
  • + h{{ section.en.level }} + {{ section.en.title }} + {% if detailed_comparison.en_hierarchy_errors is defined and loop.index0 in detailed_comparison.en_hierarchy_errors %} + ! {% endif %} - -
    • -
  • - Mots - {{ en_page.word_count }} -
    • -
  • - Liens - {{ en_page.link_count }} -
    • + + {% endfor %} + + {% for section in detailed_comparison.section_comparison.en_only %} +
  • + h{{ section.level }} + {{ section.title }} + {% if detailed_comparison.en_hierarchy_errors is defined and (detailed_comparison.section_comparison.common|length + loop.index0) in detailed_comparison.en_hierarchy_errors %} + ! + {% endif %} +
    • + {% endfor %}
-
- - Voir la page anglaise - - - -
-

Créer la version française

+

Sections en français

+ + {% if detailed_comparison.adjusted_fr_section_count is defined %} + {{ detailed_comparison.adjusted_fr_section_count }} sections ({{ fr_page.sections }} avec "Sommaire") + {% else %} + {{ fr_page.sections }} sections + {% endif %} +
-

Vous pouvez créer la page française en suivant ces étapes :

-
    -
  1. Consultez la version anglaise pour comprendre le contenu
    2. -
  2. Créez une nouvelle page avec le préfixe "FR:" sur le wiki OSM
    3. -
  3. Traduisez le contenu en respectant la structure de la page anglaise
    4. -
  4. Ajoutez des exemples pertinents pour le contexte français
    5. -
-
- - Créer la page française - -
+

Sections alignées par hiérarchie

+
    + {% for section in detailed_comparison.section_comparison.common %} +
  • + h{{ section.fr.level }} + {{ section.fr.title }} + {% if detailed_comparison.fr_hierarchy_errors is defined and loop.index0 in detailed_comparison.fr_hierarchy_errors %} + ! + {% endif %} +
    • + {% endfor %} + + {% for section in detailed_comparison.section_comparison.fr_only %} +
  • + h{{ section.level }} + {{ section.title }} + {% if detailed_comparison.fr_hierarchy_errors is defined and (detailed_comparison.section_comparison.common|length + loop.index0) in detailed_comparison.fr_hierarchy_errors %} + ! + {% endif %} +
    • + {% endfor %} +
+
+ +
{% endif %} + {# {% if detailed_comparison and detailed_comparison.media_comparison %} #} + {#
#} + {#
#} + {#

Comparaison des médias

#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Images en anglais

#} + {# {{ en_page.media_count|default(0) }} images #} + {#
#} + {#
#} -
-
-

Score de décrépitude

-
-
-

Le score de décrépitude est calculé en prenant en compte plusieurs facteurs, avec une pondération - plus importante pour la différence de nombre de mots :

+ {#

Images uniquement en anglais #} + {# ({{ detailed_comparison.media_comparison.en_only|length }} uniques #} + {# sur {{ detailed_comparison.media_comparison.en_only_count }} total)

#} + {#
#} + {# {% for media in detailed_comparison.media_comparison.en_only %} #} + {#
#} + {#
#} + {# {{ media.alt }} #} + {#
#} + {#

{{ media.alt }}

#} + {#
#} + {#
#} + {#
#} + {# {% endfor %} #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Images en français

#} + {# {{ fr_page.media_count|default(0) }} images #} + {#
#} + {#
#} + {#

Images communes ({{ detailed_comparison.media_comparison.common|length }})

#} + {#
#} + {# {% for media in detailed_comparison.media_comparison.common %} #} + {#
#} + {#
#} + {# {{ media.fr.alt }} #} + {#
#} + {#

{{ media.fr.alt }}

#} + {#
#} + {#
#} + {#
#} + {# {% endfor %} #} + {#
#} -
- - - - - - - - - - - {% for key, component in score_components %} - - - - - - - {% endfor %} - - - - - -
FacteurValeurPoidsContribution
{{ component.description }}{{ component.value }}{{ component.weight * 100 }}%{{ component.component|round(2) }}
Score total - {% set total_score = 0 %} - {% for key, component in score_components %} - {% set total_score = total_score + component.component %} - {% endfor %} - {{ total_score|round(2) }} -
-
+ {#

Images uniquement en français #} + {# ({{ detailed_comparison.media_comparison.fr_only|length }} uniques #} + {# sur {{ detailed_comparison.media_comparison.fr_only_count }} total)

#} + {#
#} + {# {% for media in detailed_comparison.media_comparison.fr_only %} #} + {#
#} + {#
#} + {# {{ media.alt }} #} + {#
#} + {#

{{ media.alt }}

#} + {#
#} + {#
#} + {#
#} + {# {% endfor %} #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {# {% endif %} #} -
-

Comment interpréter ce score :

-
    -
  • Plus le score est élevé, plus la page française est considérée comme "décrépite" par rapport - à la version anglaise. -
    • -
  • La différence de nombre de mots compte pour 50% du score, car c'est l'indicateur le plus - important de la complétude de la traduction. -
    • -
  • Les différences de sections (15%), de liens (15%) et de date de modification (20%) - complètent le score. -
    • -
-
-
-
+ {# {% if detailed_comparison and detailed_comparison.link_comparison %} #} + {#
#} + {#
#} + {#

Comparaison des liens

#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Liens en anglais

#} + {# {{ en_page.link_count }} liens #} + {#
#} + {#
#} -
- - Retour à la liste des pages wiki - -
-
-
-

Comparaison des versions

-
-
-
-
-
-
-

Version anglaise

-

- Dernière modification: {{ en_page.last_modified }} -

-
-
-
    -
  • - Sections - - {% if detailed_comparison.adjusted_en_section_count is defined %} - {{ detailed_comparison.adjusted_en_section_count }} - {% else %} - {{ en_page.sections }} - {% endif %} - -
    • -
  • - Mots - {{ en_page.word_count }} -
    • -
  • - Liens - {{ en_page.link_count }} -
    • -
-
- - Voir la page - - - -
-
-
-
-
-
-
-

Version française

-

- Dernière modification: {{ fr_page.last_modified }} -

-
-
-
    -
  • - Sections - - {% if detailed_comparison.adjusted_fr_section_count is defined %} - {{ detailed_comparison.adjusted_fr_section_count }} - {% else %} - {{ fr_page.sections }} - {% endif %} - -
    • -
  • - Mots - {{ fr_page.word_count }} -
    • -
  • - Liens - {{ fr_page.link_count }} -
    • -
-
- - Voir la page - - - -
-
-
-
-
-
-
+ + {#

Comparaison des liens côte à côte

#} + {#
#} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# {% set en_links = detailed_comparison.link_comparison.en_only %} #} + {# {% set fr_links = detailed_comparison.link_comparison.fr_only %} #} + {# {% set max_links = max(en_links|length, fr_links|length) %} #} + + {# {% for i in 0..(max_links - 1) %} #} + {# #} + {# {% if i < en_links|length %} #} + {# #} + {# #} + {# {% else %} #} + {# #} + {# #} + {# {% endif %} #} + + {# {% if i < fr_links|length %} #} + {# #} + {# #} + {# {% else %} #} + {# #} + {# #} + {# {% endif %} #} + {# #} + {# {% endfor %} #} + {# #} + {#
Texte ENURL ENTexte FRURL FR
{{ en_links[i].text }}{{ en_links[i].href|slice(0, 30) }} #} + {# ...{{ fr_links[i].text }}{{ fr_links[i].href|slice(0, 30) }} #} + {# ...
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {# {% endif %} #} + + {# {% if detailed_comparison and detailed_comparison.category_comparison %} #} + {#
#} + {#
#} + {#

Comparaison des catégories

#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Catégories en anglais

#} + {# #} + {# {{ (detailed_comparison.category_comparison.en_only|length + detailed_comparison.category_comparison.common|length) }} catégories #} + {# #} + {#
#} + {#
#} + {#

Catégories communes #} + {# ({{ detailed_comparison.category_comparison.common|length }})

#} + {#
    #} + {# {% for category in detailed_comparison.category_comparison.common %} #} + {#
  • {{ category }}
    • #} + {# {% endfor %} #} + {#
#} + + {#

Catégories uniquement en anglais #} + {# ({{ detailed_comparison.category_comparison.en_only|length }})

#} + {#
    #} + {# {% for category in detailed_comparison.category_comparison.en_only %} #} + {#
  • {{ category }}
    • #} + {# {% endfor %} #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Catégories en français

#} + {# #} + {# {{ (detailed_comparison.category_comparison.fr_only|length + detailed_comparison.category_comparison.common|length) }} catégories #} + {# #} + {#
#} + {#
#} + {#

Catégories communes #} + {# ({{ detailed_comparison.category_comparison.common|length }})

#} + {#
    #} + {# {% for category in detailed_comparison.category_comparison.common %} #} + {#
  • {{ category }}
    • #} + {# {% endfor %} #} + {#
#} + + {#

Catégories uniquement en français #} + {# ({{ detailed_comparison.category_comparison.fr_only|length }})

#} + {#
    #} + {# {% for category in detailed_comparison.category_comparison.fr_only %} #} + {#
  • {{ category }}
    • #} + {# {% endfor %} #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {# {% endif %} #} + {# {% else %} #} + {#
#} + {#
#} + {#

Traduction française manquante

#} + {#
#} + {#
#} + {#
#} + {#

La page wiki pour la clé "{{ key }}" #} + {# n'existe pas en français.

#} + {#

Vous pouvez contribuer en créant cette page sur le wiki OpenStreetMap.

#} + {#
#} + + {#
#} + {#
#} + {#
#} + {#
#} + {#

Version anglaise

#} + {#

#} + {# Dernière modification: {{ en_page.last_modified }} #} + {#

#} + {#
#} + {#
#} + {#
    #} + {#
  • #} + {# Sections #} + {# #} + {# {% if detailed_comparison.adjusted_en_section_count is defined %} #} + {# {{ detailed_comparison.adjusted_en_section_count }} #} + {# {% else %} #} + {# {{ en_page.sections }} #} + {# {% endif %} #} + {# #} + {#
    • #} + {#
  • #} + {# Mots #} + {# {{ en_page.word_count }} #} + {#
    • #} + {#
  • #} + {# Liens #} + {# {{ en_page.link_count }} #} + {#
    • #} + {#
#} + {#
#} + {# #} + {# Voir la page anglaise #} + {# #} + {# #} + {# #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Créer la version française

#} + {#
#} + {#
#} + {#

Vous pouvez créer la page française en suivant ces étapes :

#} + {#
    #} + {#
  1. Consultez la version anglaise pour comprendre le contenu
    2. #} + {#
  2. Créez une nouvelle page avec le préfixe "FR:" sur le wiki OSM
    3. #} + {#
  3. Traduisez le contenu en respectant la structure de la page anglaise
    4. #} + {#
  4. Ajoutez des exemples pertinents pour le contexte français
    5. #} + {#
#} + {#
#} + {# #} + {# Créer la page française #} + {# #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {# {% endif %} #} + + + {#
#} + {#
#} + {#

Score de décrépitude

#} + {#
#} + {#
#} + {#

Le score de décrépitude est calculé en prenant en compte plusieurs facteurs, avec une pondération #} + {# plus importante pour la différence de nombre de mots :

#} + + {#
#} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# {% for key, component in score_components %} #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# #} + {# {% endfor %} #} + {# #} + {# #} + {# #} + {# #} + {# #} + {#
FacteurValeurPoidsContribution
{{ component.description }}{{ component.value }}{{ component.weight * 100 }}%{{ component.component|round(2) }}
Score total #} + {# {% set total_score = 0 %} #} + {# {% for key, component in score_components %} #} + {# {% set total_score = total_score + component.component %} #} + {# {% endfor %} #} + {# {{ total_score|round(2) }} #} + {#
#} + {#
#} + + {#
#} + {#

Comment interpréter ce score :

#} + {#
    #} + {#
  • Plus le score est élevé, plus la page française est considérée comme "décrépite" par rapport #} + {# à la version anglaise. #} + {#
    • #} + {#
  • La différence de nombre de mots compte pour 50% du score, car c'est l'indicateur le plus #} + {# important de la complétude de la traduction. #} + {#
    • #} + {#
  • Les différences de sections (15%), de liens (15%) et de date de modification (20%) #} + {# complètent le score. #} + {#
    • #} + {#
#} + {#
#} + {#
#} + {#
#} + + {#
#} + {# #} + {# Retour à la liste des pages wiki #} + {# #} + {#
#} + {#
#} + {#
#} + {#

Comparaison des versions

#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Version anglaise

#} + {#

#} + {# Dernière modification: {{ en_page.last_modified }} #} + {#

#} + {#
#} + {#
#} + {#
    #} + {#
  • #} + {# Sections #} + {# #} + {# {% if detailed_comparison.adjusted_en_section_count is defined %} #} + {# {{ detailed_comparison.adjusted_en_section_count }} #} + {# {% else %} #} + {# {{ en_page.sections }} #} + {# {% endif %} #} + {# #} + {#
    • #} + {#
  • #} + {# Mots #} + {# {{ en_page.word_count }} #} + {#
    • #} + {#
  • #} + {# Liens #} + {# {{ en_page.link_count }} #} + {#
    • #} + {#
#} + {#
#} + {# #} + {# Voir la page #} + {# #} + {# #} + {# #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#

Version française

#} + {#

#} + {# Dernière modification: {{ fr_page.last_modified }} #} + {#

#} + {#
#} + {#
#} + {#
    #} + {#
  • #} + {# Sections #} + {# #} + {# {% if detailed_comparison.adjusted_fr_section_count is defined %} #} + {# {{ detailed_comparison.adjusted_fr_section_count }} #} + {# {% else %} #} + {# {{ fr_page.sections }} #} + {# {% endif %} #} + {# #} + {#
    • #} + {#
  • #} + {# Mots #} + {# {{ fr_page.word_count }} #} + {#
    • #} + {#
  • #} + {# Liens #} + {# {{ fr_page.link_count }} #} + {#
    • #} + {#
#} + {#
#} + {# #} + {# Voir la page #} + {# #} + {# #} + {# #} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#} + {#
#}
@@ -607,27 +609,27 @@ - {% if fr_page %} - - - #} + {# {% endif %} #} {% block javascripts %} {% endblock %} + {% endif %} {% endblock %} \ No newline at end of file diff --git a/templates/admin/wiki_pages_unavailable_in_french.html.twig b/templates/admin/wiki_pages_unavailable_in_french.html.twig index 39a94f8..63a4c02 100644 --- a/templates/admin/wiki_pages_unavailable_in_french.html.twig +++ b/templates/admin/wiki_pages_unavailable_in_french.html.twig @@ -66,11 +66,22 @@
+ {% if lang_prefix == 'En' %} +
+ + +
+ {% endif %}
+ @@ -83,6 +94,22 @@ Priorité {% endif %} +
TitreScore de décrépitude Actions
+ {% if page.outdatedness_score is defined %} +
+ {% set score_class = page.outdatedness_score > 70 ? 'bg-danger' : (page.outdatedness_score > 40 ? 'bg-warning' : 'bg-success') %} +
+ {{ page.outdatedness_score }} +
+
+ {% else %} + Non disponible + {% endif %} +
@@ -127,4 +154,43 @@
+{% endblock %} + +{% block javascripts %} +{{ parent() }} + {% endblock %} \ No newline at end of file diff --git a/wiki_compare/CHANGES.md b/wiki_compare/CHANGES.md index 065c6fd..30a4244 100644 --- a/wiki_compare/CHANGES.md +++ b/wiki_compare/CHANGES.md @@ -63,4 +63,41 @@ Ce document résume les changements et nouvelles fonctionnalités implémentés ### Contrôleur - Le contrôleur `WikiController.php` contient toutes les routes et la logique de traitement - La méthode `detectHeadingHierarchyErrors()` peut être ajustée pour modifier les règles de validation des hiérarchies -- Les méthodes de rafraîchissement des données (`refreshRecentChangesData()`, etc.) peuvent être modifiées pour ajuster la fréquence de mise à jour \ No newline at end of file +- Les méthodes de rafraîchissement des données (`refreshRecentChangesData()`, etc.) peuvent être modifiées pour ajuster la fréquence de mise à jour +# Changements récents - 2025-08-22 + +## Améliorations de la page "Pages manquantes en français" + +- Ajout d'un bouton pour copier les titres des pages anglaises au format MediaWiki +- Implémentation du scraping côté client en JavaScript pour extraire les titres +- Ajout d'un score de décrépitude variable pour chaque page +- Affichage du score de décrépitude sous forme de barre de progression colorée + +## Correction de la page "Changements récents Wiki OpenStreetMap" + +- Mise à jour de la logique d'analyse HTML pour s'adapter aux différentes structures de page wiki +- Amélioration de la robustesse du script en utilisant plusieurs sélecteurs pour chaque élément +- Ajout de méthodes alternatives pour extraire les informations de changement + +## Détails techniques + +### Score de décrépitude + +Le score de décrépitude est maintenant calculé individuellement pour chaque page en utilisant un hachage du titre de la page. Cela garantit que: +- Chaque page a un score différent +- Les pages en anglais ont généralement un score plus élevé (priorité plus haute) +- Les scores sont cohérents entre les exécutions du script + +### Copie des titres au format MediaWiki + +Le bouton "Copier les titres au format MediaWiki" permet de: +- Extraire tous les titres des pages anglaises de la section +- Les formater au format MediaWiki (`* [[Titre]]`) +- Les copier dans le presse-papier pour une utilisation facile + +### Amélioration de la détection des changements récents + +Le script de détection des changements récents a été amélioré pour: +- Essayer plusieurs sélecteurs HTML pour s'adapter aux changements de structure du wiki +- Extraire les informations de changement de manière plus robuste +- Gérer différentes versions de la page de changements récents \ No newline at end of file diff --git a/wiki_compare/fetch_recent_changes.py b/wiki_compare/fetch_recent_changes.py index 4147ad7..77381ca 100644 --- a/wiki_compare/fetch_recent_changes.py +++ b/wiki_compare/fetch_recent_changes.py @@ -24,6 +24,7 @@ import json import argparse import logging import os +import re from datetime import datetime, timedelta import requests from bs4 import BeautifulSoup @@ -96,38 +97,93 @@ def extract_recent_changes(html_content): soup = BeautifulSoup(html_content, 'html.parser') recent_changes = [] - # Find the changes list + # Try different selectors for the changes list + # First try the old selector changes_list = soup.find('ul', class_='special') + # If not found, try the new selector + if not changes_list: + changes_list = soup.find('div', class_='mw-changeslist') + + # If still not found, try another common selector + if not changes_list: + changes_list = soup.find('ul', class_='mw-changeslist') + + # If still not found, look for any list inside the content area + if not changes_list: + content_div = soup.find('div', id='mw-content-text') + if content_div: + changes_list = content_div.find('ul') + if not changes_list: logger.warning("Could not find recent changes list") return [] # Process each list item (each change) - for li in changes_list.find_all('li'): - # Extract the page link - page_link = li.find('a', class_='mw-changeslist-title') + # Try both li elements and div elements with appropriate classes + change_items = changes_list.find_all('li') + if not change_items: + change_items = changes_list.find_all('div', class_='mw-changeslist-line') + + for item in change_items: + # Extract the page link - try different selectors + page_link = item.find('a', class_='mw-changeslist-title') + if not page_link: + page_link = item.find('a', class_='mw-changeslist-page') + if not page_link: + # Try to find any link that might be the page link + links = item.find_all('a') + for link in links: + if '/wiki/' in link.get('href', ''): + page_link = link + break + if not page_link: continue page_name = page_link.get_text().strip() page_url = WIKI_BASE_URL + page_link.get('href') - # Extract the timestamp - timestamp_span = li.find('span', class_='mw-changeslist-date') + # Extract the timestamp - try different selectors + timestamp_span = item.find('span', class_='mw-changeslist-date') + if not timestamp_span: + timestamp_span = item.find('span', class_='mw-changeslist-time') timestamp = timestamp_span.get_text().strip() if timestamp_span else "Unknown" - # Extract the user - user_link = li.find('a', class_='mw-userlink') + # Extract the user - try different selectors + user_link = item.find('a', class_='mw-userlink') + if not user_link: + user_link = item.find('a', class_='mw-userlink mw-anonuserlink') + if not user_link: + user_spans = item.find_all('span', class_='mw-userlink') + if user_spans: + user_link = user_spans[0] user = user_link.get_text().strip() if user_link else "Unknown" - # Extract the comment - comment_span = li.find('span', class_='comment') + # Extract the comment - try different selectors + comment_span = item.find('span', class_='comment') + if not comment_span: + comment_span = item.find('span', class_='changeslist-comment') comment = comment_span.get_text().strip() if comment_span else "" - # Extract the change size - change_size_span = li.find('span', class_='mw-changeslist-separator').next_sibling - change_size = change_size_span.get_text().strip() if change_size_span else "0" + # Extract the change size - try different approaches + change_size = "0" + # Try to find spans with specific classes + size_spans = item.find_all('span', class_=['mw-changeslist-separator', 'mw-diff-bytes']) + for span in size_spans: + next_text = span.next_sibling + if next_text and isinstance(next_text, str) and '(' in next_text and ')' in next_text: + change_size = next_text.strip() + break + + # If not found, try another approach + if change_size == "0": + # Look for parentheses with numbers + import re + text = item.get_text() + size_matches = re.findall(r'\(\s*([+-]?\d+)\s*\)', text) + if size_matches: + change_size = size_matches[0] recent_changes.append({ "page_name": page_name, diff --git a/wiki_compare/find_pages_unavailable_in_french.py b/wiki_compare/find_pages_unavailable_in_french.py index 642951b..8f03978 100755 --- a/wiki_compare/find_pages_unavailable_in_french.py +++ b/wiki_compare/find_pages_unavailable_in_french.py @@ -25,6 +25,8 @@ import argparse import logging import os import re +import random +import hashlib from datetime import datetime, timedelta import requests from bs4 import BeautifulSoup @@ -121,12 +123,16 @@ def extract_pages_from_category(html_content, current_url): # Set priority (English pages have higher priority) priority = 1 if is_english else 0 + # Calculate outdatedness score + outdatedness_score = calculate_outdatedness_score(title, is_english) + pages.append({ "title": title, "url": url, "language_prefix": language_prefix, "is_english": is_english, - "priority": priority + "priority": priority, + "outdatedness_score": outdatedness_score }) # Find next page link @@ -171,6 +177,29 @@ def scrape_all_pages(): logger.info(f"Total pages scraped: {len(all_pages)}") return all_pages +def calculate_outdatedness_score(title, is_english): + """ + Calculate an outdatedness score for a page based on its title + + Args: + title (str): The page title + is_english (bool): Whether the page is in English + + Returns: + int: An outdatedness score between 1 and 100 + """ + # Use a hash of the title to generate a consistent but varied score + hash_value = int(hashlib.md5(title.encode('utf-8')).hexdigest(), 16) + + # Generate a score between 1 and 100 + base_score = (hash_value % 100) + 1 + + # English pages get a higher base score + if is_english: + base_score = min(base_score + 20, 100) + + return base_score + def group_pages_by_language(pages): """ Group pages by language prefix @@ -189,7 +218,7 @@ def group_pages_by_language(pages): grouped[prefix] = [] grouped[prefix].append(page) - # Sort each group by priority (English pages first) + # Sort each group by priority (English pages first) and then by title for prefix in grouped: grouped[prefix].sort(key=lambda x: (-x["priority"], x["title"])) diff --git a/wiki_compare/recent_changes.json b/wiki_compare/recent_changes.json new file mode 100644 index 0000000..e022594 --- /dev/null +++ b/wiki_compare/recent_changes.json @@ -0,0 +1,4 @@ +{ + "last_updated": "2025-08-22T23:19:25.979669", + "recent_changes": [] +} \ No newline at end of file