Pourquoi puis-je obtenir l'erreur 'liste hors de portée' lors de l'utilisation de Crawler Python?

Erreur "lister l'index hors de portée" dans Python Crawler: Cause et solution

Lorsque vous utilisez Python et BeautifulSoup pour la rampe Web, vous rencontrez souvent des erreurs list index out of range . Ce problème peut se produire même si le code n'est pas modifié, en particulier lorsqu'il s'agit de pages Web dynamiques ou de modifications de la structure du site Web. Cet article analyse la cause de cette erreur et fournit une solution efficace.

Voici un exemple de code qui démontre ce qui pourrait provoquer cette erreur:

 Demandes d'importation
De BS4 Import BeautifulSoup

En-têtes = {'User-Agent': 'Mozilla / 5.0 (Windows NT 10.0; Win64; X64) Applewebkit / 537.36 (Khtml, comme Gecko) Chrome / 124.0.0.0 Safari / 537.36 EDG / 124.0.0.0'}
Response = requers.get ("https://www.iqiyi.com/ranks1/3/0", en-têtes = en-têtes)
print (réponse.status_code)
réponse = réponse.Text
Soup = BeautifulSoup (réponse, "html.parser")

def extract_data ():
    titres = [title.get_text (). strip () pour le titre dans soup.find_all ("div", classe _ = "rvi__tit1")]
    Heat = [Heat.get_text (). Strip () For Heat in Soup.find_all ("Span", classe _ = "RVI__Index__Num")]
    introductions = [intro.get_text (). strip () pour intro dans soup.find_all ("p", classe _ = "rvi__des2")]
    Titres de retour, chaleur, introductions

Def Display_data (titres, chaleur, introductions):
    min_len = min (len (titres), len (chaleur), len (introductions)))
    pour i dans la gamme (min_len):
        print (f "classement: {i 1}, titre: {titres [i]}, popularité: {Heat [i]}, introduction: {introductions [i]}")


Si __Name__ == '__MAIN__':
    Titres, Heat, introductions = extract_data ()
    Display_data (titres, chaleur, introduction)

Dans cet exemple, list index out of range se produit généralement dans display_data . La raison en est la suivante: les longueurs des trois listes de titles , heat et introductions peuvent être incohérentes. Si l'une des listes a une longueur inférieure à 10 (ou la plage de boucles), une erreur de non-limite d'index se produira lors de l'accès aux éléments de la liste.

Solution:

La clé est de s'assurer qu'avant d'accès à l'élément de liste, la longueur de la liste est vérifiée et que les éléments de la plage d'index valides sont accessibles. Le code amélioré est le suivant:

 Demandes d'importation
De BS4 Import BeautifulSoup

# ... (les en-têtes et la demande restent les mêmes) ...

def extract_data ():
    # ... (l'extraction reste la même) ...

Def Display_data (titres, chaleur, introductions):
    min_len = min (len (titres), Len (Heat), len (introductions)) # trouvez la liste la plus courte
    pour i dans la gamme (min_len):
        print (f "classement: {i 1}, titre: {titres [i]}, popularité: {Heat [i]}, introduction: {introductions [i]}")


Si __Name__ == '__MAIN__':
    Titres, Heat, introductions = extract_data ()
    Display_data (titres, chaleur, introduction)

En calculant la longueur la plus courte des trois listes min_len et en utilisant min_len comme plage de la boucle, nous nous assurons qu'aucun éléments en dehors de la plage d'index de liste ne soit accessible, évitant efficacement les erreurs list index out of range . Il s'agit d'un moyen de traitement plus robuste qui peut s'adapter aux modifications dans différentes structures de pages Web et volumes de données. De plus, l'ajout de mécanismes de gestion des erreurs (tels que les blocs try-except ) est également une bonne pratique de programmation qui peut gérer des situations plus complexes.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!