Discussion :

[cybcyb]

Bonjour tout le monde,
Je suis coincé sur un petit programme que j'essaye de faire. Dans l'idée le programme sert à récupérer les url d'une page web pour les pings après pour vérifier si ils sont encore actif, cependant je bloque sur le formatage des liens, voici mon code :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
from requests import get
from bs4 import BeautifulSoup
import html5lib
from pythonping import ping
 
url = "https://old.reddit.com/r/Piracy/wiki/megathread/movies_and_tv#wiki_.1F4D1_.279C_streaming"
 
response = get(url)
 
source = None
 
source = response.text
 
if source:
        soup = BeautifulSoup(source, "html.parser")
        links = [link.get("href") for link in soup("a")]
 
i = 0
 
 
for link in links:
        if links[i].startswith("https://"):
                if "reddit" in links[i]:
                        links.remove(links[i])
                        i+=1
                else:
                        i+=1
 
        else:
                links.remove(links[i])
                i += 1
 
 
print(links)
 
input()

Mon problème pour l'instant c'est que j'aimerais pouvoir enlever le "https://" de chaque lien que je récupère pour pouvoir ensuite ping chaque lien un par un mais je n'arrive pas à les supprimer, j'ai essaye le .replace mais ça me renvoi quelque chose comme "no attribute replace for list object" ou quelque chose comme ça. Je n'ai pas trouvé de solution convenante alors merci d'avance de votre aide.
(ps le """if "reddit" in links[i]""" ne fonctionne pas non plus pour supprimer les liens qui renvoit vers reddit donc je suis aussi preneuse d'une solution pour ça aussi <3)

[Arioch]

Bonjour,

à la ligne 16 de votre script, normalement ceci doit fonctionner :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

links = [link.get("href").replace("https://","") for link in soup("a")]

Exemple rapide :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
toto = ["http1","http2","3"]
toto = [elem.replace("http","") for elem in toto]
print(toto)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

['1', '2', '3']

[cybcyb]

Bonjour,

à la ligne 16 de votre script, normalement ceci doit fonctionner :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

links = [link.get("href").replace("https://","") for link in soup("a")]

Exemple rapide :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
toto = ["http1","http2","3"]
toto = [elem.replace("http","") for elem in toto]
print(toto)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

['1', '2', '3']

Merci de la réponse mais ça ne fonctionne pas non plus, je reçoit cette erreur :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
 
Traceback (most recent call last):
  File "C:\Users\grego\OneDrive\Desktop\pingStream.py", line 16, in <module>
    links = [link.get("href").replace("https://","") for link in soup("a")]
             ^^^^^^^^^^^^^^^^^^^^^^^^
AttributeError: 'NoneType' object has no attribute 'replace'
[Finished in 1.5s]

[fred1599]

Bonjour

Traceback (most recent call last):
File "C:\Users\grego\OneDrive\Desktop\pingStream.py", line 16, in <module>
links = [link.get("href").replace("https://","") for link in soup("a")]
^^^^^^^^^^^^^^^^^^^^^^^^ AttributeError: 'NoneType' object has no attribute 'replace'

Oui ça veut simplement dire que link peut prendre la valeur None, il faut donc filtrer ce cas dans ta comprehension list.

[wiztricks]

Merci de la réponse mais ça ne fonctionne pas non plus, je reçoit cette erreur

plutôt que de recopier du code sans trop comprendre, vous aviez écrit:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
i = 0
for link in links:
        if links[i].startswith("https://"):
                ...

Lorsqu'il y a ..., on sait que ça commence par ... et quand faire le replace via link[i].replace(...) à cet endroit/ce moment.

- W
note: vu les difficultés que vous avez pour faire une boucle avec des conditions aussi simples, ca serait bien de passer un peu de temps dans les tutos.

[papajoker]

bonjour et bienvenue

ne fonctionne pas non plus pour supprimer les liens qui renvoit vers reddit donc je suis aussi preneuse d'une solution pour ça aussi <3)

Tout ce bloc est surtout completement inutile (voir "les filtres" donné en #4)
Dans ce block : logique aux fraises ? entre-autre :
- pourquoi remplir une variable link mais jamais utilisée ?
- pourquoi faire des incréments dans chaques conditions ?

-------

j'aimerais pouvoir enlever le "https://"

existe la méthode str.removeprefix

-------

exclure certains liens "manuellement" ...
Ici, c'est une grosse méconnaissance de ta librairie ! tu dois normalement cibler tes liens avec ta lib BeautifulSoup (en fonction du code html de la page)