1
0
Fork 0
Dieser Commit ist enthalten in:
zeek 2020-03-22 14:13:23 +08:00
Ursprung 2967957ab8
Commit 63d48cab02
1 geänderte Dateien mit 4 neuen und 2 gelöschten Zeilen

Datei anzeigen

@ -80,8 +80,10 @@ def filterlinks(links):
continue
if is_robot(url):
continue
if not ishttp:
url = url_root + url
if not ishttp and url.startswith("/"):
url = url_root + url
elif not ishttp:
url = url_root + '/' + url
tmplinks.append(url)
reslinks = list(set(tmplinks))
return reslinks