de Ty Irvine

Cum să enumerați toate adresele URL asociate unui site rapid

Cum sa enumerati toate adresele URL asociate unui site rapid

Deci, aveți nevoie de o listă care să conțină toate adresele URL ale unui site web? Poate că faci niște redirecționări? Atingeți limita Sitemap-uri XML? Super, și eu. Am doar instrumentul pentru tine care îl va realiza la aproximativ aceeași viteză ca Sitemap-urile XML, dar vei arăta mult mai cool.

Unde începe tutorialul

Pentru a obține lista URL-urilor, vom folosi Wget!

Ce este Frigg Wget?

„Wget este un pachet software gratuit pentru regăsirea fișierelor folosind HTTP, HTTPS și FTP, cele mai utilizate protocoale de internet.” – Brew ‍Formule

Și îl puteți utiliza, de asemenea, pentru a solicita o listă mare de adrese URL asociate cu un domeniu.‍

‍1. Instalarea Wget

Pentru a instala Wget dacă nu ați făcut-o deja, va trebui mai întâi să instalați HomeBrew; alias Brew. ? Brew este un manager de pachete, ceea ce înseamnă că instalează software și îl administrează. Puteți consulta instrucțiunile de pe site-ul lor web sau pur și simplu urmați cele de mai jos.

Instalați Brew

Lipiți acest lucru într-un prompt de terminal și apăsați pe Enter de două ori ⮐ (Vă poate cere o parolă.)

/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"‍

Instalați Wget

Acum că ai instalat Brew, este timpul să instalezi Wget. Lipiți acest lucru într-un prompt de terminal și apăsați Enter ⮐

brew install wget

2. Este timpul să obțineți „URL-uri dem”

Acum, cu Wget instalat, pur și simplu descărcăm site-ul web și apoi afișăm toate adresele URL ale acestuia. Începeți prin descărcarea site-ului web cu care doriți

Wget -r www.shutterandcode.com

Apoi, odată ce descărcarea este finalizată, vom afișa adresele URL cu

Find www.shutterandcode.com

(Asigurați-vă că utilizați același domeniu al site-ului web ca și cel descărcat).

1612087565 184 Cum sa enumerati toate adresele URL asociate unui site rapid
3.7s timp de descărcare

Concluzie

După o serie de teste obișnuite care au pus Wget pe Sitemaps XML folosind site-uri web mai mici, am constatat că ambele sunt aproape la egalitate. Ocazional, una ar fi mai rapidă decât cealaltă, dar, în general, ambele aveau viteze similare .‍

Dacă doriți să aflați mai multe despre comenzile Wget, pur și simplu tastați acest lucru în prompt

wget --help

Sper că ți-a plăcut să citești asta! Nu uitați să vă place, să comentați și să vă abonați! ?

ps nu se simt de fapt obligați să aprecieze, să comenteze sau să se aboneze pentru că este pur și simplu o glumă pentru YouTubers 🙂

ACTUALIZARE: dacă nu doriți ca site-ul să se descarce de fapt pe computer, adăugați „- spider” după „wget” ca

wget -r --spider www.example.com

Verificați postarea originală și restul fragmentelor! seria la

Shutter & Code – Le Blog