Directory articoli
La raccolta di articoli convenzionale è semplice, ma è difficile per i raccoglitori di treni (treni) ad alta velocità raccogliere il paging JS e il flusso a cascata. Fare clic sul JavaScript caricato e caricare una pagina di elenco simile ad Ajax rende molti principianti incapaci di iniziare.
Il blog di Chen Weiliang illustrerà come utilizzare un sistema di raccolta dati sui treni ad alta velocità per creare elenchi con paginazione JavaScript e caricamento tramite AJAX con un semplice clic.
Il raccoglitore di treni raccoglie l'URL della pagina di contenuto e lo scrive in JS
Innanzitutto, è necessario acquisire il traffico di rete dalla pagina di destinazione. Per i siti web più semplici, è possibile recuperare dati in formato JSON. I siti web più complessi potrebbero richiedere metodi POST e potrebbero anche dover includere cookie, valori casuali, ecc., come si vede nel caso di siti web come Mogujie .
- Più semplice senza acquisire pacchetti e analizzare l'impaginazione JS, come nell'URL a pagina 2 dei risultati di ricerca video di Tencent
cur=2 - i numeri dietro
2, è impostare "Avvia aggiunta guidata URL" → "URL batch" → "Formato indirizzo"[parametro indirizzo]
Ecco un semplice raccoglitore di locomotive come ottenere il contenuto delle chiamate JS, prendendo come esempio la rete dei gusci di frutta.
In che modo il collettore di locomotive ferroviarie ad alta velocità ottiene il contenuto delle chiamate JS?
La prima cosa che devi usare è il browser Chrome ▼
1. Per prima cosa clicca sulla pagina di destinazioneF12或Ctrl+Shift+CApri l'elemento ispeziona e fai clic sulla scheda Rete ▼
2. Fare clic sul pulsante XHR per attivare il caricamento ajax sulla pagina e il browser monitorerà l'esecuzione e le modifiche dei dati della pagina▼
La casella rossa è l'indirizzo dei dati acquisiti ▲
3. Fare clic sull'indirizzo dei dati e le informazioni dettagliate appariranno sulla destra.Prestare attenzione alla legge dell'indirizzo di richiesta url.Ad esempio, nella figura seguente sono presenti timestamp e numeri di pagina ▼
4. Aggiungi i seguenti indirizzi acquisiti nel raccoglitore del treno e imposta le regole degli indirizzi, quindi le normali impostazioni del raccoglitore del treno▼
Speriamo che l'articolo "Come raccogliere contenuti di elenchi AJAX con paginazione JS/Click-to-Load utilizzando un raccoglitore di dati ad alta velocità" condiviso sul blog di Chen Weiliang ( https://www.chenweiliang.com/ ) possa esservi utile.
Sentitevi liberi di condividere il link di questo articolo: https://www.chenweiliang.com/cwl-1906.html