Versuchen Sie, etwa 30 Zeilen in Java zu kratzen (CSV-Ausgabe)

Was ist Schaben?

Computersoftwaretechnologie, die Informationen von Websites extrahiert. Beim Schaben gibt es verschiedene Grauzonen. Seien Sie also vorsichtig. Referenz: Scraping and Law

Zweck

Ich möchte darüber sprechen, was Sie mit Schaben machen können. Hier einige konkrete Beispiele

--Datensammlung für maschinelles Lernen

• Datenanalyse für Corporate Marketing --Datensammlung zur Verwendung in der App

Es gibt verschiedene Möglichkeiten, es zu verwenden.

Quellcode

scraping.java

//Importanweisung weggelassen
public class scraping {
    public static void main(String[] args){
        //Datei vorbereiten
        PrintWriter p = null;
        try {
            p = new PrintWriter(new BufferedWriter(new OutputStreamWriter(new FileOutputStream("Zielpfad ausgeben/sample.csv"),"Shift-JIS")));
            //Geben Sie den Header an
            //Sie können es hier frei ändern
            //Wenn Sie weitere Spalten hinzufügen möchten,Und fügen Sie den Spaltennamen als Satz hinzu
                p.print("Spalte 1");
                p.print(",");
                p.print("Spalte 2");
                p.println();
            //Diesmal benutze ich es als Spaltenschlüssel
                int num = 1;
                Document document = Jsoup.connect("Ziel-URL").get();
                //Sie können verschiedene Dinge wie Klassenname, ID-Name, Tag-Name usw. festlegen.
                Elements elements = document.select("Zielelement");
                //Extrahieren, wenn mehrere Zielelemente vorhanden sind
                for (Element element : elements) {
                    //Stellen Sie den Inhalt ein
                    p.print(num);
                    p.print(",");
                    p.print(element.text());
                    p.println();    //Neue Zeile
                    num++;
                }
               
            } catch (IOException e) {
                    System.out.println(e);
            }finally {
                p.close();
            }
        System.out.println("Dateiausgabe abgeschlossen!");

    }
}

Methode

document.select

Elemente elements = document.select ("Zielelemente");

Für das Zielelement

• Tags wie body und p --Klassenname wie .class -ID Name wie #id

Kann angegeben werden. Ebenfalls,

• document.select("p .name");

Es gibt auch eine Spezifikationsmethode wie die Namensklasse des p-Tags.

element.text

for (Element element : elements) { // setze den Inhalt p.print(num); p.print(","); p.print(element.text()); p.println (); // Zeilenumbruch num++; }

• Der Inhalt kann mit der Textmethode abgerufen werden.

Zusammenfassung

Infolgedessen konnte mit Java in etwa 30 ein Schaben realisiert werden. Ich persönlich mag Java, also habe ich es versucht.