was ist das

Bereiten Sie die Scraping-Umgebung mit Java vor. Ich möchte Chrome jedoch nicht installieren, also lassen Sie Docker (Selen / Standalone-Chrome) dies tun.

Referenz

Vielen Dank. https://qiita.com/wizpra-koyasu/items/7b7e0938ad6d36caf4be https://stackoverflow.com/questions/12836114/selenium-webdriver-remote-setup https://www.seleniumhq.org/docs/03_webdriver.jsp

Voraussetzungen

Docker ist enthalten
Kitematic funktioniert, weil es ein Onkel ist, der unter Windows ein Gehirn tot machen will

Führen Sie Selenium Standalone-Chrome aus

Das ist sehr einfach. Klicken Sie einfach in Kitematic auf "+ NEU" und suchen Sie nach "Standalone-Chrome" und "CREATE" Wenn Sie es sicher starten, sehen Sie unter "ACCESS URL", in welchem Port es veröffentlicht ist. Notieren Sie sich dies. Ich denke, diejenigen, die verstehen, sollten Ports angeben

Hit Selenium aus Java

Fast der Beispielcode

package org.openqa.selenium.example;

import java.net.MalformedURLException;
import java.net.URL;

import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.remote.DesiredCapabilities;
import org.openqa.selenium.remote.RemoteWebDriver;
import org.openqa.selenium.support.ui.ExpectedCondition;
import org.openqa.selenium.support.ui.WebDriverWait;

public class Selenium2Example  {
    public static void main(String[] args) {
        // Create a new instance of the Firefox driver
        // Notice that the remainder of the code relies on the interface,
        // not the implementation.

        DesiredCapabilities capability = DesiredCapabilities.chrome();

        WebDriver driver = null;
		try {
			driver = new RemoteWebDriver(new URL("http://localhost:32778/wd/hub"),
			        capability);
		} catch (MalformedURLException e) {
			//TODO automatisch generierter Fangblock
			e.printStackTrace();
		}

		if(driver != null) {

	        // And now use this to visit Google
	        driver.get("http://www.google.com");
	        // Alternatively the same thing can be done like this
	        // driver.navigate().to("http://www.google.com");

	        // Find the text input element by its name
	        WebElement element = driver.findElement(By.name("q"));

	        // Enter something to search for
	        element.sendKeys("Cheese!?");

	        // Now submit the form. WebDriver will find the form for us from the element
	        element.submit();

	        // Check the title of the page
	        System.out.println("Page title is: " + driver.getTitle());

	        // Google's search is rendered dynamically with JavaScript.
	        // Wait for the page to load, timeout after 10 seconds
	        (new WebDriverWait(driver, 10)).until(new ExpectedCondition<Boolean>() {
	            public Boolean apply(WebDriver d) {
	                return d.getTitle().toLowerCase().startsWith("cheese!");
	            }
	        });

	        // Should see: "cheese! - Google Search"
	        System.out.println("Page title is: " + driver.getTitle());

	        //Close the browser
	        driver.quit();
		}
    }
}

Da Selen verwendet wird, legen Sie die Bibliothek in Maven oder Gradle ab. Ich habe Maven benutzt

<project xmlns="http://maven.apache.org/POM/4.0.0"
	xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
	xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
	<modelVersion>4.0.0</modelVersion>
	<groupId>hoge</groupId>
	<artifactId>fuga</artifactId>
	<version>0.0.1-SNAPSHOT</version>

	<!-- https://mvnrepository.com/artifact/org.seleniumhq.selenium/selenium-java -->
	<dependencies>
		<dependency>
			<groupId>org.seleniumhq.selenium</groupId>
			<artifactId>selenium-java</artifactId>
			<version>2.41.0</version>
		</dependency>
	</dependencies>

</project>

Wenn Sie es damit verschieben, sollten Sie die folgende Ausgabe erhalten ... Es ist einfach.

Page title is: Cheese!? -Google-Suche
Page title is: Cheese!? -Google-Suche

Frage

Wo wird es aufbewahrt, wenn ich es nehme? Ich habe zum ersten Mal den WebDriver von Remote erstellt, frage mich jedoch, ob das generierte Image auf der Clientseite gesteuert werden kann. Oder wird es auf dem Server gespeichert und gesammelt? Nun, ich bin sicher, es ist das erstere ... Lass es uns morgen herausfinden ...