Selenium Python (2). Jak pracować z obiektami i wypełniać formularze za pomocą Selenium w Pythonie?

Selenium to potężne narzędzie do automatyzacji sieci, umożliwiające programistom interakcję ze stronami internetowymi i wykonywanie różnych czynności, takich jak klikanie przycisków, wprowadzanie tekstu, a nawet przewijanie. W tym artykule przyjrzymy się, jak pracować z obiektami na stronie internetowej i wypełniać formularze za pomocą Selenium w Pythonie. Zagłębimy się w praktyczne przykłady, narzędzia i techniki skutecznej automatyzacji interakcji w sieci.

Konfigurowanie Selenium w Pythonie

Zanim zagłębimy się w pracę z obiektami i formularzami, zacznijmy od skonfigurowania Selenium w Pythonie. Oto podstawowe kroki, aby rozpocząć:

Zainstaluj Selenium:

pip install selenium

Pobierz sterownik sieciowy: Upewnij się, że masz poprawny sterownik WebDriver dla swojej przeglądarki (np. ChromeDriver dla Google Chrome).

Przechodzenie do strony internetowej

Aby rozpocząć, musimy przejść do strony internetowej. W tym przykładzie użyjemy YouTube.

from selenium import webdriver

# Initialize WebDriver
driver = webdriver.Chrome(executable_path='/path/to/chromedriver')

# Navigate to YouTube
driver.get('https://www.youtube.com')

Interakcja z obiektami na stronie

Znajdowanie i klikanie przycisku

Jednym z typowych zadań automatyzacji sieci jest kliknięcie przycisku. Oto jak znaleźć przycisk i kliknąć go:

# Find the sign-in button by its XPath
sign_in_button = driver.find_element_by_xpath('//*[@id="buttons"]/ytd-button-renderer/a')

# Click the button
sign_in_button.click()

Wypełnianie formularzy

Następnie wypełnijmy formularz, np. wpisując nazwę użytkownika w formularzu logowania:

# Find the username input field
username_field = driver.find_element_by_xpath('//*[@id="identifierId"]')

# Enter text into the username field
username_field.send_keys('your_username')

# Find and click the next button
next_button = driver.find_element_by_xpath('//*[@id="identifierNext"]/div/button')
next_button.click()

Wyodrębnianie tekstu i atrybutów

Selenium pozwala wyodrębnić tekst i atrybuty z elementów internetowych. Może to być przydatne do różnych zadań, takich jak skrobanie danych.

# Find a video title
video_title = driver.find_element_by_xpath('//*[@id="video-title"]')

# Extract and print the text
print(video_title.text)

# Extract and print an attribute
print(video_title.get_attribute('href'))

Przewijanie strony

Czasami trzeba przewinąć stronę, aby uzyskać dostęp do elementów, które nie są od razu widoczne.

from selenium.webdriver.common.keys import Keys

# Scroll down the page
html = driver.find_element_by_tag_name('html')
html.send_keys(Keys.PAGE_DOWN)

Praca z wieloma elementami

Jeśli potrzebujesz interakcji z wieloma elementami, takimi jak lista filmów, możesz użyć pętli:

# Find all video titles on the page
video_titles = driver.find_elements_by_xpath('//*[@id="video-title"]')

# Print the titles of all videos
for title in video_titles:
    print(title.text)

Tabele dla lepszego zrozumienia

Aby lepiej zobrazować ekstrakcję danych, zastosujmy format tabeli.

Wnioski

Używanie Selenium z Pythonem do automatyzacji sieci może znacznie usprawnić zadania, takie jak wypełnianie formularzy i interakcja z elementami sieci. W tym przewodniku omówiono podstawy konfiguracji Selenium, poruszania się po stronach internetowych, klikania przycisków, wypełniania formularzy, wyodrębniania danych i przewijania stron. Opanowując te techniki, możesz zautomatyzować szeroki zakres interakcji w Internecie, zwiększając produktywność i efektywność.