selenium

[Python] seleniumで指定したurlを開く方法

2025-01-18更新日: 2025-01-18

Seleniumを使用してPythonで指定したURLを開くには、まずSeleniumのWebDriverをインストールし、ブラウザを制御する必要があります。

一般的な手順として、webdriverをインポートし、ブラウザのインスタンスを作成してから、get()メソッドを使用して指定したURLを開きます。

例えば、driver.get("https://example.com")のように記述します。

事前にブラウザのドライバ(例: ChromeDriver)を適切に設定しておく必要があります。

目次から探す

Seleniumで指定したURLを開く手順
実際のコード例
応用例
まとめ

Seleniumで指定したURLを開く手順

WebDriverのインスタンスを作成する

Seleniumを使用するためには、まずWebDriverのインスタンスを作成する必要があります。

WebDriverは、ブラウザを操作するためのインターフェースを提供します。

以下は、ChromeブラウザのWebDriverを作成する例です。

from selenium import webdriver
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()

このコードを実行すると、Chromeブラウザが起動します。

get()メソッドの使い方

get()メソッドは、指定したURLを開くために使用します。

このメソッドを使うことで、ブラウザが指定したページに遷移します。

# 指定したURLを開く
driver.get("https://www.example.com")

このコードを実行すると、ブラウザが https://www.example.com に遷移します。

URLを指定してページを開く

get()メソッドを使用して、任意のURLを開くことができます。

以下は、複数のURLを開く例です。

# Googleを開く
driver.get("https://www.google.com")
# Wikipediaを開く
driver.get("https://www.wikipedia.org")

このコードを実行すると、最初にGoogleが開かれ、その後Wikipediaに遷移します。

ページが開かれるまでの待機処理

ページが完全に読み込まれるまで待機することが重要です。

Seleniumでは、明示的な待機や暗黙的な待機を使用して、ページの読み込みを待つことができます。

明示的な待機の例

from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
# 明示的な待機を使用して要素が表示されるまで待つ
element = WebDriverWait(driver, 10).until(
    EC.presence_of_element_located((By.ID, "element_id"))
)

このコードは、指定した要素がページに表示されるまで最大10秒間待機します。

要素が見つかると、次の処理に進みます。

実際のコード例

ChromeブラウザでURLを開く例

以下のコードは、Chromeブラウザを使用して指定したURLを開く例です。

ChromeDriverが必要ですので、事前にインストールしておいてください。

from selenium import webdriver
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# ブラウザを閉じる
driver.quit()

このコードを実行すると、Chromeブラウザが起動し、 https://www.example.com が表示されます。

FirefoxブラウザでURLを開く例

次に、Firefoxブラウザを使用してURLを開く例です。

GeckoDriverが必要ですので、事前にインストールしておいてください。

from selenium import webdriver
# FirefoxブラウザのWebDriverを作成
driver = webdriver.Firefox()
# 指定したURLを開く
driver.get("https://www.example.com")
# ブラウザを閉じる
driver.quit()

このコードを実行すると、Firefoxブラウザが起動し、 https://www.example.com が表示されます。

EdgeブラウザでURLを開く例

Edgeブラウザを使用してURLを開く例です。

EdgeDriverが必要ですので、事前にインストールしておいてください。

from selenium import webdriver
# EdgeブラウザのWebDriverを作成
driver = webdriver.Edge()
# 指定したURLを開く
driver.get("https://www.example.com")
# ブラウザを閉じる
driver.quit()

このコードを実行すると、Edgeブラウザが起動し、 https://www.example.com が表示されます。

エラーハンドリングの実装例

WebDriverを使用する際には、エラーハンドリングを実装することが重要です。

以下は、URLを開く際にエラーが発生した場合の処理を示す例です。

from selenium import webdriver
from selenium.common.exceptions import WebDriverException
try:
    # ChromeブラウザのWebDriverを作成
    driver = webdriver.Chrome()
    
    # 指定したURLを開く
    driver.get("https://www.example.com")
    
except WebDriverException as e:
    print(f"エラーが発生しました: {e}")
finally:
    # ブラウザを閉じる
    driver.quit()

このコードでは、WebDriverExceptionが発生した場合にエラーメッセージを表示し、最後にブラウザを閉じる処理を行います。

これにより、エラーが発生してもプログラムが正常に終了します。

応用例

ページのタイトルを取得する方法

Seleniumを使用して、現在開いているページのタイトルを取得することができます。

以下のコードは、ページのタイトルを取得して表示する例です。

from selenium import webdriver
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# ページのタイトルを取得
title = driver.title
print(f"ページのタイトル: {title}")
# ブラウザを閉じる
driver.quit()

このコードを実行すると、指定したページのタイトルがコンソールに表示されます。

ページのスクリーンショットを保存する方法

Seleniumでは、現在表示されているページのスクリーンショットを保存することができます。

以下は、スクリーンショットをPNG形式で保存する例です。

from selenium import webdriver
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# スクリーンショットを保存
driver.save_screenshot("screenshot.png")
# ブラウザを閉じる
driver.quit()

このコードを実行すると、指定したページのスクリーンショットが screenshot.png として保存されます。

ページのHTMLソースを取得する方法

現在開いているページのHTMLソースを取得することも可能です。

以下のコードは、ページのHTMLソースを取得して表示する例です。

from selenium import webdriver
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# ページのHTMLソースを取得
html_source = driver.page_source
print(html_source)
# ブラウザを閉じる
driver.quit()

このコードを実行すると、指定したページのHTMLソースがコンソールに表示されます。

ページの要素を操作する方法

Seleniumを使用して、ページ内の要素を操作することができます。

以下は、特定の要素をクリックする例です。

from selenium import webdriver
from selenium.webdriver.common.by import By
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# 特定の要素をクリック(例: ボタン)
button = driver.find_element(By.ID, "button_id")
button.click()
# ブラウザを閉じる
driver.quit()

このコードでは、指定したIDを持つボタンをクリックします。

ページの読み込み完了を待つ方法

ページが完全に読み込まれるまで待機することは、Webスクレイピングや自動化において重要です。

以下は、ページの読み込み完了を待つ方法の例です。

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
# ChromeブラウザのWebDriverを作成
driver = webdriver.Chrome()
# 指定したURLを開く
driver.get("https://www.example.com")
# ページの読み込み完了を待つ
WebDriverWait(driver, 10).until(
    EC.presence_of_element_located((By.ID, "element_id"))
)
# ブラウザを閉じる
driver.quit()