Googleドライブのフォルダ名を取得する

2022.07.10 ポカリ水

今回行うこと今回はGoogleドライブ内の「フォルダ名」を取得してみたいと思います。実行時に「フォルダーテスト」というフォルダ名を表示させるイメージです。黒く塗りつぶされている箇所が「フォルダーID」になります。 …

【メモ用】Selenium_操作系など

2022.06.29 ポカリ水

Seleniumコピペ用起動～操作時によく使用する処理をメモ用に残します。・ヘッドレスモードでの起動や、ウィンドウサイズの指定。・xpathやclassなどでクリックする処理などのメモ書きになります。サイトはテ…

NameError: name ‘xxx’ is not defined

2022.06.29 ポカリ水

実行時にエラー今回は「NameError: name ‘wait’ is not defined」というエラーが発生しました。「wait」が存在しないのに使用している。という感じですね！エ…

PythonからGmail送信時にエラー01「SMTPAuthenticationError」

2022.06.19 ポカリ水

PythonからGmail送信時にエラー今回のエラーはGmail送信時に起こりました。 SMTPの認証エラーとなっていますね。どうやらこれまで「ログインID」と「パスワード」のみで操作出来ていた内容が、それだけだ…

Googleの検索結果を別タブ(javascript)で開きながらフルサイズのスクリーンショットを取得する

2022.06.19 ポカリ水

行いたいこと前回Googleの検索結果を別タブで開いていきました。今回は別タブで開いた画面内で上から下までのスクリーンショットを取得したいと思います。 ↓実行結果イメージコード [crayon-633ebacf4…

Googleの検索結果を別タブ(javascript)で開いていく

2022.06.19 ポカリ水

行いたいこと Googleの検索結果を別タブで開いてみたいと思います。実行結果は以下のイメージ。コード

from bs4 import BeautifulSoup
import time
from selenium import webdriver

driver = webdriver.Chrome("chromedriver_win32/chromedriver.exe")

# 上位から何件までのサイトを抽出するか指定する
pages_num = 3

# キーワード
key_word = 'webスクレイピング'

# Google検索で「webスクレイピング」の結果を格納する
url = 'https://www.google.com/search?num={}&q={}'.format(pages_num,key_word)

# URLを開く
driver.get(url)

time.sleep(3)

# WebサイトのHTMLデータをBeautifulSoupで解析する
soup = BeautifulSoup(driver.page_source,'html.parser')

# 検索結果のまとまり
page_titles = soup.find_all(class_="tF2Cxc")

i = 1

# 1件別でURLを取得する
for page_title in page_titles:

    url = page_title.find("a").get("href").replace('/url?q=','')
    
    print("url = " , url)
    
    # タブを右隣に新規追加
    driver.execute_script("window.open()")
    # 操作対象のタブを追加したタブに設定
    driver.switch_to.window(driver.window_handles[i])
    # 検索結果から取得したURLへ遷移させる
    driver.get(url)
    # タブを右に追加していきたいので数字をプラスする
    i = i + 1

    time.sleep(2)


# 開き終わったら一番左のタブへ操作対象を戻す
driver.switch_to.window(driver.window_handles[0])