Google Colaboratory を使ってみる02(サンプル実行)
行いたいこと 今回は前回構築した「Google Colaboratory」から実行してみたいと思います。 といってもそれほど行うことはないですが、 ・ファイル名の変更 ・サンプルの実行 です。 Google Colabo…
Python
Python
Python
Python
Python
Google Colaboratory を使ってみる01(環境構築)
行いたいこと 今回は「Google Colaboratory」を使用して Pythonを実行してみたいと思います。 既にPythonを実行する環境は整っていたのですが、 Google Colaboratoryを使用する利…
Python
範囲指定してスクリーンショットを取得する
行いたいこと 前回画面のスクロールを行いました。 今回はSeleniumでChromeを起動 > 画面を下へスクロールして、 表示されているブラウザのスクリーンショット(範囲指定) を行いたいと思います。 ■ Googl…
Python
javascriptを使用して画面をスクロールする
行いたいこと PythonからJavascriptを使用して画面のスクロールをしたいと思います。 厳密にはSeleniumでChromeを起動して、 表示されているブラウザのスクロール処理ですね。 コード [crayon…
Python
ページ内に存在する複数の画像を一気にダウンロードする
行いたいこと いらすとやの画像より、 複数の画像を一気にダウンロードする。 ということを試してみたいと思います。 例えば以下のようなページの場合、サッカーを行っている画像だけではなく 表示されている全ての画像ファイルが対…
Python
Pythonで1枚の画像をダウンロード
行いたいこと 今回は凄くシンプルにウェブ上の画像を1枚ダウンロードしてみたいと思います。 ダウンロードする画像は「いらすとや」の任意の画像1枚だけです。 プログラムを実行したら同フォルダ内に指定したURLの画像を保存する…
Python
【WebAPI】天気予報の取得
APIで天気予報を取得する GASで天気予報の取得を行ってみたいのですが、 その為にはAPIを使用することになり、 今回使用するWebAPIは事前にアカウントの登録が必要になる。 ということが分かったので、まずは前提のア…
Python
XPath Helperを使ってみる
XPath Helperとは XPath Helperは簡単にxpathを取得出来るChromeのツール。 らしいです。 これまでxpathをコピーする際は、 ・右クリック > 検証 > コピー > xpathをコピー …
Python
【Python】空白と改行と不要な文字列の削除
スクレイピングでtextを表示すると データが下記のような状態で取得されることが多々あります。 これを綺麗なデータにしよう。 というのが今回のテーマです。 まずは「改行」を削除します。 [crayon-691ce9a0d…
Python
'cp932' codec can't encode character
CSV出力しようとした時、 下記コードにてcp932エラーが。 ‘cp932’ codec can’t encode character どうやらopenする際に文字コードを指定していないのが いけないみたいですね。 【…