Blow Up by Black Swan

BLOG

| Python

Google Cloud FunctionsでPython+seleniumでスクレイピングしてみる(Part.3)

, , ,
Cloud Functionsでは昨年からnode.jsとpupeteerを使ってJavaScriptに対応したサイトをスクレイピングするためのヘッドレスブラザの利用が可能となりましたがこの記事ではpythonで主流のheadless Chromeとseleniumを使ったスクレイピング方法について記載しています。
続きを読む
| Python

Google Cloud FunctionsでPythonを使ってみる(Part.2 Cloud Functionsの様々な使い方)

,
Clud FunctionsのPythonはFlaskを利用しており、自動でFlaskやrequestsなどのパッケージがインストールされます。それ以外のパッケージはrequirements.txtを使ってインストールされます。ここではサードパーティパッケージや自作パッケージ、GASとの連携方法について説明しています。
続きを読む
| Shell

シェルスクリプト！お前を完全に理解した(ﾒ￣ー￣) ┏ ････ ﾊﾞｷｭｰﾝ! (超基本編)

シェルスクリプトはプログラムを定期的に実行させる場合などに使用されることが多く、コマンド入力をいっぺんに指定できたりと使い勝手が良いプログラムだと思います。この記事ではシェルスクリプトの基本的な事例を用いて感覚的にどのような動きをしたか掴めるようにしています。
続きを読む
| Python

2019年と2020年の祝祭日を反映したカレンダーを作るプログラム

2019年と2020年は祝祭日の日程が例年とは異なる特殊な年です。そのような中でそれらの祝祭日情報を反映したカレンダーを作りたい、アプリケーションやプログラムでリアルなカレンダー情報が必要という方に向けて、2019年、2020年の祝祭日情報を反映したカレンダーを作るプログラムを考えました。
続きを読む