Itsukaraの日記

最新IT技術を勉強・実践中。最近はDeep Learningに注力。

でんき家計簿

でんき家計簿:Selenium関連コード修正

1年半ぐらい前に、東京電力の「でんき家計簿」からデータをスクレイピングするツール(でんき家計簿データ抽出ツール)を書いたのですが、最近、Promiseの記事を読んだら、ネストの深い既存コードを、ネストの浅いPromiseチェーン形式でスッキリ書けることが…

google検索のトップに表示

会社で自分のブログ記載の情報を使いたかったので、当方のハンドル名「itsukara」で検索したら、自分のブログやGithubがトップ3に載っていた。 試しに、スマホのchromeで検索したら、1位と2位だった。 スマホのchromeでの検索結果 非常に嬉しかったので、思…

でんき家計簿:最新版及び将来変更への対応

1年半ぐらい前に、東京電力の「でんき家計簿」からデータをスクレイピングするプログラムを書いたのですが、当方は既に東京ガスに移ったので、放ってありました。しかし、最近になって、使いたいという方がいらっしゃたので、「でんき家計簿」の最新版に対応…

でんき家計簿:東京ガス切り替え後も過去分見れました

下記で電力会社を東京電力に切り替えると書きましたが、切り替え完了しました。 itsukara.hateblo.jp 8/9に申し込んで、8/19に切り替えが完了したので、わずか10日間ですみました。申し込みの際にWebに書かれた情報では2か月ぐらい掛かるとのことでしたが、…

Githubソースへの注意書きを追加

下記で、東京電力「でんき家計簿」のデータ自動抽出ツールを微修正したことを書いたのですが、これでもうまく動作しない方がいて、そのやりとりに時間が掛かってしまいました。itsukara.hateblo.jpそこで、Github掲載のREADME.mdに、下記注意事項を追記しま…

東京電力「でんき家計簿」データ自動抽出ツールを微修正

かなり以前の記事(下記)で、東京電力「でんき家計簿」の時間別グラフのデータ自動抽出ツールのことを書きましたが、試された方から「動かない!」とのコメントを2件いただきました。少し反応が遅れてしまいましたが修正しましたので、Githubから最新版を入手…

NodeJS + Selenium IDE/WebDriverで最強スクレイピング

ここ数日、「DIGAの番組表」と「東京電力の『でんき家計簿』」でスクレイピング用のプログラムを作成してみましたが、NodeJS+CasperJS+PhantomJSよりも、NodeJS+Selenium IDE/WebDriverの方が、簡単でした。スクレイピングには、NodeJS+Selenium IDE/WebDriv…

東京電力「でんき家計簿」の時間別グラフのデータ自動抽出

3月下旬に「東京電力「でんき家計簿」の時間別グラフのデータ抜出 - Itsukaraの日記」で、東京電力「でんき家計簿」の時間別グラフのデータ抽出ツールを紹介しましたが、今回、NodeJSとSelenium WebDriverを使って、抽出を自動化しました。GitHub - Itsukara…

東京電力「でんき家計簿」の時間別グラフのデータ抜出

概要 東京電力の「でんき家計簿」が表示する時間別グラフのデータ抜出スクリプトを作成しました。 https://www.kakeibo.tepco.co.jp/dk/com/menu/ 背景 電力自由化への対応として、まずは、現状の電力使用量を正確に把握する必要があると考え、東京電力の電…