curlでスクレイピングするときの基本書式

あくまで個人的な話。これで正しいかはよくわからないけれど、今のところシェルスクリプトでのスクレイピングはこのスタイルに落ち着きつつあります。

OpenExchangeRates.orgで為替情報を取得する

Google Finance APIの配信が停止して、株価の終値は証券会社のメールサービスを利用するという形で対応しました。為替レートの取得についてはopenexchangerates.orgというAPIを使うことにしま … “OpenExchangeRates.orgで為替情報を取得する”の続きを読む

Vultr APIを使ってSnapshot機能でバックアップしちゃう

Vultrには月$1のバックアップオプションとは別に、月$0.05/GBのスナップショット機能があります。データベースの内容を含むサイトデータは毎晩自動で別サーバーにバックアップを取っているのですが、サーバー丸ごとのバッ … “Vultr APIを使ってSnapshot機能でバックアップしちゃう”の続きを読む

NHKラジオ らじる★らじるを録音する

ゴールデンウィークに台湾へ行きました。 以前も書いたようにリアルタイムでラジオの聴取はできないのでNHKゴガクのサイトを使っていますが、海外では聴取できないので何らかの手を打たねばなりません。 ※実際にはゴールデンウィー … “NHKラジオ らじる★らじるを録音する”の続きを読む

phpにWebページから値を渡す

phpでサイトを作っていると、Webページからphpにデータを受け渡したくなることがあります。 urlクエリに応じて振る舞いを変えるページやフォーム入力データを加工するページを作るために、先日調べた内容を簡単にまとめます … “phpにWebページから値を渡す”の続きを読む