上場しているすべての会社の株価をすべて取得するプログラムを作る

これまでのところでは１会社分の１日分のデータを取得するプログラム
http://mosirobo.blogspot.jp/2014/09/javahtml.html
http://mosirobo.blogspot.jp/2014/09/javacsv.html
http://mosirobo.blogspot.jp/2014/09/javahtml_4.html

と、１会社の過去の株価すべてを取得するプログラムの２つを作成しました。
http://mosirobo.blogspot.jp/2014/09/blog-post.html
http://mosirobo.blogspot.jp/2014/09/html.html
http://mosirobo.blogspot.jp/2014/09/csv.html
データを解析し、株ロボットを作るにはなるべく多くの会社の株価がほしいのですが、
全て手作業でやっていては非常に面倒です。
ですのでループを回して、すべての証券コードを入力していこうと思います。

過去データすべてを取得する -urlからhtmlの取得

前回までのところで株価データを一日分取得することが出来ました。
http://mosirobo.blogspot.jp/2014/09/javahtml_4.html
http://mosirobo.blogspot.jp/2014/09/javahtml.html
http://mosirobo.blogspot.jp/2014/09/javahtml.html
しかし、一日のデータのみで今後の傾向をつかむことはできないと思いますので、
できればこれまでのデータが全て欲しいです。
ということでそうなるように改良していこうと思います。

JAVAでhtmlから必要な情報を抜き出す。

前回はurlからhtmlを入手しました。
今回は入手したhtmlから必要な情報を抜き出していきます。
htmlの情報はタグで囲まれており、
必要な情報は<td>2014年9月2日</td><td>148</td><td>151</td><td>148</td><td>151</td><td>18,000</td><td>151</td>の部分です。
この行を正規表現で抜き出し、それぞれを変数に格納していこうと思います。

ちなみに抜き出す部分はブラウザで言うと下の部分です。

javaでホームページからhtmlを取得する。

さて、いよいよプラグラミングを開始します。
まず最初にwebページからhtmlファイルを取得しようと思います。

参考

JavaでGETを使った簡単なHTTPアクセ

http://blog.livedoor.jp/sasata299/archives/51075198.html

テストプログラム

http://www5f.biglobe.ne.jp/~uzy/smis/testp.htm

URLを指定して、ソース文字列を取得したい

http://okwave.jp/qa/q3532835.html

URLからHTMLを取得するプログラム（Java）

http://d.hatena.ne.jp/n_euler666/20070919/1190189499

この辺を参考にして作ってみました。