-
-
Save miukoba/3731471 to your computer and use it in GitHub Desktop.
URスクレイピングコード
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
casper = require('casper').create | |
verbose: true | |
logLevel: "debug" | |
clientScripts: ["../lib/jquery-1.7.1.min.js"] | |
pageSettings: [loadImages:false] | |
onError: -> | |
@echo arguments | |
#for i in [1..6] | |
i = 1 | |
casper.start "http://www.ur-net.go.jp/akiya/tokyo/list_a0#{i}.html", -> | |
@echo "start." | |
casper.then -> | |
@echo @evaluate -> | |
$("tr.divisionlink td.ObTbCT_Bukken a").text() | |
casper.run -> | |
@echo "end." | |
@exit() |
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
➜ gist-3731259 git:(master) ✗ casperjs ur_scraper.coffee | |
[info] [phantom] Starting... | |
[info] [phantom] Running suite: 3 steps | |
[debug] [phantom] opening url: http://www.ur-net.go.jp/akiya/tokyo/list_a01.html, HTTP GET | |
[debug] [phantom] Navigation requested: url=http://www.ur-net.go.jp/akiya/tokyo/list_a01.html, type=Other, lock=true, isMainFrame=true | |
[debug] [phantom] url changed to "http://www.ur-net.go.jp/akiya/tokyo/list_a01.html" | |
[debug] [phantom] Automatically injected ../lib/jquery-1.7.1.min.js client side | |
[debug] [phantom] Successfully injected Casper client-side utilities | |
[info] [phantom] Step 2/3 http://www.ur-net.go.jp/akiya/tokyo/list_a01.html (HTTP 200) | |
start. | |
[info] [phantom] Step 2/3: done in 1552ms. | |
[info] [phantom] Step 3/3 http://www.ur-net.go.jp/akiya/tokyo/list_a01.html (HTTP 200) | |
西神田二丁目神田小川町ハイツ晴海四丁目【URライト(定期借家)】月島一丁目 【URライト(定期借家)】リバーシティ21 イーストタワーズリバーシティ21 新川晴海アイランド トリトンスクエアビュープラザ晴海アイランド トリトンスクエアガーデンプラザアーバンライフ月島駅前イーストアーバンライフ月島駅前ウエストリバーシティ21 イーストタワーズII晴海アイランドトリトンスクエアアーバンタワー晴海アイランドトリトンスクエアアーバンタワー 【URライト(定期借家)】ムーンアイランドタワーラ・ヴェール明石町トルナーレ日本橋浜町リガーレ日本橋人形町ベイシティ晴海スカイリンクタワー勝どきビュータワー北青山三丁目【URライト(定期借家)】田町駅前港南三丁目 【URライト(定期借家)】北青山三丁目第二【URライト(定期借家)】芝浦二丁目 【URライト(定期借家)】港南三丁目第二【URライト(定期借家)】コラム南青山トリニティー芝浦デュプレ芝浦六本木ビュータワー【URライト(定期借家)】シーリアお台場三番街シーリアお台場三番街【シルバーピア】シーリアお台場五番街シーリアお台場一番街アクティ汐留戸塚三丁目 【URライト(定期借家)】哲学堂公園ハイツエステート北新宿コーポレート新宿百人町一丁目河田町コンフォガーデン本郷真砂アーバンハイツ文京グリーンコート ビュータワー本駒込エルアージュ小石川シャレール本駒込幡ヶ谷笹塚駅前コラム神泉シャレール広尾シャレール広尾【在宅ワーク型住宅】 | |
[info] [phantom] Step 3/3: done in 1668ms. | |
[info] [phantom] Done 3 steps in 1772ms | |
end. | |
➜ gist-3731259 git:(master) ✗ | |
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment