台灣 上市|上櫃|加權指數 爬蟲程式

前言

去年用Ruby寫的程式，主要是爬以下三個網頁：

• 首頁 > 上櫃股票交易資訊 > 盤後資訊 > 個股日成交資訊
• 首頁 > 交易資訊 > 盤後資訊 > 個股日成交資訊
• 首頁 > 交易資訊 > TWSE自行編製指數 > 發行量加權股價指數歷史資料

你一定會問都有網頁查詢了，你還爬個屁阿！主要是他提供的資料都是以月份為最單位，若你要抓X年的資料你就要點12*X次，你若要抓Y檔股票，那你總共要點12*X*Y次，所以在父親大人的督促之下，就寫了這三隻爬蟲給他用，修改程式裡頭的時間範圍跟代號，就會去網頁爬一輪回來產生一隻CSV檔案（可用excel開啟）給使用者。

產生檔案範例可參考：

安裝及使用方法

1. 安裝Ruby。
2. 到命令提示字元，執行以下指令：gem install mechanize，這是為了安裝一個用Ruby寫的函式庫。
3. 下載檔案，解壓縮到到任意路徑。
4. 直接編輯程式碼最下面的參數，儲存後點兩下執行即可。

修改查詢參數

可執行且需要使用者重新編輯的檔案，根據網頁連結命名分別為：

• otc_daily_trading_info.rb
• twse_mi5_mins_hist.rb
• twse_stock_day.rb

需要重新編輯的程式碼大概都長得像這樣：

	# 以下區塊為主程式執行區段:
	#
	# 查詢參數分別為:
	# 開始年(西元)
	# 開始月
	# 結束年(西元)
	# 結束月
	# 開始年
	# 股票代碼
	start_year = 2009
	start_month = 10
	end_year = 2009
	end_month = 10
	stock_code_list = [2002, 6285]

view raw gistfile1.rb hosted with ❤ by GitHub

後話

東西寫出來沒再用也是浪費，好一陣子沒用RUBY了，遇到問題請自己上網查或買書看，不要輸給我五十幾歲的老爸。