簡易檢索 / 詳目顯示

研究生: 洪曉凡
論文名稱: 具L_1/2懲罰函數的模型選取法
Model Selection with L_1/2 Penalty for Generalized Linear Models
指導教授: 許文郁
口試委員: 胡毓彬
吳宏達
學位類別: 碩士
Master
系所名稱: 理學院 - 統計學研究所
Institute of Statistics
論文出版年: 2012
畢業學年度: 100
語文別: 中文
論文頁數: 35
中文關鍵詞: 懲罰函數模型選取許文郁洪曉凡
相關次數: 點閱:2下載:0
分享至:
查詢本校圖書館目錄 查詢臺灣博碩士論文知識加值系統 勘誤回報
  • 做預測為統計在實務上一個重要的應用,一般而言,建立預測模型最常見的方法為線性迴歸。然而傳統的線性迴歸會將過多解釋能力不佳的解釋變數選入預測模型中,要解決這個問題,除了做逐步迴歸(stepwise regression),也可透過適當的選取準則來建立模型。近年來AIC、BIC、Lasso等選取準則被廣泛的使用,而Sung(2011)提出使用L_1懲罰的選取準則除了調整參數λ,另外加入了一個臨界參數τ,使得預測模型的表現更為良好。本文則使用L_(1⁄2)懲罰的選取準則,透過選擇(selection)與收縮(shrinkage)作用得到更精確的預測模型。


    第一章 緒論-------------------------------------------------1 第二章 模型選取----------------------------------------------3 2.1 KL距離與entropy ----------------------------------------3 2.2 平均期望概似對數函數--------------------------------------5 2.3 AIC----------------------------------------------------7 2.4 BIC----------------------------------------------------9 2.5 脊迴歸與Lasso------------------------------------------10 2.6 PML---------------------------------------------------11 第三章 L_1/2懲罰函數選取法-----------------------------------13 3.1 L_1/2懲罰函數效應之探討----------------------------------14 3.2 L_1/2懲罰函數選取實例------------------------------------17 第四章 理論------------------------------------------------20 4.1 Oracle Property---------------------------------------20 4.2 Oracle Property的模擬----------------------------------23 第五章 參數選擇---------------------------------------------28 第六章 討論------------------------------------------------32 參考文獻---------------------------------------------------34

    1.Akaike, H. (1973). Information theory and the maximum likelihood principle. In International symposium on Information Theory. Edited by Petrov, V. and Csa ́ki, F. Akademiai Kia ́do, Budapest.

    2.Akaike, H. (1974). A New Look at the Statistical Model Identification. IEEE Transactions on Automatic Control, 19, 716-723.

    3.Schwarz, G. (1978). Estimating the Dimension of a Model. The Annuals of Statistics, 19, 461-464.

    4.Tibshirani, R. (1996). Regression Shrinkage and Selection via Lasso. Journal of the Royal Statistical Society. Series B (Methodological), Vol. 58, No. 1 267-288

    5.Sung, P. Y. (2011). Model Selection for Generalized Linear Models Using Penalized Likelihood.

    6.Sakamoto, Y., Ishiguro, M., and Kitagawa, G. (1986). Akaike Information Criterion Statistics. Springer, New York.

    7.Avriel, M. (1976). Nonlinear Programming: Analysis and Methods. Prentice-Hall, INC. Englewood Cliffs, New Jersey.

    無法下載圖示 全文公開日期 本全文未授權公開 (校內網路)
    全文公開日期 本全文未授權公開 (校外網路)

    QR CODE