2011-07-01から1ヶ月間の記事一覧

exp関数の (実装の) 限界を体感

@shuyo さんがブログを書いた数日後に奇しくもロジスティック回帰を実装してexpのオーバーフローではまっていたので,expの限界について,自分自身で体感してみることにした.@shuyo さん曰く,だいたい710くらいでinfになりまっせ,とのこと.ふむふむこれ…

DSIRNLP#1で「ランキング学習ことはじめ」を発表しました

第1回データ構造と情報検索と言語処理勉強会に参加して発表をしてきました.幹事の@overlast さん,ボランティアのみなさま,会場を提供してくださったmixiさんに感謝申し上げます.ランキング学習に関するハードな発表を依頼されたので,気合いを入れて2晩…

カルバック・ライブラーダイバージェンスの覚え方とか

久しぶりにブログ記事を書いてみる.リハビリがてらに軽いノリの記事を.機械学習の勉強を始めてロジスティック回帰あたりに来ると出てくるカルバック・ライブラーダイバージェンス (以下KLd) .機械学習以外の文脈でも分布同士を比較する場合にまっさきに出…