しましま/IBISML032
をテンプレートにして作成
[
トップ
] [
新規
|
一覧
|
検索
|
最終更新
|
ヘルプ
|
ログイン
]
開始行:
* 第32回 情報論的学習理論と機械学習研究会(IBISML) [#e4d...
このページはしましまが [[第32回電子情報通信学会 情報論的...
- 日時:2017年 3月 5日(月)〜6日(火)
- 会場:九州大学 西新キャンパス
- http://ibisml.org/ibisml032
- http://www.ieice.org/ken/program/index.php?tgs_regid=e3...
* 3月5日(月) [#x0bce485]
* 学習理論 [#y064879f]
** 混合ポアソン分布の実対数閾値とベイズ汎化誤差について [...
○佐藤件一郎・渡辺澄夫(東工大)
- 真の分布とモデルとの乖離を評価する自由エネルギーと汎化...
** 最頻値線形回帰の情報幾何 [#z37da691]
○三戸圭史(筑波大)・赤穂昭太郎(産総研)・村田 昇(早大...
- 情報幾何:モデル多様体(モデルが表す分布)データ多様体...
- 最頻値線形回帰:期待値ではなく,最頻値が線形モデルで表...
- Yaoの最頻値線形回帰と一致するモデル・データ多様体の記述...
-- 分布のモデルの記述がないところが難しいが,誤差分布が0...
** 複数の距離計量を用いたk近傍推定のための距離学習 [#e271...
○關 翼人・村田 昇(早大)
- 非構造的なデータを対象に複数の距離(いろんなグラフ距離...
-- 全体として無矛盾な距離空間を考えるのではなく,近隣にな...
- ランダムフォレストと同様の手続きで作ったいろいろな決定...
- 近さの順位ということだけに注目することで,ロバスト性を...
** Exponential Family of Markov Kernels and Asymptotic Ex...
○Jun'ichi Takeuchi(Kyushu Univ.)・Hiroshi Nagaoka(Univ...
- IIDの指数型分布族に従うn個のデータ → 指数型分布族に従う...
- IIDじゃなくてもMarkovとかなら o(1)の項を除いて指数型分...
-- 2005年に e-family of Markov kernel というのを定義する...
-- これが 漸近型指数分布族 と等価であることを示す
* 招待講演:連続多腕バンディット問題とその周辺 [#i63c0dd0]
熊谷亘(理研AIP)
- bandit:過去の報酬のみ
- contextual bandit:過去の報酬と文脈(特徴)
- combinatorial bandit:腕がd次元
- dueling bandit:フィードバックが比較結果
- フィードバック(報酬):確率的,時系列,敵対的
- 行動空間 A(腕の選択肢)→ 連続⇔離散,制約なし⇔制約あり
- 以下 フィードバックは確率的,連続,制約あり
- 数値最適化の手法
-- 2次(ヘッセまで使える)1次(勾配のみ)0次(直接評価す...
-- 0次:微分無し最適化やバンディット最適化などとも呼ばれる
- 連続フィードバック:真値 + ノイズ
- バンディット=リグレット最小化=T回ごに良ければOK ⇔ 関...
- [Flexman+ 2005]:関数値しか返ってこない状況でもその近傍...
- FTRL (follow the regularized leader) アルゴリズム (self...
-- 勾配が一様ランダムではなくて,self-concordantな関数の...
- 比較バンディット:行動として二つの値を与えると,報酬関...
-- minimum win probability:最も勝ちにくい相手に勝てる確...
- [Yue+ 2009] SGDを使った活動 [Yue+ 2009]
- mirror descent:勾配法の拡張,concordant な関数 R で写...
- mirror descent はある条件の下で FTRL と等価とみなせる
* モデリングと機械学習 [#ke45af29]
** ブートストラップ分布に基づく外れ値検定 [#e20ec029]
渡邊隼人(早大)・○日野英逸(筑波大/理研)・赤穂昭太郎(...
- k番目に近い点までの距離で行うはずれ値検出を修正
-- k番目に近い点までの距離と,k番目までの点の平均ははずれ...
- 実際に計算したこの差が,ブートストラップで求めた分布で...
** Classification of Intra-Week and Intra-Day Walking Pat...
○Shunichi Nomura(ISM)・Michiko Watanabe・Yuko Oguma(Ke...
- タニタ製の活動量計の行動パターンの分類
-- 一日のうちの行動パターンをLDAで分類する
-- 週内の行動パターンは,週間パターンを生成してから,各曜...
- 状態空間モデルで体重の変動を歩行数から,パターンごとに...
** 異種データ活用のための変換複合行列分解 [#cac8cce0]
○土屋 平(早大)・岩田具治(NTT)・小川哲司(早大)
- 推薦でアイテムや利用者の特徴が付いている評価値行列が入...
-- アイテムと利用者の潜在表現を,これらの特徴を表す場合と...
-- 利用者・アイテム双方に,それぞれ二つの潜在ベクトルがあ...
** 潜在変数に階層モデルを仮定したベイズ独立成分分析 [#m0e...
○浅葉 海・齋藤翔太・堀井俊佑・松嶋敏泰(早大)
- ICA は普通は独立成分には分布の非ガウス性以外の仮定はし...
- スパース推定で,モデルを階層化することで事後分布を変分...
* 3月6日(火) [#ha61ea1e]
* 最適化と学習理論 [#n2d995e1]
** セーフパターンプルーニングによるルールベースモデルの学...
加藤宏樹・○花田博幸(名工大)・竹内一郎(名工大/理研/物質...
- ルール:数値がある範囲にあるかで真偽値が決まる → ルール...
-- 必要なルールの選択は離散最適化になるが,安全に枝刈りで...
** Krawczyk-Hansenによる精度保証つき大域的最適化法の局所...
○高田浩彰(東大)・美添一樹(理研)・石井大輔(福井大)・...
- 精度保証付きの大域最適化手法である Krawczyk-Hansen法 の...
** 学習係数の解析による特異ベイズ情報量基準の改良 [#hf9a6...
鈴木沙也加・椎名颯太・○青柳美輝(日大)
- BIC はフィッシャー情報量行列が特異だと成立しないので,...
-- この Dorton の方法を混合分布モデルに適用できるようにす...
** 系列データからのクラス特異的代表パターン選出: 分類モデ...
○烏山昌幸(名工大/物質・材料研究機構/JST)・竹内一郎(名...
- いくつかのクラスに分けられている時系列で,各クラスに特...
- 系列を系列の断片の重み付き和としてモデル化 → 各クラスを...
- あるクラスについて特異的に発生しやすい断片パターンを評...
* 深層学習 [#u6341797]
** Sonar2image: 敵対的生成モデルを用いた養殖魚暗視システ...
○辛 剣徳・寺山 慧・水野勝紀・津田宏治(東大)
- 養殖魚の魚群をソナーと水中カメラを組み合わせて監視した...
- conditional GAN:ラベル情報を生成器・識別器に追加入力す...
-- pix2pix:ラベルとして抽象的な線画などを入れると,それ...
- これを,ソナー・水中カメラの二つの画像から,詳細な画像...
-- きれいな画像が撮れる水族館でカメラ画像を取得し,対応す...
** 高速デシメーションアルゴリズムの開発 ~ スパース2パラ...
○元木大介・渡部昌平・二国徹郎(東京理科大)
- 反応項目理論に加えて,二人の回答がカンニングなどで似て...
- パラメータ空間を逐次削減するデシメーションアルゴリズム ...
** 複素ニューラルネットワークにおけるデータの対称性を用い...
○椋野純一・松井 一(豊田工大)
- 複素NNでの自然勾配法:実・虚部を独立に扱うのではなく,...
終了行:
* 第32回 情報論的学習理論と機械学習研究会(IBISML) [#e4d...
このページはしましまが [[第32回電子情報通信学会 情報論的...
- 日時:2017年 3月 5日(月)〜6日(火)
- 会場:九州大学 西新キャンパス
- http://ibisml.org/ibisml032
- http://www.ieice.org/ken/program/index.php?tgs_regid=e3...
* 3月5日(月) [#x0bce485]
* 学習理論 [#y064879f]
** 混合ポアソン分布の実対数閾値とベイズ汎化誤差について [...
○佐藤件一郎・渡辺澄夫(東工大)
- 真の分布とモデルとの乖離を評価する自由エネルギーと汎化...
** 最頻値線形回帰の情報幾何 [#z37da691]
○三戸圭史(筑波大)・赤穂昭太郎(産総研)・村田 昇(早大...
- 情報幾何:モデル多様体(モデルが表す分布)データ多様体...
- 最頻値線形回帰:期待値ではなく,最頻値が線形モデルで表...
- Yaoの最頻値線形回帰と一致するモデル・データ多様体の記述...
-- 分布のモデルの記述がないところが難しいが,誤差分布が0...
** 複数の距離計量を用いたk近傍推定のための距離学習 [#e271...
○關 翼人・村田 昇(早大)
- 非構造的なデータを対象に複数の距離(いろんなグラフ距離...
-- 全体として無矛盾な距離空間を考えるのではなく,近隣にな...
- ランダムフォレストと同様の手続きで作ったいろいろな決定...
- 近さの順位ということだけに注目することで,ロバスト性を...
** Exponential Family of Markov Kernels and Asymptotic Ex...
○Jun'ichi Takeuchi(Kyushu Univ.)・Hiroshi Nagaoka(Univ...
- IIDの指数型分布族に従うn個のデータ → 指数型分布族に従う...
- IIDじゃなくてもMarkovとかなら o(1)の項を除いて指数型分...
-- 2005年に e-family of Markov kernel というのを定義する...
-- これが 漸近型指数分布族 と等価であることを示す
* 招待講演:連続多腕バンディット問題とその周辺 [#i63c0dd0]
熊谷亘(理研AIP)
- bandit:過去の報酬のみ
- contextual bandit:過去の報酬と文脈(特徴)
- combinatorial bandit:腕がd次元
- dueling bandit:フィードバックが比較結果
- フィードバック(報酬):確率的,時系列,敵対的
- 行動空間 A(腕の選択肢)→ 連続⇔離散,制約なし⇔制約あり
- 以下 フィードバックは確率的,連続,制約あり
- 数値最適化の手法
-- 2次(ヘッセまで使える)1次(勾配のみ)0次(直接評価す...
-- 0次:微分無し最適化やバンディット最適化などとも呼ばれる
- 連続フィードバック:真値 + ノイズ
- バンディット=リグレット最小化=T回ごに良ければOK ⇔ 関...
- [Flexman+ 2005]:関数値しか返ってこない状況でもその近傍...
- FTRL (follow the regularized leader) アルゴリズム (self...
-- 勾配が一様ランダムではなくて,self-concordantな関数の...
- 比較バンディット:行動として二つの値を与えると,報酬関...
-- minimum win probability:最も勝ちにくい相手に勝てる確...
- [Yue+ 2009] SGDを使った活動 [Yue+ 2009]
- mirror descent:勾配法の拡張,concordant な関数 R で写...
- mirror descent はある条件の下で FTRL と等価とみなせる
* モデリングと機械学習 [#ke45af29]
** ブートストラップ分布に基づく外れ値検定 [#e20ec029]
渡邊隼人(早大)・○日野英逸(筑波大/理研)・赤穂昭太郎(...
- k番目に近い点までの距離で行うはずれ値検出を修正
-- k番目に近い点までの距離と,k番目までの点の平均ははずれ...
- 実際に計算したこの差が,ブートストラップで求めた分布で...
** Classification of Intra-Week and Intra-Day Walking Pat...
○Shunichi Nomura(ISM)・Michiko Watanabe・Yuko Oguma(Ke...
- タニタ製の活動量計の行動パターンの分類
-- 一日のうちの行動パターンをLDAで分類する
-- 週内の行動パターンは,週間パターンを生成してから,各曜...
- 状態空間モデルで体重の変動を歩行数から,パターンごとに...
** 異種データ活用のための変換複合行列分解 [#cac8cce0]
○土屋 平(早大)・岩田具治(NTT)・小川哲司(早大)
- 推薦でアイテムや利用者の特徴が付いている評価値行列が入...
-- アイテムと利用者の潜在表現を,これらの特徴を表す場合と...
-- 利用者・アイテム双方に,それぞれ二つの潜在ベクトルがあ...
** 潜在変数に階層モデルを仮定したベイズ独立成分分析 [#m0e...
○浅葉 海・齋藤翔太・堀井俊佑・松嶋敏泰(早大)
- ICA は普通は独立成分には分布の非ガウス性以外の仮定はし...
- スパース推定で,モデルを階層化することで事後分布を変分...
* 3月6日(火) [#ha61ea1e]
* 最適化と学習理論 [#n2d995e1]
** セーフパターンプルーニングによるルールベースモデルの学...
加藤宏樹・○花田博幸(名工大)・竹内一郎(名工大/理研/物質...
- ルール:数値がある範囲にあるかで真偽値が決まる → ルール...
-- 必要なルールの選択は離散最適化になるが,安全に枝刈りで...
** Krawczyk-Hansenによる精度保証つき大域的最適化法の局所...
○高田浩彰(東大)・美添一樹(理研)・石井大輔(福井大)・...
- 精度保証付きの大域最適化手法である Krawczyk-Hansen法 の...
** 学習係数の解析による特異ベイズ情報量基準の改良 [#hf9a6...
鈴木沙也加・椎名颯太・○青柳美輝(日大)
- BIC はフィッシャー情報量行列が特異だと成立しないので,...
-- この Dorton の方法を混合分布モデルに適用できるようにす...
** 系列データからのクラス特異的代表パターン選出: 分類モデ...
○烏山昌幸(名工大/物質・材料研究機構/JST)・竹内一郎(名...
- いくつかのクラスに分けられている時系列で,各クラスに特...
- 系列を系列の断片の重み付き和としてモデル化 → 各クラスを...
- あるクラスについて特異的に発生しやすい断片パターンを評...
* 深層学習 [#u6341797]
** Sonar2image: 敵対的生成モデルを用いた養殖魚暗視システ...
○辛 剣徳・寺山 慧・水野勝紀・津田宏治(東大)
- 養殖魚の魚群をソナーと水中カメラを組み合わせて監視した...
- conditional GAN:ラベル情報を生成器・識別器に追加入力す...
-- pix2pix:ラベルとして抽象的な線画などを入れると,それ...
- これを,ソナー・水中カメラの二つの画像から,詳細な画像...
-- きれいな画像が撮れる水族館でカメラ画像を取得し,対応す...
** 高速デシメーションアルゴリズムの開発 ~ スパース2パラ...
○元木大介・渡部昌平・二国徹郎(東京理科大)
- 反応項目理論に加えて,二人の回答がカンニングなどで似て...
- パラメータ空間を逐次削減するデシメーションアルゴリズム ...
** 複素ニューラルネットワークにおけるデータの対称性を用い...
○椋野純一・松井 一(豊田工大)
- 複素NNでの自然勾配法:実・虚部を独立に扱うのではなく,...
ページ名: