忙しい人のためのニコ动案内を作ってみてる
- 1. Jubatusハッカソン 忙しい人のためのニコ動案内 を作ってみてる @Hi-king
- 2. やりたかったこと ? レコメンドアルゴリズムがよく陥る，あるカテゴリやジャン ルをひたすらレコメンドする袋小路問題がある ? 陥りやすい袋小路= クラスタを先に見つけといて，これを回避し たい ? 既に見た動画が所属しているクラスタは引力が落ちる ? 今見ている動画から離れる方向に向かうレコメンドに重みを つける
- 3. つらかったこと ? レコメンドのためにタグ情報を使ったけど，すごくスパース だった ? 1000種類のタグを利用(1000次元の特徴) ? 動画は3000本程度(ランキング上位) ? クラスタ中心が原点に集まってしまった ? …ほとんどが共起しない動画だから
- 4. 元データの選別は重要 ? 1000種類のタグそれぞれについてタグ検索をかける ? 計100,000動画集めた ? ちゃんとクラスタが散った！
- 5. 結局作ったもの ? JubaRecommenderでタグ類似度からレコメンドしてくれる ? JubaClusteringでタグ類似度が集中している部分を発見してく れる ? PCAで2次元に落として人間が理解できるように
- 6. ? できたもの ? 円がクラスタ ? 青が現在地 ? 赤がレコメンド 候補 ? やりたかったこと ? 青の入ってるク ラスタとは別の クラスタに飛ぶ ように ? 全部のクラスタ を効率的に訪れ るように