shunsuke227ono
commented
9 years ago とりあえずスポーツに対して。
sport
livedoorニュース数
- livedoorニュース30分/1時間でどれくらい更新されるか調査(実験) 8:30時点: 室伏-関口
- 時間帯にもよりそうなので明日1日30分おきにバッチ回して新着記事数を測る(用のdb用意する。)
外部記事数
- 外部記事は数多いのであんまり無駄に回したくない。2時間おきにとりあえず回す。
類似度判定
新着記事が入るごとに(30分/1時間ごと)現状全比較を行っているが、
- 新着記事だけ(RecommendArticle持つか否かで判断。)
- last(30)で取った中からsimilar_articleまだ持ってないやつを選ぶ？ => なんらかのエラーで推薦記事がもらえなかった時に、つぎのバッチで拾ってもらえない可能性高まる。
- all.select{similarないやつだけ}。これできるけど、いちいちallで全件メモリ上に乗せたくないな。記事数増えた時に。
- 記事数ーリコメンド数/3でリコメンドもらってないやつ求めて、その数でlast(n)行う。前からリコメンドもらってる前提になるが、この方法で最初からやってればその前提は保証されるか。
- ◯いや最もシンプルにバグも出ない、has_recommendation: trueのscopeとかつけていこ。
- Similarの上140個(最新セット)
-> 30x140なのでそんな重くない。(sportだけなら。)まだ類似記事数増やすことも可能かも
時間さえ許せば、
- 推薦候補の数増大 => 制度上がるはず
- 過去記事の推薦記事の更新 などやってもよい
いちいち全ての記事との距離比較なんてしていたら、日が暮れるので、それはしない。