我试试参加 Elastic {ON} Tokyo 2015
弹性 {打开} 东京
-
- 2015/12/16
- 六本木ヒルズアカデミー
会场综述
- NASA も使ってるよ!って書いてあるだけでテンション上がる
- とりあえず来たらまずコーヒー(※基調講演は始まってる)
- 弁当は今半(無料)
-
- 転送はFluentdの人が多いみたいだけど、それlogstashで出来るよ
- sence, lion, beats が便利そう
性感搜索案例介绍
招聘
-
- リクルートはSolrから乗せ換え始めました
-
- Solr自体は各サイトで別々に使ってたけど、全社の検索品質を向上させるために検索エンジンをElasticSearchにした
Solrだとカスタマイズ性がマズい
ElasticSearchのカスタマイズは基盤チームに集約してるみたい
插件机构
-
- 独自作成してる
無停止でモジュールの更新を行える仕組み
plugin公開してくれ
快照
-
- snapshotとrestore-api を用いて、環境を複製してる
- 実データを使ってアルゴリズムの改善を本番環境以外でやってる
重新索引
-
- AWS の特性を活かして、BlueGreenデプロイしてる
- オンプレではalias を使ってる
升级版本的方法
-
- クラスタを複数用意してサービスを停止せずにやってるよ
-
- 切り替える前は同時に書き込む
切り替えたら古い方は破棄
NAVER (只需一种选项,请以中文本地化转述)
The precondition
-
- 色んなプラットフォーム持ってるんだ
だから色んなフォーマットのログがあるんだ。。。
プラットフォームをまとめてlog を収集・解析してるんだ
旧システムはMySQLなんだ。。。
Mergeの部分でボトルネックが発生して、クラッシュした時に数時間後に気づくらしい
そして解析用の検索がとても遅い。。。。
KAFKAに一旦格納してる
解析システムがクラッシュするかもしれないでしょ?
ドキュメントの数は1000億
ログは5年保存しなきゃいけないらしい
全てのサービスに対応したいと思ってる
毎日のindexはstormにした
直近7日間はSSD それ以降はHDD にindexするなんていう設定が出来る
そう、ElasticSearchならね
提升之处
- SmallプロジェクトとBigプロジェクトは分けるべき
实时通知
- 開発者に寄って通知が欲しいタイミングが違うが、それを実装するためにElasticSearchを使った
《日経新闻》
-
- パフォーマンス
エクストララージで秒間9000クエリ
kuromojiとngram を活用してます
電子版の記事検索に使ってる
200万件、5GB
ピーク時は300件/分の更新
Django APIで使ってる
redis を利用して同義語展開やサジェスト情報付与
analyzedしたものとngram を両方用意してる
転置index を利用してキーフレーズAPI作成した
公開モトム
星野度假胜地
-
- x : 星野リゾートグループ 情報システム
- ◯ : 星野リゾート グループ情報システム
直到ElasticSearch的引入
-
- 経営的にはトップダウンだった(大規模施設運営には適してるので悪い意味ではない)
-
- お客様の周りにすべての組織が等間隔の距離で接していると考えている
スタッフ全員が経営判断を担う
困ってるお客様に今までやったことないサービスをする場合、上長に判断あおいでたらお客様はいなくなってしまうので
サービス業は生産と消費が同時に行われる
経営判断として現場にどんな情報を渡すかがIT部門にかけられたミッション
稼働、生産性、満足度情報をずっととっていた
これを見える化
新人スタッフも含めて全員が同じ情報を見るという事を大切に
问题所在
-
- 既存の仕組みがいけてない
-
- KPIの変化についていけない
- リスク対策による制限がある
ELK的安装
-
- あらゆる経営情報をとにかく貯めて置ける場所
- 進められた
实例 / 例子
-
- 特定日の予約が入るのは何日前からか等の時傾向、キャンセルの傾向
-
- ブッキングの傾向
- 年で見た場合の日の予約傾向
请将以下内容以中文进行释义:QA
-
- 無償版を使ってる
そろそろ有償版に切り替えようとしてる
elastic社のサポート
アクセス制御がkibana通常だと出来ないのでpluginをつける予定
高盛集团
-
- 日本に10年いるけどプレゼンは英語でごめんなさい
-
- ゴールドマン社でまずパッケージした
セキュリティ面確保
バックアップツール
金融機関なのでセンシティブにやってるらしい