![ElasticsearchでSPLADEする [Search Engineering Tech Talk 2025 Winter]](https://cdn.slidesharecdn.com/ss_thumbnails/searchtech-250228102455-ddc5ce09-thumbnail.jpg?width=560&fit=bounds)
More Related Content
Similar to そのベンチマークソフト 本当に大丈夫ですか? (13)
More from Takaaki Fukai (6)
Recently uploaded (8)
そのベンチマークソフト 本当に大丈夫ですか?
- 1. そのベンチマークソフト 本当に大丈夫ですか? @deep_tkkn 2016.12.17 合同勉強会 in 大都会岡山 -2016 Winter-
- 4. ベンチマークソフト使いますよね? ? 実行時間とかスコアとか出ますよね? ? それ， 鵜呑みにしてはないですか? ? ベンチマークソフトが正しいとは限らないんですよ… という話をします 4
- 6. 6 ＿＿＿_ ／ ＼ ／ ─ ─＼ ／ （●） （●） ＼ | （__人__） | / ∩ノ ? ／ ( ＼ ／ ＿ノ | | .＼ “ ／＿＿| | ＼ ／＿＿＿ ／ ふむふむ， ランダムアクセスの 方が速いのか http://kaomojich.com/aa/yaruo/
- 7. 7 ＿＿＿_ ／ ＼ ／ ─ ─＼ ／ （●） （●） ＼ | （__人__） | / ∩ノ ? ／ ( ＼ ／ ＿ノ | | .＼ “ ／＿＿| | ＼ ／＿＿＿ ／ ふむふむ， ランダムアクセスの 方が速いのか http://kaomojich.com/aa/yaruo/
- 8. 8 ＿＿＿_ ／ ＼ ／ ⌒ ⌒ ＼ ／ （●） （●） ＼ | ?" ?)（__人__）" ） _＿＿＿＿＿＿＿＿＿_ ＼ ?｀ ⌒?:j? ,／ j?~~| | | | ＿＿／ ＼ |_＿| | | | | | / , ＼ｎ|| | | | | | / / r. （ こ） | | | | | | ⌒ ーnｎｎ |＼ (?? .|_|_＿＿＿＿_＿＿＿＿_| ￣ ＼＿_?("二）￣￣￣￣￣ｌ二二ｌ二二 ＿|_|＿_|＿ 何言ってんだこいつ ランダムアクセスの方が 速いわけないだろ http://kaomojich.com/aa/yaruo/
- 9. 9 ＿＿＿_ ／ ＼ ／ ─ ─＼ ／ （●） （●） ＼ | （__人__） | / ∩ノ ? ／ ( ＼ ／ ＿ノ | | .＼ “ ／＿＿| | ＼ ／＿＿＿ ／ sysbench バグってる? まさかそんなわけ，ね http://kaomojich.com/aa/yaruo/
- 15. バグっとるやん… ? 乱数取得がループの外 ? ループの中ではアクセスするアドレス変わらない ? ループの中では同じアドレスばかりアクセス ? シーケンシャルですらない ? そら速いわな… 15
- 16. ぎっぱぶ のリポジトリ見る ? 当時の master (v0.5)とは別に，v1.0 ってブランチがある ? そっち見たら直ってる ? なんでv1.0が master じゃないんじゃ!!??!?! 16
- 18. あ，はい 18
- 21. 21 sizeof (int) バイトアクセス memory_block_size 回ループ https://github.com/akopytov/sysbench/blob/c36861f5ad56b79ba 32056759bc5efb4a47c1296/sysbench/tests/memory/sb_memory.
- 22. 22 sizeof (int) バイトアクセス memory_block_size 回ループ memory_block_size * sizeof (int) byte アクセス! …だめじゃん https://github.com/akopytov/sysbench/blob/c36861f5ad56b79ba 32056759bc5efb4a47c1296/sysbench/tests/memory/sb_memory.
- 24. 直った(プルリク投げた) 24 https://github.com/akopytov/sysbench/commit/401c5a43aa40a0b89689747b278fae2adbc302db
- 25. 結果は? 25 ランダムアクセス: 71.1297s 修正後ランダムアクセス: 23.9801s シーケンシャルアクセス: 2.0295s まぁ，こんなものなのか…?
- 26. まとめ ? ベンチマークソフトを過信しない ? ベンチマークソフトの方がおかしいことだってある ? おかしいなって思ったらちゃんと調べよう ? 信じられるのはコードだけ ? 最新版の Sysbench では，話した問題は直っている ? Ubuntu とかのパッケージはもしかしたら古いかも ? sysbench –version で 0.4 とか 0.5 とか出たらアウト ? 自分でビルドしましょう 26
- 27. Q & A (おまけ:自己紹介掲載) ? 氏名: 深井 貴明 ? 所属: 筑波大学 ? Twitter: @deep_tkkn ? BitVisor であれこれしてる人 27