6/13　イベント登壇資料

1. 本書類の内容に関する一切の権利につきましては当社に帰属し、本書
類の全部または一部を当社の事前承諾なしに公表または第三者に開
示することはできませんので、貴社限りとしてお取扱いください。 11 July 2018Copyright © , ValueCommerce Co., Ltd.
一般
バリューコマース株式会社
執行役員 CTO
伊藤 信敬
KVS Tips

2. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-1-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
アジェンダ
• SimpleなKVSとのIO
• 複数データ処理をシーケンシャルに行った場合(KVS一台)
• 複数データ処理を高速に行う方法(redis)
• 複数KVSによるデータ分散のcase

3. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-2-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
SimpleなKVSとのIO
• Applicationがwrite(send) system callにより、sndbufに格納
• OSがsndbufのデータをrcvbufへ送信
• KVSがread(recv) systemcallでrcvbufからdata取得
• KVSが取得したdataより、処理を実行し、結果をwriteし、sndbufへ格納
• OSがsndbufに格納されたデータをrcvbufへ送信
• Applicationがread(recv) system callにより、rcvbufよりデータ取得

4. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-3-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数データ処理をシーケンシャルに行った場合(KVS一台)
• Applicationがwrite(send) system callにより、sndbufに格納
• OSがsndbufのデータをrcvbufへ送信
• KVSがread(recv) systemcallでrcvbufからdata取得
• KVSが取得したdataより、処理を実行し、結果をwriteし、sndbufへ格納
• OSがsndbufに格納されたデータをrcvbufへ送信
• Applicationがread(recv) system callにより、rcvbufよりデータ取得
✖️ 2

5. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-4-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数データ処理を高速に行う方法(redis)
• Redis handler
• Lua scripting
• Pipe line
複数のデータ処理を1IOで行う
複数の処理を非同期で行う

6. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-5-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
データ分散複数KVSのcase
• Redis handler
• Lua scripting
複数のデータ処理を1IOで行う
• Pipeline
複数の処理を非同期で行う

7. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-6-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数KVSでのPipelineの問題点(hiredisでの例)

8. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-7-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数KVSでのPipelineの問題点1
redisAppendCommandはclient libraryのbufferに格納されるだけで、
sndbufには格納されない。
sndbufに格納されるのは、最初のRedisGetReply時。

9. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-8-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
動きの違い
[期待]
[実際]

10. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-9-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数KVSでのPipelineの問題点1

11. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-10-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
複数KVSでのPipelineの問題点2
sndbufに入れた順番で、rcvbufに戻ってくるとは限らない。

12. 11 July 2018Copyright © , ValueCommerce Co., Ltd.
-11-
本書類の内容に関する一切の権利につきましては当社に帰属し、本書類の全部または一部
を当社の事前承諾なしに公表または第三者に開示することはできませんので、貴社限りとして
お取扱いください。
一般
まとめ
• 非同期処理はsndbufもしくは類似する役割のbufferに入れるところまで確認し
ないと実際そう動かない可能性がある
• 非同期処理では、どのInputに対してのOutputかわかるように設計しないといけ
ない(順番を信じることは基本できない)