odasatoshi’s gists

odasatoshi / classifier_client.py

Created March 26, 2012 01:34

correct python client


	import classifier_types
	import msgpackrpc

	class classifier:
	def __init__ (self, host, port):
	address = msgpackrpc.Address(host, port)
	self.client = msgpackrpc.Client(address)

	def set_config (self, arg0, arg1):

odasatoshi / gist:3695467

Created September 11, 2012 02:22

分散環境におけるjubatusの設定情報の与え方とモデルについて

	【やりたいこと】
	- 分散環境で、同じnameを持つサーバは同じconfigを持つ。
	- サーバは途中から参加することがある。
	- クライアントからconfigを変えることが出来る。

	【configの与え方をどうするか？】
	- RPCで与える
	- 設定を変える場合は、set_config
	- 途中から参加する場合もset_config
	- すべての設定が同じ事は、ユーザの責任にする。

odasatoshi / gist:3712571

Created September 13, 2012 07:25 — forked from suma/gist:3696007

分散環境におけるjubatusの設定情報の与え方とモデルについて

	【configを動的に再変更できたほうがいいか否か】
	- できたほうがいい
	- メリット
	- 設定変更の自由度があがる
	- 設定調整、実験、評価がやりやすくなる
	- プロセス再起動なしで状態を初期化できる
	- デメリット
	- 同一インスタンスのサーバで設定の一貫性を保証、もしくは一貫性がないことに対処できる仕組みが必要になる
	- それに伴い、正常なサービスを提供できなくなる可能性がある例：サーバが停止する、サーバが誤った結果を返す
	- 以下の【課題】の部分に相当

odasatoshi / gist:3780257

Created September 25, 2012 06:12 — forked from unnonouno/gist:3780251

設定をどういう形式で与えるのが良いか

検討事項

案1: JSON

odasatoshi / gist:3780438

Created September 25, 2012 07:21 — forked from suma/gist:3780347

Jubatus ZK Session expired時にどう振る舞うと良いか

	【Jubatus ZKとの接続でSESSION_EXPIREDしたときどうするか問題】
	- ZKを利用しているOSSの実装
	- EXPIREしたらexit（自殺）する
	- EXPIREしてもZKと繋がるまで再接続し続ける
	- 無限ループ・回数制限を設ける
	- 接続が切れている間は、ZK関連のサービスを提供できない（キャッシュ保持してるかもしれない。もしくは、キャッシュはクリアする実装）

	- Jubatusにおける選択肢
	- EXPIREしたらプロセスを終了する
	- EXPIREしてもZKへ接続リトライする（リトライし続ける、回数制限等つけてリトライする）

odasatoshi / gist:3793055

Created September 27, 2012 09:15

jubatusにおけるLOGレベルガイドライン(素案)

	1. 利用するライブラリ

	http://code.google.com/p/google-glog/
	google-glog を利用する。

	2. ログレベル

	Jubatusは通常モードとデバッグモードのログレベルが存在する。
	通常モードでのJubatusで利用するログレベルは、以下の三種類とする。

odasatoshi / baseball_sim.txt

Created November 6, 2012 06:26

	user 長野久義 is similar to : 長野久義糸井嘉男ミレッジ
	user 大島洋平 is similar to : 大島洋平本多雄一石川雄洋
	user 鳥谷敬 is similar to : 鳥谷敬サブロー糸井嘉男
	user 坂本勇人 is similar to : 坂本勇人角中勝也稲葉篤紀
	user 中田翔 is similar to : 中田翔井口資仁新井貴浩
	user 李大浩 is similar to : 李大浩中村紀洋ミレッジ
	user 陽岱鋼 is similar to : 陽岱鋼秋山翔吾枡田慎太郎
	user 糸井嘉男 is similar to : 糸井嘉男長野久義栗山巧
	user 聖澤諒 is similar to : 聖澤諒明石健志ヘルマン
	user 田中浩康 is similar to : 田中浩康栗山巧梵英心

odasatoshi / gist:4043213

Created November 9, 2012 01:50

Jubatus ログ出力仕様（素案）

odasatoshi / gist:4991296

Last active December 13, 2015 23:19

Jubatus管理系コマンドまとめ

odasatoshi / gist:5011138

Last active December 14, 2015 02:08

Jubatusでglog 0.3.3にする必要はあるか？

	glog 0.3.2 -> 0.3.3
	====================

	- Add --disable-rtti option for configure.
	実行時型情報を消すことでバイナリサイズ小さくなったり、パフォーマンスが上がる？環境もあるらしい。

	- Visual Studio build and test fix.
	Windows用。関係ない

	- QNX build fix (thanks vanuan).