by shigemk2

当面は技術的なことしか書かない

2017-06-07から1日間の記事一覧

QA #cookpad_tech_kitchen

hakoはOSS化している dockerよりもデプロイ管理しやすくするために 開発者がちゃんと責任を持つように BBQ コンテナがつまったとき 容易に解決可能 本体ジョブはどうしてる docker化していない 本体はBBQからkuroko2へ命令を投げられる kuroko2 コマンド一発…

美しいバッチの壊し方 #cookpad_tech_kitchen

青木峰郎 情報系(DWH)のSQLバッチ 大量のデータをひたすら集計(一個一個はそんなに重くない) ジョブ数が多くてフローが複雑 1000ジョブ DWH 13000くらいが多いけど、1000は少ない kuroko2 + bricolage http://techlife.cookpad.com/entry/2015/06/27/154407 …

memo クックパッドのバッチまわりの概況とKuroko2の近況 #cookpad_tech_kitchen

https://speakerdeck.com/takai/the-design-philosophy-of-kuroko2 kuroko2運用 複数サービス感の整合性の取り組みについて agenda kuroko2の近況 バッチ周りの概況 構成 運用 デプロイ kuroko2の近況 ジョブスケジューラー/ワークフローエンジン アーキ con…

memo 非同期ジョブと仲良くする #cookpad_tech_kitchen

sidekiq web マスター ワーカー コード(共有ファイルシステム) https://github.com/mperham/sidekiq docker アプリ キュー/ワーカー docker増やせばはこいつらは増やせる 増やせば増やすほどredis clusterの面倒をみないといけない ワーカーとマスターの数は…