社内スタートアップによる組織の成長に伴い発生する痛みとその解決策について45分拡大版...

社内スタートアップによる組織の成長に伴い発生する痛みと、その解決策について拡大版 20分→45分Recruit Holdings Recruit Institute of Technology Media Technology Lab Itsuki KURODA @i2key

Scrum&LEAN STARTUP導入

20-B-5

Recruit Holdings Recruit Institute of Technology Media Technology Lab 黒田　樹　(@i2key) <= Follow me :-) !

前職ではSIerで官公庁系大規模システムのアーキテクト。現在は、全世界でシリーズ累計1000万DLのアプリcameranシリーズの開発全体責任者（開発、採用、組織構築、プロセスetc）社内でリーンスタートアップやアジャイルの導入を推進しています。

http://mtl.recruit.co.jp

cameranというアプリにおける組織拡大に伴い発生した数々の問題とその対処方法につ

いての発表になります。

60% Agile Scrum

40% LEAN

STARTUP

いろいろな文脈によって制約になるものがちがう

書籍アジャイルサムライより引用

例えば

死守死守死守

コストと品質と仕様を満たせれば納期は遅れても多めにみるよ


死守死守死守

納期守るために若干品質は捨てよう！


ÃﾌßｧØｯ!!??

死守死守死守死守書籍アジャイルサムライより引用

嫌な予感しかしないwwwwww

死守死守死守死守書籍アジャイルサムライより引用

今回はtoC向けの社内スタートアップ（責任が自己完結可能）でありスコープで開発をコントロールし易い文脈

自由が効き易い死守死守死守


俺を使ってくれ！

第一部　ヒットからカオスへ突然の大ヒット。

全ての連鎖の始まりがここに。

第二部　師との出会い恩師との出会い。

そして我々は本当のスクラムを知る。

第三部　俺たちはリーンだ！様々な師達に教えを受け、リーンスタートアップを会得

そして、自分達のプロセスに昇華

第四部　リーンのその先にあったものエンジニアの新しい働き方

•･プロジェクト開始時の体制

• プロデューサー

• エンジニア（サーバ）

• エンジニア（iOS）※常駐外部パートナー

• デザイナー

• チームは、メンバー全員の打ち合わせで全ての課題が解決できる規模だった。

• ウォーターフォールではない、アジャイルのような何か。

大ヒット御礼!!!!広告・ブースト無しで、リリース3日で50万DL 10日で100万DL

※今回はヒット後の組織成長の話なので、そのヒットを作り込んだ過程は省きます

（結果的に後から振り返るとものすごく顧客開発してました）

突然の大ヒットにより、このままイケソウな兆しを感じた上層部は、更に追加投資することにした。 !

元々、地道に検証しながら進めて行こうとしていた画像SNS化計画をその資金でフルスロットル開発することが決定。※2ミリもリーンじゃない。

超特大開発の幕開け

開発規模大きいし、まずは・・・

エンジニア増加！！

今度はディレクターネック

ディレクター増加！！

5

今度はディレクタがアライアンスに手が回らない

アライアンス担当増加！！

デザイナもデザイナも！

エンジニアも、もっと！！

どうなるか・・・

ちょw体制wwwwwwwwwプロデューサー

デザイナ

エンジニア

Before

アライアンス

デザイナ

エンジニア

ディレクター

プロデューサー

Lead EngineerServer Engineer

iOS Engineer

Android Engineer

After

＼(^o^)／

何が起きるのか・・・??

・目標に対する成長スピードの鈍化・やるべきことに着手できていない焦り・日々発生する最優先タスクに振り回される現場。（「最優先」の中で最優先とか・・・。）・毎日行われる進捗会議というなの大検討会＆浪費される時間・伝言ゲームによるコミュニケーションコストの肥大化・プロデューサー - エンジニア間の発注者-受注者的関係性・プロデューサー - エンジニア間の関係性の悪化（ギスギスする）・技術的負債の山・日々詰み上がるバグの山を解決するだけで時間が過ぎていく。・現場まで降りてこない方針。価値観。文脈。現場判断出来ない。

コミュニケーション①

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team

プロデューサーディレクタープロデューサー team

①この仕様ってこれでいいのかな？

②ちょっと確認してみますね

③ここの仕様で質問きたのですが、こう回答していいすか？

④じゃ、それで。

⑤あざーす！ ⑥うお・・・wこれインパクトでけえ・・。サーバエンジニア以外にも影響でるな・・・。

⑦りょーかいです・・・

⑦りょーかいです・・・

伝言ゲーム

コミュニケーション②

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team


①この機能なるはやでいれよ！ ②ワイヤー作って

調整しますー③仕様理解しました。各エンジニアにディスパッチして工数の見積もりを依頼します。

④全部やったら1ヶ月くらいかかるね。（今やってるの全部手をとめたらね）

④うーん、2週間くらいかなぁ。（今やってる開発作業はどうなるんだろ・・・）

⑤現在着手中のもあると思うので、バッファ詰んで1.5ヶ月にしましょう。そう伝えます。

⑥1.5ヶ月ですね。了解です。

⑦了解です。この間依頼した機能はまだ出来上がらないのかな。

ボトルネック

コミュニケーション③

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team


①あそこの機能結構やっつけで作ったのでリファクタリングしてコード品質上げましょう。ついでにフレームワークのバージョンもあげましょうか。

②いいっすねー！やりましょー！1週間くらいあればできそうですね！

③技術的負債を解消するためのタスクがあることを知らない。

知らないとこでタスク作成

コミュニケーション④

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team


①競合が新機能いれた、やばい、これなるはやで！

②ワイヤー作って調整しますー

③仕様理解しました。各エンジニアにディスパッチして工数の見積もりを依頼します。

④前回依頼あった実装まだ全然おわってないのに・・・。見積もりコストかなりかかるし・・・。2週間くらいかな。

④1週間くらいかな。

⑤（リファクタリング対象と実装箇所が被るので、リファクタリングを実施してから、本タスクは着手しましょう。）実装には2週間くらいあれば。

⑥2週間ですね。了解です。

⑦了解です。この間依頼した機能はまだ出来上がらないのかな。

知らないとこで優先付け

コミュニケーション⑤

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team


①このバグやばい！なるはやでなおして！！！

②そんな重要なバグなのでしょうか？了解です。最優先で対処します。

③了解です！すぐになおします。暫定対処は、すぐだけど、本格対処は結構工数かかりそうだなー。

④今回は本格対処まで実施したいので、時間結構かかります。暫定版は明日リリースします。

⑥了解です。

どんなバグでも最優先対応

コミュニケーション⑥

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Engineer team


①まだ新機能がリリースされない。何やってんだ！！ ②そんなこといわれても、何

でもなるはやじゃないすか。

③こんなに毎日終電や徹夜してまで頑張ってるのに、なんで怒られなくてはならないのだろう・・・・

ギスギス・・・＼(^o^)／

今なら言える失敗• スケーラブルな組織設計でないのにスケールさせてしまった。管理能力の高いチームは自らチームの成長を抑制するか、その代わりに管理キャパシティをスケールさせる。

• バニティメトリクスに支配されていた。表面上のMAUを稼ぐのは人を増やしてパワーを掛ければ稼げる（ので、人を増やしてしまう）

• プロジェクト計画の方法論、サイクル、カレンダーが無い

• 仕事の優先順位決定のメカニズムが無い

• 明確に定められたバグトリアージとトラッキングが無い

• コミュニケーションチャネル設計が無い

少人数でならうまく行く「ウォーターフォールではない何か」を「アジャイルにやってます」と言ってプラクティスのつまみ食いしてただけ。

少人数ならどんなやり方だってそれっぽくうまくいくので勘違いしがち。







第四部　リーンのその先にあったものとてもシンプルな真意と

それを支える価値観に触れる

師USスタートアップの現場で使われている組織の成長にあわせたアジャイルを導入するためにメンターとして 500Startupsのメンター

でもあるJames Levine氏を師として招く

https://www.linkedin.com/in/jamesdlevine/ja

やりたいこと。これへの対処

チームを昔のように小さくする。みんなで顔を合わせれば

問題は大抵解決するような規模に。

エンジニアをとりまとめるようなエンジニアリーダーロールを廃止する。

全エンジニアが直接プロダクトオーナーとコミュニケーションするようにチームをフラット化する。

仕事の見える化タスクおよびそれの規模感の見える化により、優先付けやトレードオフが機能するようにする。

10

スクラムを一定のサイクルで仕事が行われるコンテナ

として採用し、それが機能してから

XP等の各種プラクティスをプラグインとしてあとから入れて行こうという方針で進めた。

!

今解決したいのは、ペアプロしたいわけじゃないし TDDしたいわけじゃない。何でも最優先を脱却し、

トレードオフをフェアに機能させること。10

「リーン開発の現場」より

スクラム

XP

10

iOSエンジニアからScrumチーム化

Lead Engineer

Server Engineer

iOS Engineer

Android Engineer

Server Engineer

Android Engineer

iOS Scrum team

Lead Engineer

兼務

旧Engineer team

旧Engineer team

Scrum Master

プロデューサーディレクター

PO teamProduct Owner

Sub PO

旧プロデューサー team

iOS team Product Backlog

Lead Engineerが1st Sprintのスクラムマスターに。

10

スクラム始めるアルアル

• 見積もりを相対値でやらないといけない

• プランニングポーカーしないといけない

• インセプションデッキつくらないといけない

• ベロシティを計測しないといけない

• タスクはユーザーストーリーでかかないといけない

• みんな自己組織化しないといけない

11

んなこたぁーない！開発のコンテキストにより、

価値観や必要なプラクティスは変わるし、型にはめたって意味ない。

最初こんなのどれもやらなかった。

11

今回のケースで大事なこと

タスクの優先順位付けサービスをグロースさせるために、リソースが適した優先順位で

優先すべき箇所に使われている状態を作ること

11

優先順位付けするために必要なもの・優先順位付けを行うための判断材料があること　そのために、見える化が必要　　エンジニアの時間を使っていること全て見える化　　　休み、会議、定常業務、バグ改修、開発タスク、　　　「ちょっといいですかこれってどうなってますっけ」　　　による損失の見える化　　その見積もり　　　理想日見積もり。相対値はチーム練度上がったら。　　　8時間＝1日＝1pt !

・優先順位付けするサイクル・リズムが必要　プランニング、デイリー、レビュー、レトロスペクティブ

11

http://www.acunote.com12

スプリントバックログの内訳例

[開発] ○○実装タスク 2pt 　　　○○実装タスク 1pt 　　　○○実装タスク 1pt 　　　○○実装タスク 1pt [バグ] 既知バグ対応タイムボックス 1pt 　　　今後発生するバグ対応タイムボックス 1pt [MTG]プランニングミーティング 0.5pt 　　　デイリースクラム 0.5pt 　　　レビュー/リリースミーティング 0.5pt 　　　レトロスペクティブ 0.5pt [休暇] 2/20デブサミ参加 1pt

1sprint = 2weeksの場合　営業日は10日→上限10pt エンジニア1名分 ※4人チームならこれをx4

12

開発タスク管理全てのタスクは理想日にて見積もり。 1スプリントの稼働日の合計を出し、それに合わせてスプリントバックログにタスクを入れていく。 !相対値見積もりは実施していない。

12

以下の2つにわけて固定のタイムボックス化しバグ対応コストを管理。・将来発生する作業の予約・既知のバグ修正バグ対応タイムボックス内で優先順位順にバグを改修していく。 !開発タスクとバグ対応タスクに割く、時間の割合はプロダクトオーナーが状況に応じてバランスをとる

バグ対応コスト管理

12

ミーティングコスト管理全てのミーティングをコスト管理。 !何時間もかけたミーティングを行うと、このスプリントで作ることが出来る機能が減ることを意識させる。 !振り返りにて、ミーティングを減らす方向にバイアスがかかる。

13

休暇予定管理全ての見積もりが稼働日換算なので、有給をとる日は、コストとして扱う。

13

このやり方をサーバチーム、Androidチームへ、スケール

13

サーバーエンジニアをScrumチーム化

Server Engineer

Android EngineerLead Engineer

兼務

Scrum MasterServer Scrum team

旧Engineer team

iOS Scrum teamScrum Master


Sub PO


Server team Product Backlog

スクラムマスター交代

Lead Engineerが1st Sprintのスクラムマスターになり、スクラムウェイを伝達していく。

13

AndroidエンジニアをScrumチーム化

Android Engineer


Android Scrum team



Sub PO



Scrum Master

Android team Product Backlog



Scrumチーム間の連携のためScrum of Scrums


Android Scrum team



Sub PO



Android team Product Backlog

Scrum Master

Scrum of

Scrums




15

今回の取り組みのようなスケールさせていくアジャイルな組織作りで参考にした文献・記事の一部

http://www.continuousagile.com/unblock/ea_matrix.htmlMatrix of Services ( MAXOS )

http://www.continuousagile.com/unblock/ea_matrix.html


http://www.scaledagileframework.comScaled Agile Framework ( SAFe )

http://www.scaledagileframework.com


Scaling Agile @ Spotifyhttps://dl.dropboxusercontent.com/u/1018963/Articles/SpotifyScaling.pdf

https://dl.dropboxusercontent.com/u/1018963/Articles/SpotifyScaling.pdf

バグが出るたびに最優先タスクになる状況からの脱却なんだか毎日バグなおしてるだけでおわる状況の脱却バグの優先順位を決めるメカニズムを作る

バグマネージメント

16

スプリントバックログの内訳例

[開発] ○○実装タスク 2pt 　　　○○実装タスク 1pt 　　　○○実装タスク 1pt 　　　○○実装タスク 1pt [バグ] 既知バグ対応タイムボックス 1pt 　　　今後発生するバグ対応タイムボックス 1pt [MTG]プランニングミーティング 0.5pt 　　　デイリースクラム 0.5pt 　　　レビュー/リリースミーティング 0.5pt 　　　レトロスペクティブ 0.5pt [休暇] 2/20デブサミ参加 1pt

1sprint = 2weeksの場合　営業日は10日→上限10pt エンジニア1名分 ※4人チームならこれをx4

ここのタイムボックスで対応するために、優先順位を決める

16

Server 例外ログ

問い合わせ管理システム

クラッシュログ監視システム

ユーザー

メンバー

バグトラッキングシステム

バグトリアージMMTTGG

バグマネージメントMMTTGG

iOS EngineerAndroid EngineerServer EngineerDaily

Weekly

iOS EngineerAndroid EngineerServer Engineer

Product Owner

Tester

一次切り分け

バグトリアージMTG■参加者 iOSエンジニア、Androidエンジニア、サーバエンジニア各1名 !

■内容災害医療での1次切り分け。クリティカルかどうかだけの切り分けを毎日15分くらいで実施。切り分けが目的であり、調査・改修は行わない。切り分けのために調査時間が必要になるのであればSprintのポイントに工数として発生タイミングで計上。クリティカルの場合は、ProductOwner相談の上、即時対応

16

バグマネージメントMTG■参加者ProductOwner、テスター、iOS、Android、サーバ各1名 ■アジェンダ ●前回のこのミーティング以降に発生したクリティカルバグ対応について・振り返り・不具合の分析・歯止め（試験観点追加）・プロセスの改善（1次切り分けロジック、対応フロー等） ●優先度の高いYouTrack上のバグの確認・内容の確認 ●その他バグの優先度の見直し ●必要に応じてバグマネジメントプロセスの改善 17

Quality + Cost + Delivery + Scope のバランシングデリバリーの認識を変える

リリースマネージメント

デリバリーは決まった日に勝手にやってくるのだ

それにのるかのらないかお前次第

17

Sprint #2Sprint #1 Sprint #3

○○機能○○機能

○○機能バグ修正

バグ修正バグ修正

3月1日（固定） 3月7日（固定） 3月14日（固定）

固定リリースタイミング



例：リリースタイミングは1週間毎にやってくる。そのときリリースしたいものがあればリリース対象に入れる。

17

リリースカレンダー

そんな悠長なこと言ってらんないんだって！某社とアライアンスを組んでしまって、急遽、明後日までにリリースしてもらわないと困るんだよ！

ではリリース日を優先でク○コードで

リリースしまっせ！その代わりにリリース後に技術的負債改修期間が必須です。

http://doda.jp/engineer/it/guide/001/19b.html参考：「技術的負債」の返済ルールを作る　株式会社ドワンゴ清水氏

Product Owner

Engineer書籍アジャイルサムライより引用


17

Sprint #2Sprint #1 Sprint #3

○○機能

3月1日（固定） 3月7日（固定） 3月14日（固定）




リリース日優先タスクはこう対応するとみんな幸せになれる

技術的負債解消タスク

本来はこのくらいかかる予定だった

なるはやリリース

ク○コード脱ク○コード

18

プロダクトオーナー負荷分散ある程度、サービス規模が大きくなってくるとプロダクトオーナーがプロダクト自身に向き合う時間が取り難くなってくる。 →ステークホルダーマネージメントの増大 →各種調整業務（期待値、目標、コミット、etc）プランニング等に出席できないことが増える。開発チームがプロダクトオーナーに話しかけることが出来なくなってしまう。

18

プロダクトオーナータスク責任・権限作業を遂行する

プロダクトマネージメント

セールス

資金調達

アライアンス

：採用

プロダクトオーナータスク

Product Owner

ただの作業者

18

こうやりがち責任・権限作業を遂行する


セールス

資金調達

アライアンス

：採用


Product Owner

ただの作業者

お伺い

18

増えるとこうなる（スケーラブルじゃない）

責任・権限作業を遂行する


セールス

資金調達

アライアンス

：採用


Product Owner

お伺い

ボトルネック 19

プロダクトオーナープロキシ責任・権限作業を遂行する


セールス

資金調達

アライアンス

：採用


Product Owner Proxy

Product Owner

19

プロダクトオーナープロキシ特定の状況でプロダクトオーナーの代理になれる人

プロダクトオーナーの代わりに、開発チームとのプロダクトバックログに関するやりとりを支援。プロキシは意思決定の権限（バックログの優先順位決定、仕様決定等）が与えられ、正当な理由なくその決定は覆さない。プロダクト全体の最終的な責任自体は、プロダクトオーナーが持っている。

書籍アジャイルサムライより引用 19

これらの結果：得たものProduct Owner目線・働き方のリズムが出来る・エンジニアの状況がみえる・自分のオーダーの規模感が知れる・大体いつ何がリリースできそうかわかる・意思決定する際の材料が増えた !

Engineer目線・タスクがどんどん詰め込まれることが無くなった・なんでも最優先がなくなった・スカンクワークではなく技術的負債対策に臨める・トレードオフによりQCD調整がききやすくなる 19

これらの結果：失ったものアジャイルは時に残酷・Scrumにより個人の生産性も可視化される　進捗が思わしくない場合にも、日々のデイリーMTGにて　消化ポイントが0のままであることを報告し続けることに。　（問題の可視化だから良いのだけど）・生産性をチーム単位で見るべきだが、メンバとしては、　個人単位でも見えてしまい、生産性が低い場合は、　居づらさ・気まずさが発生する。　本来この可視化の効果により得られるメリットは大きいが　可視化しすぎる状況について来れないエンジニアも出てくる・能動的に動かなければならなく、他責に出来ない。・みんながこの働き方を好きなわけではない。 19

• スクラムを入れたから解決するのではなくて、見える化が進むので結果的にアクションを打てるタイミングがはやくなり、問題を小さい段階で早期解決出来る。

• プロジェクトや開発の文脈により、解決すべき問題が違うため本に書いてある通りのことをそのまま全部やろうしてもうまくいかない。プラクティス厨になるだけ。

• 価値観も大きく変わる。限られたリソースをどう有効に使うか。これが全てになる。その目線がそろった状態から、各種プラクティスの導入を行うことが大事。

• メンバーを信頼することが大前提。

学び

19

信頼が大事・信頼出来るメンバーを集めること・信頼してもらうためにパフォーマンスを出すこと

それがないと、権限委譲も、トレードオフもなんも成立しない。プロダクトオーナープロキシーとかもってのほか。見積もり＝コミットになっちまう。アジャイルも、根底から崩れる。

幼稚園みたいなこというけど

20

信頼が無いチーム「見積もりはコミットじゃなくただの予測だ」だと？こんなやり方してたら、エンジニアがサボってたらリリースどんどん遅れてく一方じゃないか。

なんで信頼出来ない人をメンバにいれてるの？今のメンバでやる必然性はなに？我々にそんなお金ないよね？


信頼出来る奴をチームに入�れることがアーリーステージに最も大事なこと！！ 20

現在では• スクラムマスターは持ち回りの当番制

• 全員がスクラムマスターを出来るようになっているため、各自が自走出来る状態になっている。

• 結果的に、スクラムマスター専業の稼働は減る。

• 自己組織化が進む。

• 振り返りから、プルリク駆動開発の実施やSlack+hubotによるChatOpsも実施。良くあるプランニングポーカー等各種プラクティスも後から導入。（良くある最近の開発手法）

20

大きな変化「エンジニアさん！数値確認したいので、 ○○のデータとってください！」

↓ 非エンジニアのプロダクトオーナーが

副問い合わせとか駆使して自らSQLを叩いて数値確認をしている

（こういうのを見ると自動化してあげたくなる）

20

ひとときの平穏

しかし・・・

元々の課題だった成長スピードの鈍化が改善されない・・・

そもそも・・・今やっているタスクは本当に成長に寄与するものなのか








22

新たな問題プロダクトバックログに起票されるタスクが本当にやるべきことなのか。やるべき理由はあるのか。 !

もっと効率よく出来ないのか !

そのタスク（機能）をリリースしたあとの効果はタスク（機能）毎にわかるのか。結果から学びを得ているのか。 !

やっていることはサービスの成長に直結しているのか。

22

新たな問題プロダクトバックログに起票されるタスクが本当にやるべきことなのか。やるべき理由はあるのか。 !

もっと効率よく出来ないのか !

そのタスク（機能）をリリースしたあとの効果はタスク（機能）毎にわかるのか。結果から学びを得ているのか。 !

やっていることはサービスの成長に直結しているのか。

この要件ってエンジニアの有限な時間使ってまでやる意味あんの？

この要件ってビジネス目標に寄与すんの？何なの？自己満なの？

22

LEAN STARTUPという考え方があるらしい

LEAN STARTUPという考え方があるらしい

22

「全ては仮説・思い込み」という見地にたつ。

その仮説を細かく分解して、一つ一つ検証し実証することで不確実性の高いビジネスのリスクを潰していく考え方。

23

明日から使えるリーンフレーズ

「プロダクトバックログのこの機能の実装が必要であるエビデンスはありますか？」

23

「お前の中ではそうなんだろうなお前の中ではな」

明日から使えるリーンフレーズ

23

スタートアップマニュアルアントレプレナーの教科書リーンスタートアップ顧客開発モデルのトリセツ RUNNING LEAN LEAN UX LEAN Analytics リーン開発の現場　　　：　　　：　　　：

先人の知恵に触れる

可能な限り1次ソースの師達に教えをこう

http://mtl.recruit.co.jp

25

500Startupsメンター James氏

（LeanStartup）

Pivotal Labs Janice氏（Lean UX)

Hooked著者 Nir氏 (UX)

Lean Analytics著者 Alistair氏

(Lean Analytics)

IDEO @SFオフィスデザインシンキングワークショップ

（デザインシンキング)

全ての意思決定において無駄の無い判断をしていること・思い込みを排除し全てを仮説と捉える・コストに対する学びを最大化する・失敗による損失を最小化する　≠ 成功を保証するプロセス !

そのために、効率的(例:小さく/短く/安く)に仮説を検証して学びを得る（ことが多い）

真意

25

全ての意思決定において無駄の無い判断をしていること・思い込みを排除し全てを仮説と捉える・コストに対する学びを最大化する・失敗による損失を最小化する　≠ 成功を保証するプロセス !

そのために、効率的(例:小さく/短く/安く)に仮説を検証して学びを得る（ことが多い）

真意

当時は真意を2ミリも理解できていないけど・・・

浅い理解

ファイル同期がいかに便利か、どのように動作するのかのプロモーション動画を作成し、Youtubeにアップロード。HackerNewsに流して、事前登録者数をモニタリングでニーズを実証。

開発リソース使うまえに仮説を小さく実証する例

26

サンフランシスコにある自分のオフィスのMTGルームを人が泊まれるようにして、Googleに広告を出して、人が応募してきて、お金を払って、泊まるのかを検証。

開発リソース使うまえに仮説を小さく実証する例

26

例）写真加工アプリにフィルタ購入機能を作ろう！！やりたいことの実装工数は3人月くらいかかりそうです。 !

あなたがこのプロダクトのオーナーならどうしますか？ !

①フィルタ購入機能を3人月かけて実装する　（一切購入されないリスクそのまま） ②フィルタ購入するボタン（ダミー）を用意して、全体のユーザーの10%に表示して確認し、本当に購入ボタンが押された回数を測定してから開発着手の判断をする。工数は2人日。（本当に購入されるのかのみを検証）②のほうが無駄の無い判断してるぽい

機能追加ではこんな感じ

26

100円で購入

100円で購入

現在開発中です！近日リリース予定です！

＜ポップアップ＞

ユーザー全体の10%にだけ表示されるボタン

顧客開発モデルに則って現状の理解をする。ビジネス仮説を全てLeanCanvasに書き出す。既に実証済みのことと、そうでないこを明らかにする

顧客セグメントを明らかにする市場タイプを選ぶ顧客との関係キーパートナー売上/プライシング顧客理解トラフィック/競合分析顧客の行動測定アドバイザリーボードメンバーの選定開始　　　：　　　：

顧客開発でやるべきこと Lean Canvas

27

LEAN CANVAS

顧客は誰？課題は何？解決策は？

価値は何？圧倒的優位性は何？

コスト構造は？売り上げは？

顧客にリーチするためのチャネルは何を測る？

27

LEAN CANVAS

顧客は誰？課題は何？解決策は？

価値は何？圧倒的優位性は何？

コスト構造は？売り上げは？

顧客にリーチするためのチャネルは何を測る？

27

① ①③④

顧客発見顧客実証顧客開拓組織構築

Problem Solution Fit

Product Market Fit

Pivot

Scaling

Agile

実証済み実証済み実証済み実証済み

実証済み

実証済み実証済み実証済み

実証済み実証済み



今自分達がスタートアップのどのフェーズにいるかを認識する

27



Product Market Fit

Pivot

Scaling

Agile

実証済み実証済み実証済み実証済み

実証済み

実証済み実証済み実証済み




27

　　Agile



Product Market Fit

Pivot

ユーザーの深い課題/ニーズを把握し解決策を提示しそれが刺さっている

ビジネスモデルの成立することが実証できている

（Engine of Growthが装着できている）例）CAC < LTV

Scaling

例）Retentionしている MAU右上がり

28

　　Agile



Product Market Fit

Pivot

ユーザーの深い課題/ニーズを把握し解決策を提示しそれが刺さっている

ビジネスモデルの成立することが実証できている

（Engine of Growthが装着できている）例）CAC < LTV

Scaling

例）Retentionしている MAU右上がり

←いまココ（※当時）

28

まだ実証出来ていない仮説に対してリスクの高い順に優先順位をつけて実証していく

実証済

実証済

実証済

実証済

28

じゃあ、どうやって仮説を検証するの？？？

MVPってのがあってなバックリした例としては、さっきの

DropBoxの動画 AirBnBのオフィス

写真アプリのダミー購入ボタン



28

MVPとはMinimum Viable Product（検証可能な最小限の製品）。 Productと言ってるけど製品じゃなくてよい。目的である仮説を検証できればよいので、それができるものならなんでもMVPと言ってよい（と思う）

Build->Measure->Learn

MVP

ビジネスアイデアを仮説として捉えて検証するためのプロセス。仮説検証のためのMVPをBuildしてそれを元にMeasureし、その結果得られたデータからLearnする。

29

MVPで検証するMVPで検証する


MVPで検証する


MVPで検証する

MVPで検証する

MVPで検証する

こういう場合もあるし

29

1つのMVPで全ての仮説を検証する

こういう場合もある

29

型を学ぶ

アジャイル開発 Scrum

コホート分析/ファネル分析/ A/Bテスト基盤

MVP Canvas 仮説検証設計

我々の仮説検証サイクルの型

30




済


実装した機能（MVP）毎に効果を検証する

コホートAにリリース結果数値をウォッチ

コホートBにリリース結果数値をウォッチ

コホートCにリリース結果数値をウォッチ

やったことの単位に結果を見ること

全部同時にリリースした場合、合計値でユーザー数などを見ていても何が寄与したのかが見えない。

https://www.leanplum.com

A/BテストプラットフォームとしてLeanplumを採用

計測例•仮説 • SNS型サービスだが、ユーザのサインアップ率が悪い。現在他人の投稿はクローズドでサインアップしたユーザーにしか見えない。サインアップしてないユーザにも見えるようにすることでSNSのUXを事前体験・学習させるとアカウント登録率があがるのはないか。

•MVP • サインアップ不要で他人の投稿を閲覧出来る機能を実装しユーザ数%対象に公開して計測。

•学びたいこと • サインアップ率の上昇。及び、既存機能への悪影響度。

実装した機能毎にコホートxA/Bテストを行い、様々なトレードオフを意識して判断する。

http://www.localytics.jp

全体の指標モニタリングのために Localytics採用（GAの代わり）

リリース後はコホートで対象バージョンのリテンション等を計測。この画面は7日間継続率。

※サンプルデータです！

ver1から参加したユーザー



フォロワー数▲人のユーザー

フォロワー数■人のユーザー

フォロワー数●人のユーザー

このように縦に見ないほうがよい場合がある

コホート分析の例・Version○○から使い始めた人の継続率・○○機能をβ公開しているユーザーの継続率・○○に「いいね」した人の継続率・○○した人の継続率・フォロワー○○人の人の継続率・○○をフォローしている人の継続率 !

何で測るか Localytics最高。 MixPanelやLeanPlumもよい。コホートを作って、そこに向けてプッシュが打てるものもある。




我々のLeanStartupの型

リーンスタートアップとは科学的アプローチというけれど、その場合、実験の計画の思考プロセスは逆。

こうじゃなく実際の思考プロセスはこう考えて計画する

①仮説

②何を学ぶのか

③必要なデータは？

④どうやって計測する？

⑤必要なものは？

⑥どう構築するか？

思考プロセス

①仮説

②何を学ぶのか

③必要なデータは？

④どうやって計測する？

⑤必要なものは？

⑥どう構築するか？ (MVP案1)A/Bテスト (MVP案2)ティザーページ (MVP案3)ユーザインタビュー

思考プロセス

⑥どう構築するか？ (MVP案1)A/Bテスト (MVP案2)ティザーページ (MVP案3)ユーザインタビューもっとも効果的に学びが得られるMVPはどれか選択する・費用対効果・期間・工数・この検証方法により回避できる将来のリスク・この検証方法により逆に発生する将来のリスク

思考プロセス

⑫仮説を調整する

⑪学ぶ

⑩データを元に検証

⑨計測する

⑧完成したMVP

⑦構築する (MVP)A/Bテスト

実証プロセス

http://www.slideshare.net/aerodynamic/mvp-canvas

この一連の思考プロセス・実証プロセスを髙橋さんとフォーマット化！

http://www.slideshare.net/aerodynamic/mvp-canvas

仮説何を学ぶのか

仮説実証に必要なデータ条件

MVP構築に必要なコスト

仮説実証に必要な時間

回避/発生する将来のリスク

結果と、得た学び

MVPのタイプ・紙プロト・インタビュー・A/Bテスト・動くデモ etc

何を作るのかどうやってそのMVPで実証するのか

35

LeanCanvas - MVPCanvas - Scrum

型の整理

35

Lean Canvas ＜ビジネス仮説＞

MVP Canvas ＜仮説検証MVPの設計＞

Product Backlog ＜MVP構築タスク＞

Out of Building!!!

MVPがインタビューの場合

MVPがエンジニア稼働必要な場合

改善タスク・改善目的A/Bテスト・計測装置導入メンテナンスタスク・技術的負債解消・OSバージョンアップ対応・バグ対応アライアンスタスク

直接仮説検証には関係ないけどサービス維持に必要なタスク 35




顧客発見

顧客実証

顧客開拓

組織構築


Product Market Fit

Pivot

35








35

この型をひたすら回すと・・・・

36

プロダクトバックログが最小化されていく＝やらないことが最大化されていく

エンジニアの働き方（活躍出来る場所）に一部変化が出てくる＝エンジニアが成長のエンジンになる

36

LeanStartup以前の Product Backlog

LeanStartup以後の Product Backlog

・○○検証用モック作成・○○検証用ダミーボタン実装・検証済み○○機能本実装・検証済み○○機能本実装・リファラル向上改善・登録ファネル改善・計測基盤実装・コホートに対するプッシュ実装

・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装・○○機能実装 36

Product Backlog ＜開発タスク＞

10個ひらめいた！

Product Owner

10個のエンジニアタスク

LeanStartup以前

37




10個の仮説 3個のMVP構築（エンジニアタスク）10個のMVP設計

7個のOutOfBuilding （プロダクトオーナータスク）

LeanStartup以後

37

新規機能追加コスト　＞　仮説検証コスト

新規機能追加コスト　＜　仮説検証コスト

37

プロダクトバックログが最小化されていく＝やらないことが最大化されていく＝エンジニアの開発タスクが減る＝エンジニア体制の縮小（最適化）　or 技術的負債解消に当てる時間　or エンジニアドリブンで改善する時間　　

37

プロダクトバックログが最小化されていく＝やらないことが最大化されていく

エンジニアの働き方（活躍出来る場所）に一部変化が出てくる＝エンジニアが成長のエンジンになる

38

Lean Engineer 価値：仮説検証サイクルの速度を上げることコミット：サービスの成長生産性：仮説検証できた回数/時間

Not Lean Engineer 価値：開発をやりきることコミット：開発の完遂生産性：Step/時間

エンジニアの働き方

＝成長のエンジン

成長のエンジンたるエンジニア本質的なサービスの成長に寄与するエンジニア　→よりハイレイヤーなKPIにコミットする !

　　例えば【継続率】【チャーンレート改善】など !

　　その数値を改善するために、自身で仮説をたて、　　MVPで検証を行う。全てを自身で行えるため、　　高いスピード感でKPIを向上させることが出来る。

数値にコミット出来るため、権限と成果責任がエンジニアに発生する。成果責任があるからこそ、

実行することを実行する人が決めることが出来る！

あと数日で退会しそうなユーザーを退会させないあと数日で退会してしまいそうなユーザーの母集団に対して、コホートをきり、そこに対してアクションをするような仕組みを実装し再びサービスの価値を感じるようにしてもらい退会率を下げる。

退会率減少にコミットしたエンジニアが自ら仮説をたて実装して検証していく

例えば・・

Engine of

Growth!!

ご清聴ありがとうございました！

40

社内スタートアップによる組織の成長に伴い発生する痛みとその解決策について45分拡大版...

Technology

Transcript of 社内スタートアップによる組織の成長に伴い発生する痛みとその解決策について45分拡大版...