A/Bテストを使って子供をハックした方法

by ParentCo. 3月02 、2017

トリコットの帽子をかぶった新生児双子

"どうしたらもっと寝てくれるかな?"

妻が口にした、質問ですらないこの単純な思いは、私にとって挑戦となった。私のエンジニアとしての頭脳は、これを解決すべき問題としてとらえ、ソフトウェア開発者は問題を発見するとテストを考案する。幸運なことに、私はいくつかのアイデアを管理された測定可能な環境でテストするための完璧なシステムを知っていた。双子がいれば、テストはさらに簡単になる。A/Bテストスタイルの子育てへようこそ。

A/Bテストはウェブのいたるところで使われている。気づかないうちに、1日に何十回、何百回とテストしていることでしょう。アイデアのパフォーマンスをテストし、それを測定するツールとして使っているのだ。

グーグルは、検索結果に41色の青をテストしたことで有名だ。デザイナーたちは、2つの色合いのうちどちらを使うべきか決めかねていたため、合計41の色合いをテストし、どちらがより多くのユーザーに検索結果をクリックしてもらえるかを確かめたと言われている。

フェイスブックは、フィード内のさまざまな体験を絶えずテストしている。アマゾンも、購入ボタンやカートのレイアウトを頻繁に変更している。新しいコンピューターからログインしたり、友人が自分のサイトとは微妙に異なるサイトを使っているのを見たりすると、こうしたことに気づくかもしれない。

A/Bテストは、「コントロール」または既存のエクスペリエンスに対して、1つまたは複数の「トリートメント」または実験をテストするために使用されます。通常、クリックスルーや「コンバージョン」のようなユーザーアクションに基づいて、コントロールに対する基準値で測定されます。

グーグルの例では、ユーザーが異なる色合いで少なくとも1つの結果をクリックする可能性をテストするかもしれない。統計的に有意な期間(多くの場合1~2週間)の後、どちらの体験がより良い割合を示したかを勝者として選択し、新しいコントロールとする。

これが本当に複雑になるのは、複数の実験を同時に行ったり、ユーザーの割合が均等でない場合である。この場合、統計学の複雑な知識が必要になる。あるいは、数多くある強力なテストツールのどれかを使うことも必要だ。AudibleとAmazonでは、このような体験を常にテストしている。これは、ユーザーが実際にどのような行動をとるかを確認する最良の方法であり、多くの場合、ユーザーがすると言ったことと、実際にしたことが微妙に異なることがあるからだ。

AudibleとAmazonでは、このような体験を常にテストしています。ユーザーが実際にどのように行動するかを確認する最善の方法であり、多くの場合、ユーザーがすると言ったことと、実際にすることは微妙に異なることがあるからです。

チャート結果
生後10週間の子どもたち、特に双子の子どもたちを持つ人なら誰でも知っているように、この家で最も重要な指標である睡眠時間を増やすことができるかどうかを確かめるために、私はこのテスト方法を男の子たちに使うことにした。男の子の一方を対照とし、もう一方を治療とした。「対照」や「治療」という言葉で今の私たちの生活のどこかを表現する人はいないという事実は気にしないでほしい。

どのような実験においても、正確な測定とデータの追跡は非常に重要である。多くの場合、成功指標はデータの入手可能性や測定可能性によって選ばれる。テストやテスト入力を変更するよりも測定に時間がかかるようなものを測定しようとしてはならない。幸運なことに、睡眠を測定するのはこれほど簡単なことはない。

夜中に目が覚めたら、それを書き留めるだけです。これはまさに、病院の看護師が教えてくれたとおり、2人が生まれた日からずっと続けていることだ。ノートはもう何冊も作ったが、記録するのはとても簡単だ。このため、より視覚的に影響を見るために、データをスプレッドシートにインポートするようにもなった。

ビッグデータ
まず、就寝直前の授乳量を増やしてみた。通常の4オンスではなく、5オンス、6オンスと増やしていった。一人の子供に偏りが出ないように、交互にテストする子とコントロールする子を入れ替えた。片方の子供は夕方の授乳量が増えたが、もう片方は4オンスにとどまった。その結果、結論は出なかった。
この時期、2人ともとにかく睡眠時間が長くなり始めたようだ。睡眠時間もほとんど同じだった。授乳の増加と5.5時間の睡眠が相関した夜があったが、このデータセットでは1つのデータポイントは重要ではない。
また、5オンスを超えると食後数分で吐き出してしまう可能性が高いため、これをテストし続けるのは大変だった。

次に、ウェブ上の保護者ブログの片隅でささやかれ、保護者から保護者仲間へと伝えられた秘密、少なくとも私のオフィスでは、グリップウォーターがあった。秘密というほどでもないかもしれないが、試すのに時間がかかった。おそらく、このハーブとスパイスのミックスは、KFCのブレンドとは対照的に、特に一晩中、逆流やガスによる胃を落ち着かせ、より長い睡眠をもたらすだろう。

1週間試してみたところ、逆流、特に吐き戻しには効果があり、個々のゲップやオナラを追跡したわけではないが、それらも軽減されるようだった。個々のゲップやオナラを追跡したわけではないが、そういったものも減っているようだった。平均して20分から30分と、わずかな増加が見られたが、これも年齢による自然な増加かもしれない。

逆流がないイコール幸せな赤ちゃん
グライプウォーターが新たなコントロールとなった後、私たちは寝る前に追加で授乳するテストを行った。とにかく、息子たちは自分たちで自然にやり始めていたので、私たちはそれを防ごうとしていた。しかし、試すには絶好の機会だと思ったので、試してみた。多くの子どもは寝る前に「クラスター」授乳をし、前の授乳からしばらくして2回目の授乳をする。通常3時間の授乳を、1時間半から2時間後に行った。この授乳では、日中の授乳では通常4~5オンスのところ、4オンスを試した。3オンス以上を拒否することもあった。すべての実験の中で、これが最も効果的だったようだ。その結果、睡眠時間が最大で1時間延びたが、実験開始から数日経たないと延びないことが多く、睡眠パターンに影響を与えるには時間がかかるようだ。A/Bテストの良い教訓は、人々が新しい治療法を理解し、適応するまでに数日間の調整期間が必要な場合があるということだ。しかし、調整期間の結果と調整後の結果の両方を把握することは重要である。アップルは、特にマップをはじめとするいくつかの製品の発売において、調整期間を軽視したことで有名である。

最後に、日中の覚醒時間を長くするテストを行った。私たちの仮説は、夜間はより疲れやすくなり、結果として睡眠時間が長くなるだろうというものだった。これはわずかに正しいかもしれず、睡眠時間のわずかな延長は見られたが、起きている時間を長くすることでストレスや疲労を引き起こし、彼らを不機嫌にさせることを考慮していなかった。また、過眠で騒ぐので、夜、落ち着いて寝かせるのにかなり時間がかかった。テストの教訓は、わずかな利点を得るために他の指標を犠牲にしないことである。

私を眠らせることはできない!
これらのテストの多くは決定的なものではなかった。これはサンプルサイズによるところが大きい。フェイスブックのようなサンプル母集団では、テストは小さなセグメントで行うことができ、統計的有意性を非常に早く達成することができる。双子の場合、何が本当の結果で、何が性格や自然な進行なのかを知るのは難しい。より正確にテストするためには、サンプルサイズを増やす必要があるかもしれない。そのためには三つ子が便利だ。 誰かの三つ子かもしれないけど!

これはまた、テスト、測定、反復のプロセスの重要性を示している。いくつかの方法は大きな改善を示さなかったが、まとめるとそうなるかもしれない。治療法がコントロールより優れている場合に、その治療法をコントロールとして使用することで、小さな改善が積み重ねられる。新しいことを素早く試して次に進むことを続けることで、試すべき新しいアイデアを思いつきやすくなる。山を動かす必要はなく、長い時間をかけて少しずつ土を動かせばいいのだ。このような子育てのやり方で、息子たちも継続的に成長することができる。そして運がよければ、私たちの正気も、幸福も、そして親としての人生も。

この記事は「Dad On The Run」に掲載されたものです。




親会社。

著者



カンバセーションズ

mother with child
How Teaching Goal Setting Inspires Children

ジョイ・ターナー著

Setting goals allows kids to experience growth socially and emotionally by helping them develop self-regulation skills, gain responsibility and build confidence.

続きを読む

mother with new baby
Postpartum Hospital Bag Essentials I Wish I Had

イェレナ・シュスター著

I’ve texted every pregnant person I know to ask them everything I could gather to make their hospital stay better. Here’s everything I wish I had—and why.

続きを読む

友人と同席
自分自身と向き合う時間を持つことの力

ハンナ・ブレンチャー著

今にもっと集中するためにコンセントを抜くという規律を養い始めたとき、私は自分自身にチェックインしていたのではなく、チェックアウトするための言い訳を作っていたのだと気づいた。

続きを読む