ブログ

クローズド テスト 12 人・14 日間:「連続」の本当の意味

カウントダウンが進めば 14 日間連続でテストしたことになる?オプトアウト、アンインストール、開かない。どれが「連続」を途切れさせるのか、Google の原文から解説します。

新しい個人用デベロッパー アカウントで製品版を公開するには、Play Console のダッシュボードにある次のタスクを満たす必要があります。クローズド テストを 12 人以上のテスターで、14 日間以上実施する。

一見シンプルで、カウントダウンも勝手に進んでいくので、14 日間待てばいいと思いがちです。ところが Google の言う「連続」は、このカウントダウンよりずっと厳しいものです。

12 人は同じ日に始める必要がある?途中で誰かがオプトアウトしたら?テスターは毎日アプリを開く必要がある?ネット上の説明はまちまちで、矛盾しているものもあります。この記事では、Google の原文をもとに 1 つずつ整理します。

1Google の原文には何と書いてあるか

まずは原文です。ダッシュボードでこのタスクにマウスを合わせると、もう少し詳しい説明が表示されます。

製品版へのアクセスを申請する場合は、12 人以上のテスターがクローズド テストにオプトインする必要があります。過去 14 日間継続してオプトインしていることが必要です。

Play Console のダッシュボード:「クローズド テストを 12 人以上のテスターで、14 日間以上実施する」にマウスを合わせると表示される説明

Play Console ヘルプの新しい個人用デベロッパー アカウント向けのアプリテスト要件には、さらに詳しく書かれています。以下のセクションでは、このページから 1 文ずつ引用していきます。

まとめると、キーワードは 3 つです。

  • 申請した時点:要件は「本番環境へのアクセスを申請」をクリックした時点でチェックされる
  • 過去 14 日間:申請した日からさかのぼって 14 日間
  • 連続でオプトイン:その 14 日間、12 人がずっとオプトインした状態でいること

212 人のテスターは同じ日に始める必要がある?

必要ありません。Google は全員が同じ日に参加することを求めていません。カウントダウンが始まるのは、12 人目のテスターがオプトインした日 からです。

たとえば:

  • 1 日目:10 人がオプトイン
  • 3 日目:11 人目が参加
  • 5 日目:12 人目が参加

この場合、14 日間のカウントダウンは 5 日目から始まり、申請できるのは早くても 19 日目です。最初の 4 日間、10 人が参加していても、申請が早まることはありません。

つまり 人集めが遅いほど、待つ時間が長くなります。先に全員をそろえて、一斉に始めるのがいちばんです。

3カウントダウンは止まらないが、「連続」は途切れることがある

表面上:14 日間は途切れないように見える

Google Play クローズド テストで新人デベロッパーが誤解しがちな 5 つのことで書いたとおり、ダッシュボードの 14 日間のカウントダウンには次の特徴があります。

  • 12 個目のアカウントがオプトインした時点で始まり、誰かがインストールしたり開いたりしているかとは関係ない
  • 一度始まると、途中で一部のテスターがオプトアウトしても自動で止まることはない

ダッシュボードだけを見ると、14 日間はほとんど途切れず、待っていれば終わります。

実際には:この 5 つが「連続」を途切れさせる

カウントダウンはただのタイマーで、テストが本当に連続していたかまではチェックしてくれません。次の 5 つのうち、最初の 2 つはルール上の問題です。残りの 3 つは数字には表れませんが、審査では見られます。

① テスターがオプトアウトする

Google の原文でいちばんはっきり書かれているのがこれです。

オプトイン期間が 14 日間にならないうちにテスターがオプトアウトした場合、要件を満たすテスターとしてカウントされません。

テスターがオプトアウトしてから再びオプトインした場合、12 人のテスターによる連続オプトインの最小要件を満たすためには、14 日間連続でオプトインする必要があります。

つまり途中で誰かがオプトアウトしても、カウントダウンはそのまま進みますが、その人はもう「連続 12 人」には含まれません。ちょうど 12 人しかいなければ、1 人抜けただけで要件を満たさなくなります。だから 常に 12 人を上回る状態を保ち、余裕を持たせておくのが安全です。

② 申請が却下される

私たちの実際の経験では、製品版へのアクセスの申請が却下され、「アプリのテストをさらに行う必要があります」と言われると、却下された日にカウントダウンが自動でやり直しになります。それまでの 14 日間は、次のラウンドに引き継がれません。

③ オプトインしただけで、インストールしない

テスターがオプトイン リンクを開いて Become a tester をタップすると、オプトインした人数は 1 増えます。でも、その人がアプリをインストールしていないこともあります。

この場合、数字はまったく途切れませんが、インストール済みユーザー数は 0 です。審査から見れば、誰もテストしていないのと同じです。

④ 途中でアンインストールする

アプリのアンインストールは、オプトアウト ではありません。テスターがアプリをアンインストールしても、オプトインした状態のままなので、オプトインした人数は減らず、カウントダウンにも影響しません。

ただし Play Console のインストール済みユーザー数は下がり、テストが途中で止まったことが統計にはっきり表れます。

⑤ インストールしたまま、開かない

アプリはインストールされたままなのに、誰も開かない。1 日のアクティブ ユーザー(DAU)がずっと 0 に近いなら、テスターは実際にはテストしていません。

Google の原文も、これをテストの継続が必要になる理由としてはっきり挙げています。

テストの継続が必要になる理由としては、オプトインしたテスターが 12 人未満であることや、テスト期間中のテスターの関与が不十分であることなどが挙げられます。

まとめ

ケース カウントダウン テスターとして数えられるか 審査では
① オプトアウト そのまま進む 数えられない 12 人を下回るおそれ
② 申請が却下 やり直し — もう 1 ラウンド必要
③ オプトインのみでインストールなし そのまま進む 数えられる インストール済みユーザー数が少ない
④ 途中でアンインストール そのまま進む 数えられる インストール済みユーザー数が下がる
⑤ インストールしたが開かない そのまま進む 数えられる DAU が 0 に近い

カウントダウンがやり直しになるのは ② だけで、ほかの 4 つではそのまま進みます。でも Google は、審査のときにこの 5 つをすべて見ることができます。

インストール済みユーザー数と DAU を Play Console のどこで確認するかは、Google Play「More testing required」で却下される 5 つの理由と対策の最初の 2 つのセクションに、スクリーンショットと手順付きでまとめています。

4では、テスターは毎日アプリを開く必要がある?

Google は、毎日開かなければならないとも、何分使わなければならないとも決めていません。1〜2 日開き忘れても、カウントダウンがやり直しになることはありません。

ただし製品版へのアクセスを申請するとき、テスターの関与について質問されます。たとえば:

テスターがアプリの利用可能な機能をすべて使用したかどうか

テスターによる使い方が、想定される製品版ユーザーの動作と一致したかどうか

ネット上では「オプトアウトもアンインストールもしなければ、使っても使わなくても大丈夫」という説明をよく見かけます。これは半分しか正しくありません。オプトアウトしなければ人数は数えられ続け、カウントダウンも終わります。でもアプリがインストールされているだけでほとんど誰も開かなければ、審査で「アプリのテストをさらに行う必要があります」と言われる可能性が高くなります。

より確実なのは、全員が毎日必ず開く必要まではないものの、14 日間を通して DAU のグラフに ずっとデータがある 状態にすることです。

5ネットでよく見る 3 つの誤解

  • 「12 人は同じ日にインストールしなければならない」:その必要はありません。カウントダウンは 12 人目がオプトインした日から始まります。セクション 2 を参照
  • 「カウントダウンが終われば、14 日間連続でテストしたことになる」:オプトアウト、インストールしない、アンインストール、開かない、のどれでもカウントダウンは止まりませんが、どれも本当の「連続」を途切れさせます。セクション 3 を参照
  • 「1 日開き忘れると、14 日間がやり直しになる」:なりません。カウントダウンがやり直しになるのは申請の却下で、開き忘れではありません。セクション 4 を参照

614 日間を確実に乗り切るには

ここまでの内容をまとめると、やることはいくつかだけです。

  • 先にそろえて、一斉に始める:早く参加した人を無駄に待たせない
  • 人数に余裕を持たせる:12 人より数人多ければ、誰かがオプトアウトしても困らない
  • オプトアウトしない、アンインストールしない:14 日間はオプトアウトもアプリのアンインストールもしないよう、テスターに前もって伝えておく。Google もヘルプページで「テスターには、14 日以上連続でクローズド テストにオプトインする必要があることを伝えてください」と念を押しています
  • 毎日自然に使う:使用時間を稼ぐ必要はないが、DAU のグラフが空にならないようにする

BetaLobby は、デベロッパー同士でクローズド テストを助け合うプラットフォームで、まさにこの考え方で作られています。

  • 16 人で 1 チーム:各アプリに 15 人のテスターがつき、12 人より余裕がある
  • 全員そろってから一斉スタート:全員がチームメイトのアプリをインストールし終えると、14 日間が同時に始まる
  • 毎日のチェックイン:チェックインでは実際にあなたのアプリが開かれ、毎日何人がチェックインしたかをアプリ内で確認できる
  • 4 つのハートの余裕:1〜2 日休んでも Google のルールには反しませんが、長く使わないと審査に響きます。そのため 1 人 4 つのハートがあり、14 日間で 4 日を超えてチェックインを忘れたときだけ TRUST が減ります

結局のところ、Google が求める「連続」は、ダッシュボードのカウントダウンが 14 日に届くことではありません。その 14 日間、12 人以上が実際にあなたのアプリを使い続けていることです。