Неверное распределение пользователей Firebase A / B для тестирования, установлено 100% пользователей, но большинство пользователей имеют значение по умолчанию на стороне сервера удаленной конфигурации

#firebase #firebase-ab-testing

#firebase #firebase-ab-testing

Вопрос:

Мы проводим firebase remote config AB test. Контрольная группа и вариант тестирования A / B: мы задаем 100% пользователей со значениями 3 и 4

Когда мы проверяем данные, для 100 пользователей мы видим распределение:

  1. значение 1 (значение по умолчанию в приложении): 1 пользователь
  2. значение 2 (значение по умолчанию на стороне сервера удаленной конфигурации): 70 пользователей
  3. значение 3 (группа контроля тестирования ab): 14 пользователей
  4. значение 4 (тестовый вариант ab A): 15 пользователей

Мы не уверены, что не так. Предполагается, что это значения 3-50 пользователей и значения4 50 пользователей. Мы устанавливаем кэш равным 24 часам и, как только получим значение на стороне сервера firebase, переопределим значение по умолчанию в приложении (value1)

Комментарии:

1. Привет, Хайди, не могла бы ты, пожалуйста, отправить запрос в службу поддержки? Нам понадобится немного больше информации, чтобы разобраться в том, что здесь происходит. firebase.google.com/support

2. Привет, Фенмарел, спасибо, что обратил внимание на эту проблему. Я уже отправил запрос в службу поддержки.