В исследовании проверили 20 гипотез при уровне значимости 5%; одна дала p = 0,03. Можно ли объявить этот результат статистически значимым?
База Hintsage
Анализ данных
Подготовка данных, статистика, SQL, интерпретация результатов и проверка гипотез.
Практика
Вопросы: Анализ данных
В отчёте сравнивают варианты по общей конверсии, но распределение пользователей по сегментам различается. Какой вывод допустим по этому запросу и почему?
WITH data(segment, variant, successes, users) AS (
VALUES
('новые', 'A', 90, 100),
('новые', 'B', 19, 20),
('опытные', 'A', 1, 100),
('опытные', 'B', 80, 1000)
)
SELECT variant,
SUM(successes) * 1.0 / SUM(users) AS conversion
FROM data
GROUP BY variant;
В данных о доходах пропуски чаще встречаются у клиентов с низким доходом. Как это повлияет на оценку среднего дохода?
Компания получила статистически значимый эффект в эксперименте. Как определить, имеет ли он практическую ценность?
Объясните механизм: почему увеличение объёма случайной выборки обычно сужает доверительный интервал оценки?
При подготовке модели аналитик стандартизировал признак, вычислив среднее и стандартное отклонение по объединённым обучающим и тестовым данным. Какое искажение возникает?
Проверьте запрос: аналитик хочет получить всех клиентов, включая тех, у кого нет заказов. Какое множество клиентов фактически вернёт запрос и какой механизм это определяет?
WITH customers(id) AS (
VALUES (1), (2), (3)
), orders(customer_id, amount) AS (
VALUES (1, 100), (1, 50), (2, 80)
)
SELECT c.id, SUM(o.amount) AS revenue
FROM customers AS c
LEFT JOIN orders AS o ON o.customer_id = c.id
WHERE o.amount > 60
GROUP BY c.id;
В наблюдательных данных связь между скидкой и повторными покупками исчезла после учета канала привлечения. Какой механизм объясняет исходную связь?
После соединения заказов с таблицей товаров общая выручка удвоилась. Как проверить, что причина — многократное сопоставление строк?
В A/B-тесте p-value оказался выше уровня значимости. Какой вывод корректен о наличии эффекта?
Представьте, что в данных о времени доставки есть несколько экстремально больших значений. Какой показатель центральной тенденции надёжнее использовать для типичного заказа и почему?
Что означает 95%-й доверительный интервал для оценки параметра?
Для чего в бутстрэп-выборке пересэмплируют наблюдения с возвращением?
Аналитик завершил A/B-тест сразу после того, как p-value стало ниже 0,05, хотя размер выборки заранее не фиксировался. Как это влияет на надёжность вывода?
Рассмотрите расчёт дисперсии после заполнения пропусков средним значением. Какой систематический эффект возникнет в результате такой замены?
WITH data(x) AS (
VALUES (10), (12), (14), (NULL), (NULL)
)
SELECT
VAR_SAMP(x) AS variance_before,
VAR_SAMP(COALESCE(x, (SELECT AVG(x) FROM data))) AS variance_after
FROM data;
Перед запуском A/B-теста аналитик увеличил планируемую выборку в четыре раза, сохранив ожидаемый эффект и разброс. Как изменится статистическая мощность и почему?
После рандомизации в A/B-тесте аналитик оставил в расчёте только пользователей, посетивших сервис после воздействия. Какой риск возникает для оценки эффекта?
Команда рандомизировала пользователей, но в анализе считает каждую сессию независимым наблюдением. Как это повлияет на проверку гипотезы?
Компания оценивает удовлетворённость клиентов только по ответам добровольного онлайн-опроса. Какое искажение возникает, если вероятность ответа связана с удовлетворённостью?
Аналитик оценивает связь исхода с метрикой, измеренной с независимой случайной ошибкой. Как обычно исказится оценка этой связи?
Показано 1–20 из 47