Бизнес и статистика

Предвзятость отбора в аналитике Предвзятость отбора (selection bias) - это систематическая ошибка, которая возникает в случаях, когда выборка не является репрезентативной для генеральной совокупности. И из-за того, что аналитика изначально уже строится на таких искаженных данных, получаются неверные...

INTERSECT и EXCEPT/MINUS в SQLВсе мы знаем такие операторы, как UNION и UNION ALL, которые объединяют результаты двух и более SELECT в одну таблицу (без дубликатов и с дубликатами соответственно). Но существуют еще менее популярные, но иногда полезные аналоги традиционных UNION: INTERSECT и EXCEPT (...

GeoPandas в PythonGeoPandas - это надстройка над Pandas в Python, которая используется для географического анализа. Главная её особенность - поддержка географических объектов с помощью GeoDataFrame и GeoSeries.▶️GeoDataFrame - это, по сути, тот же DataFrame, только с поддержкой географических объект...

Якорная модель (anchor modeling)Якорное моделирование - это метод моделирования хранилища данных. Считается, что это более усовершенствованная версия Data Vault.В anchor modeling используются такие элементы, как:▶️Якоря. Это сами сущности, В этих таблицах хранятся только уникальные идентификаторы и ...

GROUPING SETS в SQLGROUPING SETS, или расширенная группировка, используется тогда, когда нужно получить несколько вариантов группировки в одном запросе (аналог выполнения нескольких GROUP BY с UNION ALL).В скриптах это выглядит следующим образом: SELECT department_id, job_id, SUM(salary) as total_sa...

Предположим, что у нас есть гипотеза: "Активные пользователи приложения чаще совершают покупки".Допустим, что активный пользователь - это тот, кто заходит в приложение 3 и более раз в неделю. Также у нас есть заготовленный датасет (недельный срез) с колонками:▶️user_id - id пользователя▶️logins_per_...

Data Vault на практикеData Vault - это один из видов архитектуры базы данных (альтернатива "звездочке", "снежинке" и т.п.). Включает в себя такие элементы, как:▶️Hub - таблицы, содержащие бизнес ключи. Здесь хранятся разные id и номера.▶️Satellite - таблицы, содержащие основную информацию по атрибут...

Data analysis | Анализ данных | DA pinned «Дорогие подписчики! Сделал на Stepik курс по тематике нашего канала, с уклоном именно в практическую аналитику. Он будет полезен тем, кто проходит собеседования и тем, кто уже работает аналитиком. Курс учит полному циклу анализа данных, хорошо систематиз...

Дорогие подписчики! Сделал на Stepik курс по тематике нашего канала, с уклоном именно в практическую аналитику. Он будет полезен тем, кто проходит собеседования и тем, кто уже работает аналитиком.Курс учит полному циклу анализа данных, хорошо систематизирует знания и даёт понимание, в каких ситуация...

FILTER в SQLВ SQL конструкция FILTER используется для условной агрегации. Она позволяет применять агрегатные функции (такие как SUM, COUNT, AVG, MAX и т.д.) только к тем строкам, которые удовлетворяют определенному условию, не затрагивая остальные строки в выборке.И тут сразу вспоминаются функции HA...

Метод Монте-Карло на PythonМетод Монте-Карло используется тогда, когда нужно численно изучать случайные процессы. Представляет собой генерацию случайных величин для достижения определенных аналитических целей.Довольно часто применяется в практической аналитике при оценке рисков, финансовом моделиров...

Schema EvolutionЭволюция схемы - это способность системы адаптировать структуру данных (таблицы, поля, типы) под новые требования без потери работоспособности всего того, что зависит от бд.Применяется в случаях, когда:▶️Нужно добавить или удалить столбцы▶️Нужно изменить тип данных ▶️Меняется допусти...