{"canonical_url":"https://engineer.company/uk/glossary/analytics/","content_markdown":"# Аналітика даних\n\n## Що це таке\n\nПеретворювати записані факти на відповіді, за якими хтось може діяти, — ось\nзавдання аналітики даних, яку здебільшого називають просто аналітикою. У\nрамковій моделі для великих даних, яку видав NIST, американський інститут\nстандартів, аналітика означає методичне опрацювання даних, а за потреби й їх\nперетворення, щоб виявити закономірності, зв'язки між даними й тенденції в часі\nта спробувати передбачити, що буде далі. Цей крок NIST вміщує в ширший _життєвий\nцикл аналітики даних_, який робить із сирих даних знання, придатне для\nорганізації: збирання, підготовка, аналіз, візуалізація й надання доступу.\n\nАналітика — різновид обробки даних, і від транзакційної обробки її відрізняє те,\nщо саме вона читає. Додаток записує одне замовлення за раз, а аналітичний запит\nперебирає мільйони рядків, щоб повернути кілька. Інженерія даних — ще інша\nсправа: вона будує конвеєри й сховища, з яких аналітика потім читає.\n\nПід цим словом ховається дуже різна робота:\n\n- **Звітність**: ті самі показники за розкладом, у PDF або листом.\n- **Дашборди**: ті самі показники, що постійно оновлюються в BI-інструменті на\n  кшталт Power BI.\n- **Разовий аналіз**: SQL-запит під питання, якого досі ніхто не ставив, часто\n  до сховища даних на зразок BigQuery.\n- **Геопросторовий аналіз**: та сама робота з картографічними даними в GIS, де\n  питають не лише «скільки», а й «де».\n- **Аналітичні додатки**: модель або статистичний метод, прихований за\n  вебформою, для людей, які не пишуть коду.\n- **Веб- і продуктова аналітика**: підрахунок відвідувачів вебсайту чи\n  користувачів продукту і того, що вони там роблять.\n\nОстанній різновид має ціну для приватності, і саме його мають на увазі сторінки\nцього сайту про конфіденційність, файли cookie, подяки й безпеку, коли пишуть\n«жодної аналітики» чи «жодного аналітичного тега». Ідеться про тег, піксель\nстеження, cookie й обліковий запис в аналітичній компанії: нічого з цього сайт\nне використовує. Проте себе сайт вимірює. Вебсервер веде журнал доступу, а\nпрограма перетворює його на щоденні лічильники й місячний рейтинг прочитаних\nсторінок, сайтів, звідки прийшли люди, і краулерів. Це лише числа, і маршрут\nокремого відвідувача сайтом із них ніколи не складають.\n\n## Чому це важливо\n\nБільшу частину вартості аналітики визначають два рішення: де виконуються запити\nі як збирають дані про людей.\n\nАналітика безпосередньо на транзакційній базі даних — найдешевший початок:\nдані свіжі, копіювати нічого не треба, але кожен звіт змагається з додатком за\nпам'ять і диск. Репліка для читання знімає це навантаження з основного сервера\nціною ще одного сервера. Сховище даних на зразок BigQuery тримає зберігання\nокремо від обчислень і за тарифом on-demand виставляє рахунок за кожен запит\nзалежно від того, скільки байтів він прочитав, тож вузькі запити обходяться\nдешево. Натомість потрібен конвеєр, який переносить туди дані.\n\nПрив'язка до постачальника ховається у визначеннях. BI-інструмент зберігає свої\nміри власною мовою формул, і за рік визначення активного клієнта опиняється у\nфайлі, який відкриває тільки цей інструмент. Визначення, що лежать як SQL у\nрепозиторії, переживають зміну інструмента.\n\nВеб- і продуктова аналітика додає ще й юридичне питання. Типовий хмарний сервіс\nпрацює через тег: скрипт на кожній сторінці ставить у браузері cookie або\nподібний ідентифікатор і звітує постачальникові про кожен перегляд сторінки.\nСтаття 5(3) європейської Директиви ePrivacy робить згоду умовою для того, щоб\nпокласти інформацію на пристрій відвідувача або прочитати її звідти, з двома\nвинятками: зберігання чи доступ, єдина мета яких — передати повідомлення\nмережею, і зберігання чи доступ, суворо необхідні для надання послуги, яку\nвідвідувач явно замовив. Щойно події можна пов'язати з людиною, хай навіть через\nідентифікатор cookie чи IP-адресу, діє ще й GDPR: потрібні правова підстава,\nзаявлена мета і строк зберігання. А постачальник — інша компанія, у якої тепер є\nзапис того, що робили ваші відвідувачі.\n\nТож вибір насправді з трьох: хмарний сервіс, який швидко підключити і який має\nготові дашборди; власне збирання першою стороною, яке будують і обслуговують\nсамі; і підрахунки з журналів, які сервер і так пише, — вони відповідають на\nменше питань і містять значно менше.\n\n## Як це виглядає на практиці\n\nДля професійної соцмережі компанія побудувала\n[продуктову аналітику в PostgreSQL](/uk/portfolio/built-first-party-analytics-inside-postgresql/)\nзамість стороннього тега. Схема налічує 7 таблиць і 47 функцій; події лежать у\nтаблицях, розбитих на партиції за 22 визначеннями, що за розкладом самі\nприбирають старе, а особу відвідувача псевдонімізовано сіллю, яку регулярно\nзмінюють. Клієнт нічого не надсилає, доки відвідувач не дав згоди, а лійки\nконверсії рахуються там само, де лежать дані, — NIST називає це локальністю\nданих. Сторінка чесно називає ціну: через ротацію солі втрачається когортний\nаналіз на довгих горизонтах, а безкоштовних дашбордів у комплекті немає.\n\nНа боці звітності\n[система звітності на Python](/uk/portfolio/developed-a-data-analytics-reporting-system/)\nзабирала дані, проводила аналіз і за передбачуваним розкладом надсилала той\nсамий PDF-звіт людям, які ухвалюють комерційні рішення. Сторінка пов'язує з цією\nзвітністю зростання квартального доходу від програмного забезпечення на 400%.\n\nТретій приклад — цей сайт. Його [сторінка про конфіденційність](/uk/privacy/)\nописує вимірювання: журнал доступу, де остання частина IP-адреси стає нулями ще\nдо запису рядка, сайт, звідки прийшов відвідувач, лишається тільки назвою, а\nрядки зберігаються приблизно тридцять днів. Програма зводить журнал у щоденний\nпідсумок і місячний рейтинг, які зберігаються безстроково як числа, без того, що\nдало б знову скласти з них один візит. Тега, cookie і третьої сторони тут немає,\nтож банера згоди сторінка не показує й пояснює це тим, що погоджуватися нема на\nщо. Межу вона теж називає: поки рядок існує, браузер, яким мало хто\nкористується, у малій мережі може вказати на відвідувача точніше, ніж сайтові\nхотілося б. Компроміс такий: менше відповідей і жодних лійок, зате на пристрої\nчитача нічого не зберігається і нікому нічого не передається.\n\n## Де виникають проблеми\n\n### Два інструменти дають два числа відвідувачів\n\nХмарний сервіс показує одне число за минулий місяць, а журнал сервера — удвічі\nбільше, і кожне правильне щодо свого. Тег рахує лише браузери, які виконали його\nскрипт, а за банером — лише тих, хто погодився. Журнал рахує кожен запит,\nкраулерів теж, доки їх хтось не відфільтрує. Запишіть визначення кожної метрики\nодин раз, на SQL, разом із тим, що вона враховує і що відкидає.\n\n### Звіти гальмують додаток\n\nЩопонеділка додаток пригальмовує, поки тижневий звіт сканує цілі таблиці в\nтранзакційній базі даних. Перенесіть звіт на репліку чи в сховище даних або\nщоночі зводьте сирі рядки в невелику підсумкову таблицю й рахуйте по ній\nвіконними функціями:\n\n```sql\nSELECT day,\n       signups,\n       sum(signups) OVER (ORDER BY day\n                          ROWS BETWEEN 6 PRECEDING AND CURRENT ROW)\n         AS last_7_days\nFROM daily_counts\nORDER BY day;\n```\n\n### Банер зникає, а стеження лишається\n\nКоманда міняє cookie на продукт «без cookie», знімає банер згоди і далі стежить\nза відвідувачами. Стаття 5(3) стосується доступу до інформації на пристрої, хоч\nби яким був механізм. Європейська рада із захисту даних (EDPB) у настановах\nщодо технічної сфери застосування цієї статті пише, що під неї можуть підпадати\nй фінгерпринтинг за HTTP-заголовками, і відстеження навігації лише за IP-адресою,\nта водночас нагадує: те, що стаття застосовна, саме по собі ще не означає, що\nпотрібна згода. Оцінюйте інструмент за тим, чи пов'язує він один запит із\nнаступним, а не за тим, чи ставить він cookie.\n\n### Згода, яку регулятор відхилив би\n\nБанер блокує сторінку, доки відвідувач не погодиться, вважає прокручування\nзгодою або робить відкликання згоди складнішим, ніж було її надання. Настанови\nEDPB щодо згоди кажуть, що cookie wall, тобто доступ до вмісту лише в обмін на\nзгоду, робить її невільною, а прокручування ніколи не буває чіткою ствердною\nдією. Стаття 7(3) GDPR вимагає, щоб відкликати згоду було так само легко, як\nїї надати. Дайте відмові ту саму вагу, що й згоді, і нічого не надсилайте, поки\nне отримаєте відповіді.\n\n### Псевдонімні події, що зберігаються вічно\n\nТаблиця подій росте на мільйони рядків щомісяця, а хешовані ідентифікатори\nкористувачів у ній вважають анонімними. Пункт 26 преамбули GDPR відносить до\nперсональних даних і псевдонімізовані дані, які додаткова інформація дає змогу\nпов'язати з людиною, а пункт 30 називає IP-адреси та ідентифікатори cookie серед\nонлайн-ідентифікаторів, сліди яких у поєднанні з іншою інформацією можна\nвикористати, щоб скласти профіль людини й ідентифікувати її. Встановіть строк\nзберігання ще до першої події, розбийте таблицю на партиції за часом, щоб\nмісяць, строк зберігання якого сплив, видалявся цілим, а довгострокові показники зберігайте як\nагрегати без ідентифікаторів.\n\n## Що почитати далі\n\n- [NIST SP 1500-1r2, Big Data Interoperability Framework: Definitions](https://doi.org/10.6028/NIST.SP.1500-1r2)\n  — визначення аналітики, життєвого циклу аналітики даних і локальності даних,\n  від яких відштовхується ця стаття.\n- [Directive 2002/58/EC, consolidated](https://eur-lex.europa.eu/legal-content/EN/TXT/?uri=CELEX:02002L0058-20091219)\n  — стаття 5(3), правило згоди для всього, що зберігають на пристрої відвідувача\n  або читають із нього, з двома винятками.\n- [Regulation (EU) 2016/679, the GDPR](https://eur-lex.europa.eu/eli/reg/2016/679/oj)\n  — визначення згоди, стаття 7 про її відкликання та пункти 26 і 30 преамбули\n  про псевдонімізовані дані й онлайн-ідентифікатори.\n- [EDPB Guidelines 05/2020 on consent](https://www.edpb.europa.eu/our-work-tools/our-documents/guidelines/guidelines-052020-consent-under-regulation-2016679_en)\n  — cookie walls, прокручування й відкликання згоди, кожне з розібраними\n  прикладами.\n- [EDPB Guidelines 2/2023 on Article 5(3)](https://www.edpb.europa.eu/our-work-tools/our-documents/guidelines/guidelines-22023-technical-scope-art-53-eprivacy-directive_en)\n  — чому відстеження за IP-адресою, фінгерпринтинг і пікселі стеження можуть\n  підпадати під те саме правило, що й cookie.\n- [PostgreSQL tutorial: Window Functions](https://www.postgresql.org/docs/current/tutorial-window.html)\n  — рейтинги й накопичувальні суми за пов'язаними рядками, обчислені в самій\n  базі даних.\n\n\u003chttps://engineer.company/uk/glossary/analytics/\u003e\n","date_modified":"2026-11-12T05:34:23Z","description":"Звіти, дашборди, SQL у сховищі даних і підрахунок відвідувачів: де має працювати аналітика даних і чого вебаналітика коштує приватності й згоди.","formats":{"gemtext":"https://engineer.company/uk/glossary/analytics/index.gmi","gopher":"https://engineer.company/uk/glossary/analytics/gophermap","html":"https://engineer.company/uk/glossary/analytics/","json":"https://engineer.company/uk/glossary/analytics/index.json","markdown":"https://engineer.company/uk/glossary/analytics/index.md","pdf":"https://engineer.company/uk/glossary/analytics/index.pdf"},"kind":"page","language":"uk","title":"Що таке аналітика даних?","url":"https://engineer.company/uk/glossary/analytics/","version":1}