одиниці
1. Вступ до штучного інтелекту в науці про дані та аналітиці: робочий процес, ролі, межі, перевірка та етика 2. Збір даних і розуміння джерела: схема, вибірка, якість і усвідомлення витоків 3. Очищення та попередня обробка даних: відсутнє значення, перетворення викидів і типів 4. Дослідницький аналіз даних (EDA): розподіли, взаємозв’язки та початкове розуміння 5. Розробка функцій: генерація варіантів, кодування, масштабування та уникнення витоку 6. Побудова моделі: визначення проблеми, вибір алгоритму та розділення на навчання/тест 7. Оцінка моделі: показники, перехресна перевірка та екстремальне навчання 8. Візуалізація та оповідання: точна графіка, чесна графіка 9. Генерація коду: аналіз за допомогою ШІ за допомогою Python (pandas) і SQL 10. Витік даних і відтворюваність: тихі катастрофи та дисципліна 11. MLOps Foundation, етика, конфіденційність і відповідальна аналітика
одиниця 8 / 11

Візуалізація та оповідання: точна графіка, чесна графіка

Прибуток:

  • Можливість підключити кожну діаграму до чіткого запитання та вибрати відповідний тип діаграми (лінія для часу, смуга для порівняння, розподіл для зв’язку)
  • Здатність розпізнавати елементи, що вводять в оману (пунктирна вісь, збір вишні, діаграма спагетті) і створювати чесні та прості візуальні ефекти
  • Здатність перетворювати висновки на рішення за допомогою орієнтованих на результат заголовків і розповіді даних

Цінність аналізу розкривається лише тоді, коли інші можуть це зрозуміти та приймати рішення. Найточніша модель у світі залишається на полиці, якщо її погано пояснити; Звичайна знахідка, добре пояснена, може змінити напрямок компанії. Предметом цього розділу є візуалізація даних (вираження даних за допомогою графіки) та оповідання даних (перетворення результатів у історію прийняття рішень): вибір правильного графіка, чесне його малювання та залишення чіткого повідомлення в свідомості аудиторії. AI пише код діаграми, пропонує тип діаграми та створює назву для знахідки; Але людина сама вирішує, яке повідомлення надано та чи вводить зображення в оману.

Діаграма має завдання: відповісти на запитання

Найбільша помилка новачків – це малювання графіків для «показу даних». Однак хороша діаграма дає відповідь на запитання. «Чи зросли продажі з часом?» Відповідь на запитання – лінійний графік; «Яке місто продає більше?» є стовпчастою діаграмою; «Чи пов’язані ціна та попит?» є діаграмою розсіювання. Перш ніж малювати графік, запитайте: на яке питання відповідає цей графік і чи може глядач побачити його з першого погляду?

Базове відображення вибору діаграми:

призначення

правильна діаграма

неправильний вибір

змінюватися з часом

лінійна діаграма

кругова діаграма

Порівняння категорій

стовпчаста діаграма

3D торт

Зв'язок двох чисел

точкова діаграма

стрижень

форма розподілу

Гістограма/коробка

Середній одинарний бар

Частини цілого (кілька категорій)

Паличка або звичайний пиріг

Багаторазовий торт

Багатоваріантний зв'язок

теплова карта

лінії, що перекриваються

Порада: якщо можливо, уникайте кругової діаграми; Людське око погано порівнює кути. Послідовну гістограму майже завжди легше читати, якщо є більше двох зрізів.

Чесна діаграма: найлегший спосіб ввести в оману

Діаграми можуть брехати, не усвідомлюючи цього (іноді навмисно). Етична відповідальність спеціаліста з обробки даних полягає в тому, щоб складати чесні графіки. Найпоширеніші форми обману:

Пунктирна вісь y: якщо ви починаєте вісь із 95 замість 0, різниця в 2% виглядає як гора. У порівняльних стовпчастих діаграмах вісь зазвичай має починатися з 0.

Неправильний масштаб осі: використання логарифмічної осі без її вказівки або спотворення осей.

Вибір вишні: показує лише період/сегмент, який підтримує ваше повідомлення, і приховує решту.

Забагато інформації: 12 рядків перекриваються, щоб створити «діаграму спагетті»; жодне повідомлення не читається.

Додавання, що вводить в оману: додавання графіків, які поводяться по-різному та приховування справжньої моделі (парадокс Сімпсона).

Обережно: якщо ви скажете штучному інтелекту «нехай ця різниця виглядає вражаючою», він може запропонувати перебільшений графік із пунктирною віссю. Етична відповідальність лежить на вас: діаграма не повинна робити дані більшими чи меншими, ніж вони є насправді. Чесність передує вражаючості.

Колір, етикетка та простота

Хороша графіка – це проста графіка. Принцип співвідношення даних і чорнила: відкиньте все, що не несе даних (непотрібну сітку, тінь, 3D-ефект, декоративний колір). Колір має передавати значення, а не бути декоративним: один колір для виділення категорії, решта сірі. Слідкуйте за кольоровою сліпотою (розрізнення червоно-зеленого кольору важко приблизно у 1 із 12 чоловіків); Використовуйте безпечні піддони. Кожна діаграма повинна мати чітку назву — і найкраща назва не описує діаграму, вона говорить про результат: «Продажі впали на 18% у третьому кварталі», а не «Місячні продажі».

Виділіть і опис: спрямування погляду на повідомлення

Хороша графіка підказує глядачеві, куди дивитися. Атрибути попередньої уваги — візуальні підказки, такі як колір, положення, розмір, які мозок сприймає за частки секунди, без свідомих зусиль — є інструментом для цього: якщо ви залишите одну смужку з акцентним кольором, а решта — сірими, око автоматично перейде туди. Анотації, додані безпосередньо до діаграми, також є ефективними: одна стрілка, яка повідомляє «Кампанію розпочато цього місяця», ефективніша, ніж абзац опису. Той самий принцип застосовується при розробці інформаційної панелі: розмістіть найважливіший показник угорі та найбільший, зберігайте другорядну інформацію внизу та невеликий. Мета полягає не в тому, щоб перевантажити аудиторію інформацією, а в тому, щоб вони змогли побачити правильне рішення з одного погляду. AI може створити для вас колір виділення та код анотації; Але вам вирішувати, на чому акцентувати увагу, тобто на чому полягає справжнє повідомлення.

три міні-чохла

Кейс 1 — Скандал зі зламаною віссю. Одна команда представила керівництву гістограму, на якій вісь Y починалася з 980, щоб показати «зростання»; Розпродаж від 1000 до 1020 виглядав величезним. Фактичне підвищення склало 2%. Коли менеджер помітив стрижню, довіра до всієї презентації похитнулася. Урок: починайте вісь від 0 у стовпчиках порівняння.

Випадок 2 — Спагетті-діаграма. Аналітик помістив 24-місячні продажі 14 продуктів на одну діаграму у вигляді 14 рядків. Ніхто нічого не міг прочитати. Виділивши лише 3 продукти, які змінилися найбільше, і зробивши решту блідо-сірими, стало зрозуміло повідомлення: «Продукт А падає, продукт Б зростає». Урок: не показувати все, показувати повідомлення.

Випадок 3 — заголовок, що повідомляє про результат. В одному звіті була прихована карта під назвою «Регіональний розподіл»; Ніхто не вживав заходів. Коли заголовок змінився на «Східний регіон на 40% нижче цільового показника», ця сама графіка породила на засіданні план екстрених дій. Урок: заголовок має передати рішення, а не графіка.

Чотири шаблони, які можна копіювати

1) Вибір типу діаграми:

Ваша роль: консультант з візуалізації. Запропонуйте діаграму, яка дасть відповідь на таке запитання: «Який канал (веб/мобільний) зростав швидше за останні 12 місяців?» У мене щомісяця продажі зі зривом каналу. Скажіть мені найбільш підходящий тип діаграми та чому; Нагадайте мені, щоб уникнути оманливих варіантів (кругова вісь, пунктирна вісь). Експортуйте код за допомогою matplotlib.

2) Чесний контроль малювання:

Перевірте цей код гістограми на чесність: чи вісь y починається з 0, чи має колір сенс, чи в заголовку зазначено результат, чи є якісь непотрібні 3D/тіні? Виправте будь-які оманливі елементи та поясніть, чому ви їх виправили.

3) Спрощення:

У мене є діаграма часового ряду з 14 рядками, її неможливо прочитати. Напишіть код для версії з чітким заголовком і високим коефіцієнтом чорнила даних, яка виділяє лише 3 серії, які найбільш змінюються, а решту робить світло-сірим.

4) Орієнтована на результат назва та розповідь:

Я наведу такий висновок: «Східний регіон впав на 40% нижче цільового показника за 3 квартал, основною причиною є затримки логістики». Для цього створіть: (1) стовпчасту діаграму цілі та реальності, (2) заголовок, який повідомляє про результат, (3) резюме з 3 речень. Я перевірю цифри; примірка.

Слабка підказка / Сильна підказка

Слабка підказка:

Зробіть гарну діаграму з цих даних про продажі.

«Красивий» суб'єктивний; Незрозуміло, яке питання, яка аудиторія, яке повідомлення. ШІ створює випадковий, можливо, оманливий графік.

Потужна підказка:

Ваша роль: асистент візуалізації даних. Аудиторія: вище керівництво. Повідомлення: «Мобільний канал перевершив Інтернет за 12 місяців». У мене щомісяця канал продажів. Завдання: (1) код лінійної діаграми (matplotlib), який чітко показує це повідомлення, (2) вісь y починається з 0, колір мобільного наведення, веб-сірий, (3) заголовок, який повідомляє результат. Використання оманливих ваг; Показати дані як є. Я надам цифри.

Тут ясна аудиторія, повідомлення, правило чесності та тип діаграми.

Поширені помилки

  • Малювання графіка без приєднання його до питання. Безцільна графіка втомлює глядача і не продукує рішення.
  • Вводити в оману зламаною/кривою віссю. Для порівняння вісь повинна починатися з 0; Етична відповідальність лежить на вас.
  • Зібрати все в одну таблицю. Спагетті-графіка вбиває повідомлення; підкреслити, решту замовчати.
  • Неправильний тип діаграми (особливо секторна діаграма з кількома секторами). Використовуйте лінії для часу та стовпчики для порівняння.
  • Заголовок описує діаграму. Хороший заголовок повідомляє результат/рішення, а не назву стовпця.
Порада: коли ви закінчите кожну діаграму, виконайте 5-секундний тест: покажіть комусь 5 секунд і запитайте «що ви розумієте?» Якщо він не може передати правильне повідомлення, діаграма ще не готова; Спростіть, підкресліть, зробіть назву результативною.

Підсумовуючи

Візуалізація – це міст, який перетворює аналіз у рішення. Хороша діаграма відповідає на запитання; вибрано правильний тип (рядок для часу, стовпчик для порівняння, розподіл для співвідношення); намальовано чесно (вісь починається з 0, значущий колір, без вибору). Він несе заголовне повідомлення про простоту та результати. ШІ швидко генерує графічний код і чернетки заголовків, але людина вирішує, яке повідомлення передавати і чи чесне зображення; Етична відповідальність лежить на оповідачеві.

Аплікаційне завдання

Виберіть один результат і перетворите його на єдину діаграму, орієнтовану на результати. Після побудови графіка перевірте чесність: чи вісь починається з 0, чи має значення колір, чи заголовок говорить про результат? Потім виконайте «5-секундний тест» (покажіть його комусь і запитайте, що вони розуміють) і спростіть таблицю на основі отриманого відгуку.

контрольний список

  • [ ] Чи дає моя діаграма чітку відповідь на запитання?
  • [ ] Чи відповідає тип діаграми меті (час/порівняння/зв’язок)?
  • [ ] Чи чесні осі (починаючи з 0 у порівнянні)?
  • [ ] Колір і простота підтримують повідомлення, чи не стають вони декоративними?
  • [ ] Чи вказує заголовок результат/рішення, а не описує графік?