واحد 6 / 12

تجزیه و تحلیل و تفسیر داده ها: هوش مصنوعی با داده های جدولی

سود:

  • توانایی تجزیه و تحلیل جداول فروش، هزینه و عملیات با هوش مصنوعی و تشخیص روندها، شکست ها و نقاط پرت
  • امکان تأیید خطاهای حسابی و توهم با انجام مجدد یا بررسی دستی هر محاسبه
  • توانایی تشخیص همبستگی از علیت و کیفیت داده های سوال و محدودیت های نمونه قبل از تفسیر

یکی از جملات تکراری در مشاوره مدیریت این است: "اعداد چه می گویند؟" داده های فروش مشتری، جدول هزینه، بخش های مشتری یا معیارهای عملیاتی؛ همه آنها یک داستان می گویند. کار مشاور این است که آن داستان را پیدا کند، آن را اثبات کند و به طور واضح به تصمیم گیرنده نشان دهد. هوش مصنوعی نمودار را در چند ثانیه تفسیر می‌کند، روندها را مشخص می‌کند، محاسبات انجام می‌دهد و حتی کد (فرمول پایتون، اکسل) را برای تجزیه و تحلیل تولید می‌کند. اما یک خطر خاص در اینجا وجود دارد: هوش مصنوعی می‌تواند بی‌صدا در محاسبات اشتباه کند و عدد اشتباه را با اطمینان درست ارائه دهد. بنابراین، قانون طلایی در تجزیه و تحلیل داده ها، انجام مجدد یا بررسی دستی هر محاسبه است.

دو روش برای کار با داده ها

دو روش اصلی برای تجزیه و تحلیل داده ها با هوش مصنوعی وجود دارد و دانستن تفاوت برای دقت بسیار مهم است.

  1. تفسیر متنی مدل: داده ها را مستقیماً در چت قرار می دهید و می گویید "نظر". مدل الگوها را می خواند اما محاسبات را "ذهنی" انجام می دهد. این مسیر با بیشترین خطر خطا است. مناسب برای جداول کوچک و تفسیر کیفی، نه برای حسابداری دقیق.
  2. تولید کد/ابزار: شما کد تجزیه و تحلیل (Python/Pandas) یا فرمول Excel را در مدل چاپ می کنید. کد محاسبه را انجام می دهد، نه مدل. این روش بسیار قابل اعتمادتر است زیرا محاسبات در یک ابزار قطعی عمل می کند. آن را برای داده های بزرگ و عدد دقیق ترجیح دهید.
نکته: اگر به یک عدد دقیق نیاز دارید (کل گردش مالی، میانگین، نرخ رشد) از مدل بخواهید «فرمول اکسل/کد پایتون را که این را محاسبه می‌کند بنویسد»، نتیجه را خودتان اجرا کنید. هرگز عدد داده شده توسط مدل را نهایی در نظر نگیرید.

نحوه تنظیم اعلان تجزیه و تحلیل

یک درخواست تجزیه و تحلیل خوب شامل داده ها، سؤال پرسیده شده و قانون اعتبار سنجی است.

نقش شما: تحلیلگر داده در زیر نمودار فروش 24 ماهه (ماه، منطقه، محصول، مقدار، گردش مالی) آمده است. وظیفه: 1) روند گردش کل و ماهانه را خلاصه کنید. 2) 3 سریع‌ترین رشد و سریع‌ترین انقباض منطقه محصول را پیدا کنید. 3) در صورت وجود موارد پرت (پرش/سقوط غیرمنتظره) علامت بزنید. قوانین: - فرمول اکسل را بنویسید که هر محاسبه را در کنار آن انجام می دهد. بررسی خواهم کرد.- تفسیر را از داده ها جدا کنید: اول «داده می گوید»، سپس «معنای ممکن».- ادعای علیت نکنید. فقط الگو را نشان دهد

این درخواست دارای سه عنصر حیاتی است: الزام به فرمول (قابلیت تأیید)، جداسازی داده ها از تفسیر (یکپارچگی)، و منع ادعای علیت (موضوع بخش بعدی).

همبستگی علیت نیست

رایج‌ترین و پرهزینه‌ترین خطای منطقی در تحلیل این است که فرض کنیم یکی از دو چیز که با هم عمل می‌کنند باعث دیگری می‌شود. فقط به این دلیل که دو متغیر با هم افزایش می یابند (همبستگی) ثابت نمی کند که یکی باعث دیگری می شود (علت). ممکن است عامل سوم یا تصادفی وجود داشته باشد. مثال کلاسیک: با افزایش فروش بستنی، غرق شدن نیز افزایش می یابد. دلیلش بستنی نیست، هوای گرم هر دو را بالا می برد.

هوش مصنوعی می تواند به راحتی یک همبستگی بنویسد، زیرا "X Y را افزایش می دهد." مشاور وقتی این جمله را می بیند باید توقف کند و بپرسد: آیا واقعاً دلیلش این است یا عامل پنهانی وجود دارد؟ ادعای علیت؛ مقایسه کنترل شده مستلزم دانش توالی زمانی و حوزه است.

نقش شما: تحلیلگر داده های حیاتی. تجزیه و تحلیل زیر حاوی یک ادعای "X را افزایش می دهد Y" است. وظیفه: - ارزیابی کنید که آیا این رابطه همبستگی است یا علیت موجه. - 3 عامل پنهان (سوم) احتمالی را که ممکن است بر هر دو تاثیر بگذارد. - بگویید چه شواهد اضافی (گروه مقایسه، توالی زمانی) برای حمایت از علیت مورد نیاز است. از زبان علی دقیق استفاده کنید. "ممکن" و "باید آزمایش شود" را بنویسید.

زیر سوال بردن کیفیت داده ها قبل از تفسیر

تحلیل خوب از داده های بد حاصل نمی شود. قبل از نظر دادن، از هر نمودار این سوالات را بپرسید:

کنترل کنید

چرا مهم است؟

چگونه مراقبت کنیم

داده های از دست رفته

سلول های خالی میانگین را تحریف می کنند

شمارش نسبت خالی/صفر

موارد پرت

یک نقطه پرت روند را مخدوش می کند

به حداقل حداکثر و توزیع نگاه کنید

سازگاری تعریف

آیا «گردش مالی» هر ماه یکسان است؟

تایید تعریف ستون

محدوده زمانی

آیا فصلی بودن گمراه می کند؟

مقایسه سال به سال

نمونه

آیا داده ها کل جهان را نشان می دهند؟

نرخ پوشش را بخواهید

قبل از تفسیر این جدول، یک بررسی کیفیت داده انجام دهید: - نسبت سلول مفقود/صفر چیست؟ - مقادیر شدید (پرت) در کدام سطرها وجود دارد؟ - آیا تعاریف ستون مطابقت دارند، آیا موارد مشکوکی وجود دارد؟ فقط گزارش حسابرسی بدهید. هنوز نظر نده

سه کیف کوچک

مورد 1 - خطای محاسباتی خاموش. یک مشاور دارای مدل جمع آوری گردش مالی 12 ماهه است. مدل می گوید "142.6 میلیون." مشاور در اکسل چک می کند: مجموع واقعی 128.4 میلیون. مدل به اشتباه دو ماه اضافه کرد. اگر به جای محاسبه ذهنی فرمولی درخواست می شد، اشتباهی رخ نمی داد. اگر عدد اشتباهی در ارائه وارد شده بود، اعتماد مشتری متزلزل می شد.

مورد 2 - علیت جعلی. در یک خرده‌فروش، این مدل می‌گوید: «در ماه‌هایی که تخفیف ارائه می‌شد، گردش مالی افزایش یافت، بنابراین تخفیف باعث افزایش گردش مالی می‌شود». مشاور متوقف می شود: تخفیف ها قبلاً در طول تعطیلات انجام شده است. محرک اصلی تقاضای تعطیلات است. برای اندازه گیری اثر تخفیف، مقایسه با تعطیلات بدون تخفیف لازم است. استنباط نادرست از پیشنهاد حاشیه سوزی مانند "بیایید هر ماه تخفیف بدهیم" جلوگیری می کند.

مورد 3 - تله دورتر. یک مقدار سفارش متوسط ​​منطقه به طور غیرعادی بالا به نظر می رسد. مدل این را به عنوان "منطقه حق بیمه" تفسیر می کند. مشاور خط را باز می کند: یک سفارش شرکتی 4.2 میلیونی میانگین را افزایش داد. وقتی آن خط حذف شود، منطقه معمولی است. استفاده از میانه در وهله اول از این دام جلوگیری می کند.

اعلان ضعیف / اعلان قوی

اعلان ضعیف:

این نمودار فروش را تجزیه و تحلیل کنید و یافته های کلیدی را بیان کنید.

این مدل به صورت مستقیم محاسبه می‌کند، علیت را ادعا می‌کند و یافته‌های غیرقابل تأیید می‌دهد.

اعلان قدرتمند:

نقش شما: تحلیلگر دقیق داده ها. ابتدا یک ممیزی کیفیت داده (فقدان، پرت، سازگاری تعریف) انجام دهید. سپس: روند ماهانه، 3 شکست برتر، موارد پرت.- فرمول اکسل را برای هر حساب بنویسید. من تأیید خواهم کرد.- همچنین به جای میانگین (برای دیدن اثر پرت) میانگین بدهید. - «داده می گوید» را از «معنای احتمالی» جدا کنید. ادعای علیت نکنید. - جایی که مطمئن نیستید علامت بزنید "نامشخص".

تقسیم بندی: حقیقتی که متوسط ​​پنهان می کند

یکی از قدرتمندترین حرکات در تحلیل مشاوره، تقسیم بندی است: تقسیم یک عدد کل به زیر گروه های معنادار. «مشتری متوسط» اغلب ساختاری غیرموجود است. حقیقت در زیر گروه ها پنهان است. به عنوان مثال، در حالی که به نظر می رسد متوسط ​​حاشیه سود 8 درصد باشد، 20 درصد مشتریان ممکن است 25 درصد حاشیه سود داشته باشند و 30 درصد ضرر کنند. میانگین این واقعیت را کاملاً پنهان می کند. هوش مصنوعی به شما کمک می کند تا به سرعت نمودار را در محورهای مختلف (نوع مشتری، منطقه، محصول، کانال) تجزیه کنید و پیدا کنید که کدام تفکیک برجسته ترین تفاوت را نشان می دهد.

نقش شما: تحلیلگر داده جدول زیر است. وظیفه: شکستن این داده ها در محور زیر: [نوع مشتری / منطقه / محصول]. برای هر گروه: کل، سهم (%)، میانگین و میانه، اندازه گروه (n). قوانین: - اگر گروه n<30، علامت "نمونه کوچک - توجه".- فرمول هر حساب را بنویسید. من تایید خواهم کرد.- نمایش بالاترین و پایین ترین گروه. ارزیابی کنید که آیا این تفاوت واقعی است یا ناشی از یک نقطه پرت است. ابتدا اجازه دهید به شما بگویم که انتظار کدام شکست را دارم: [فرضیه].

اشتباهات رایج

  • با تکیه بر محاسبه سر مدل. برون سپاری محاسبات به ابزار قطعی (Excel/Python)؛ نتیجه را به طور مستقل بررسی کنید.
  • اشتباه همبستگی برای علیت جمله «X Y را افزایش می دهد» را بدون مدرک ننویسید. در مورد عامل پنهان بپرسید.
  • نگاه کورکورانه به میانگین. نقطه پرت واحد میانگین را باد می کند. میانه و توزیع را نیز ببینید.
  • دور زدن کیفیت داده ها تفاسیر حاصل از داده های ناقص، تکراری یا متناقض گمراه کننده است. ابتدا بررسی کنید
  • فراموش کردن مثال تعمیم از یک نمونه کوچک یا مغرضانه به کل جمعیت نتایج اشتباهی را به همراه خواهد داشت.
  • گیج شدن داده ها با تفسیر به طور جداگانه نشان دهید که چه چیزی اندازه گیری و چه چیزی استنتاج است.
توجه: در صورتی که نتیجه تجزیه و تحلیل داده های مالی، بهداشتی یا عملیاتی مبنای تصمیم گیری باشد، محاسبات و تفسیر باید توسط کارشناس مربوطه (مشاور مالی، اکچوئری، کارشناس میدانی) تایید شود. هوش مصنوعی تجزیه و تحلیل اولیه را تولید می کند. ارزیابی و مسئولیت نهایی متعلق به انسان است.

به طور خلاصه

هوش مصنوعی کمکی قدرتمند در تفسیر داده‌های جدولی، یافتن روندها و شکست‌ها، و تولید کد تجزیه و تحلیل است. اما از آنجایی که می تواند بی سر و صدا در محاسبات اشتباه کند، لازم است که هر محاسبه را با یک ابزار قطعی دوباره انجام داده و به صورت دستی بررسی کنید. جداسازی همبستگی از علیت، نگاه کردن به میانه در کنار میانگین، بررسی کیفیت داده ها قبل از تفسیر، و رعایت محدودیت های نمونه از رشته های اصلی مشاوره هستند. مدل الگو را نشان می دهد. مردم معنا و مسئولیت می آفرینند.

وظیفه کاربردی

بیانیه فروش/هزینه واقعی یا نماینده را انتخاب کنید. ابتدا اعلان بررسی کیفیت داده را اجرا کنید و حداقل یک مشکل را پیدا کنید (فقدان، پرت، ناسازگاری تعریف). سپس روندها و شکست ها را با اعلان تحلیل قدرتمند استخراج کنید. همچنین فرمول هر حساب را به صورت دستی تأیید کنید. میانگین را با میانه مقایسه کنید و یک اثر پرت را تشخیص دهید. در نهایت، یک ادعای علیت که مدل می نویسد را پیدا کنید و آن را به عنوان "همبستگی" دوباره بیان کنید.

چک لیست

  • [ ] من هر محاسبه دقیق را با ابزار قطعی (Excel/Python) دوباره اجرا کردم.
  • [ ] من قبل از اظهار نظر یک بررسی کیفیت داده انجام دادم.
  • [ ] علاوه بر میانگین، به میانه و توزیع هم نگاه کردم.
  • [ ] من تمایز همبستگی-علیت را حفظ کردم.
  • [ ] من نمونه و محدودیت های دوره زمانی را زیر سوال بردم.
  • [ ] من "داده می گوید" و "معنای ممکن" را جدا کردم.
  • [ ] من تأیید کارشناسی را در تجزیه و تحلیل تصمیم-انتقادی برنامه ریزی کردم.