در عصر حاضر و با گسترش تکنولوژی های جدیدِ، حجم عظیمی از داده های تولید شده، فرصت ها و چالش های جدیدی را ایجاد کردهاست. این داده ها ممکن است از منابع متنوعی مانند سامانه های تراکنشی، حسگرها،گزارش های سیستمی و مخازن متنی مانند شبکه های اجتماعی جمع آوری شوند. اگرچه این داده ها به صورت ناهمگون، خام و اغلب با کیفیت پایین ذخیره میشوند اما به عنوان یک دارایی راهبردی پتانسیل تبدیل به استخراج بینش های سودمند عملیاتی را دارند. به منظور بهره مندی از این پتانسیل نیاز به طراحی و پیاده سازی زیرساخت ها و فرایندهایی است که قادر به مدیریت چرخه کامل حیات داده ( از مرحلهی دریافت دادهی خام تا مرحله ارائه بینش عملیاتی) باشند. در رویکرد سنتی هر یک از مراحل جمع آوری، ذخیره سازی، پیش پردازش و پردازش و مصورسازی داده به صورت جداگانه ای طراحی میشد. از این رو ابزارها و فناوری های مختلف مورد استفاده در هر مرحله در اغلب موارد با یکدیگر ناسازگار بودند. علاوه بر آن پیاده سازی و نگهداری زمان و هزینه ی زیادی نیاز داشت و پروژه های تحلیل داده را به فعالیتی پیچیده تبدیل میکرد.از این رو نیاز به یک سکوی جامع تحلیل کلان داده احساس میشود. این کارگاه به معرفی یک سکوی جامع تحلیل کلان داده مبتنی بر مفاهیم، ابزارها و الگوریتم های هوش مصنوعی اختصاص دارد که به منظور رفع چالش های یاد شده طراحی شده است.معماری این سکو مشتمل مبتنی بر5 موتور تخصصی و یکپارچه است که هر یک مسئولیت بخشی از تحلیل داده را به عهده دارد.این5موتور عبارتند از جمع آوری دادگان، ذخیره سازی و نگهداری، پیش پردازش و تمیزسازی، پردازش و تحلیل و مصورسازی و نمایش.ابتدا موتور جمع آوری دادگان، داده های مورد نیاز راجمع آوری میکند. سپس این داده ها توسط موتور ذخیره سازی به صورت ساختارمند در پایگاه داده ذخیره میشوند. موتور پیش پردازش وظیفه ی تمیزسازی و پیش پردازش داده های خام و تولید داده های تمیز، مرتب و نرمال شده را دارد. سپس موتور پردازش که شامل چندین مولفه ی پردازشی است،پردازش مورد نظر را روی داده های پیش پردازش شده، اعمال میکند و نتایج تحلیلی استخراج شده از آن در پایگاه داده ی تحلیلی موجود در موتور ذخیره سازی نگهداری میشوند. در نهایت این نتایج برای نمایش به موتور مصورسازی میروند.بدین ترتیب داده های خام توسط سکو به بینش های قابل اقدام و قابل فهم در مراحل مختلف تبدیل میشوند. معماری و زیرساخت سخت افزاری و نرم افزاری این سکو نیز یکی از بخش های مهم وضروری است که در این کارگاه به آن پرداخته خواهد شد.
