Data Research Analyst 280 שעות לימוד אקדמיות כולנו חיים בעידן המידע ועובדים או שואפים לעבוד בארגונים שמגדירים את עצמם כ-.Data Driven Company ארגונים אלה בוחרים אסטרטגית קבלת החלטות על בסיס ניתוח דאטה שנאסף. תהליך ניתוח נתונים הוא תהליך מורכב ומאתגר. ככל שארגון אוסף יותר ויותר מידע, נדרשת הבנה מעמיקה יותר של תהליכים עסקיים של הארגון ושליטה בכל הדאטה שנאגר. בסופו של דבר החיבור של השניים מוביל להצלחה בהפקת תובנות עסקיות קריטיות חיוניות עבור הארגון. נאיה קולג', חטיבת הדרכה בחברת נאיה טכנולוגיות, מתמחה בעולמות הדאטה מעל עשור ומציעה מסלול הכשרה וקורסים בתחום הדאטה במטרה להכשיר את הדור החדש של מומחי דאטה מקצועיים ובעלי ידע העדכני והנדרש ביותר בתעשיה. מסלול הכשרה זה צמח מהשטח לנוכח הביקוש הגובר לאנליסטים בעלי יכולות טכניות גבוהות ובעלי ידע מעשי ופרקטי בעבודה עם טכנולוגיות מגוונות. תיאור תפקיד: כיום,תפקידו של אנליסט הנתונים אינו תחום או ייחודי למגזר העסקי בלבד, אלא הוא תפקיד הנדרש בכל ענף עתיר נתונים, כולל גם מגזר ציבורי, זרועות הממשל השונות וכמובן בענפי המדע השונים. האנליסטים עובדים עם כלים מגוונים, נדרשים לחשיבה אנליטית על מנת להפיק ידע מהנתונים, כישורי למידה עצמית, ולרוב הם בעלי תארים אקדמיים רלוונטיים. בשנים אחרונות תפקיד של אנליסט עבר אבולוציה מדהימה. הוא התחיל את דרכו הטכנולוגית בעבודה על קבצי אקסל, בעיקר, בהמשך נדרש לעבודה עם שפת SQL על מנת לבטל את התלות באנשי IT בארגון להשגת הנתונים הרלוונטיים לניתוח, רכש יכולת לעבוד עם כלי ויזואליזציה מתקדמים כגון Tableau,PowerBI ואחרים, ולבסוף כיום אנו עדים לדרישה בידע בכלים טכנולוגיים נוספים שמקפיצים את החשיבות ואת הערך שלו בארגון. ובפרט היכרות מעמיקה עם Python )כשפת תכנות שמהווה כלי נוח וגמיש יותר בהיבטים של עבודה עם דאטה לא טבלאי ותחקור אנליטי(, יישום שיטות סטטיסטיות, עבודה עם נפחים גדולים של נתונים, היכרות עם עולם ה- Learning Machine ו- Data Big ואף יכולת לנתח נתוני.Big Data בין המשימות היומיומיות של האנליסט אפשר למנות: עבודה עם כמויות גדולות של נתונים )גם מול בסיסי נתונים רלציוניים וגם ) NoSQL ו- Python SQL כתיבת שאילתות - Querying Data Data Processing אינטגרציה, עיבוד והכנת נתונים לניתוח Data Models מידול נתונים - בניית מודל נתונים שיושב בבסיסו של כלי BI המתאר קשרים בין הנתונים - Dashboards and Reports בניה ותחזוקת דוחות, מדדים וערכים, ופיקוח על ביצועי המוצר Data Visualization - יישום טכניקות ויזואליזציה להצגת נתונים גם בכלי BI וגם באמצעות Python יישום שיטות סטטיסטיות, A/B Testing וניתוח היעילות שלהם Data Analysis Project יכולת להוביל פרויקטים אנליטיים מקצה לקצה כולל איסוף ומניפולציה על נתונים, מיזוג ומידול, הגדרת מדדים והערכת ביצוע, פתרון בעיות עבודה עם בעלי תפקידים נוספים )מנהלי מוצר, מנהלי פרויקטים, מפתחים, אנליסטים,,Data Scientists Engineers ואחרים( כדי לבסס הבנה והיכרות עם הצרכים ומטרות ארגוניות Data
מבנה המסלול: מסלול הכשרה זה כולל כלים רבים הנדרשים בשלבים השונים של העבודה עם נתונים בארגון. בשלב הראשון נחזק ונעמיק את הידע בשפת SQL לכתיבת שאילתות מורכבות, יצירה של אובייקטים, שימוש בפונקציות אנליטיות לתחקור של הנתונים. הלימוד במודול זה יבוסס על Use Cases רלוונטיים במטרה לחבר בין החומר הנלמד לבעיות עסקיות אימיתיות איתן מתמודד אנליסט. עולם ה- BI החדש שופע כיום בכלים מתקדמים המאפשרים Self-Service BI ותפקיד האנליסט תופס מקום יותר ויותר משמעותי שכן הוא אינו נדרש להסתמך על אנשי IT ו- BI. במודול השני נלמד לעבוד עם כלי מוביל בתחום.Tableau BI הלימוד יכלול את כל התהליך מקצה לקצה, החל מיבוא נתונים, הכנתם לקראת הניתוח, נתייחס למידול נתונים, כולל חישובים בסיסיים ומתקדמים, וכמובן בניית Dashboard ועבודה עם טכניקות ויזואליזציה מתקדמות שהכלי מציע. מודול זה יכלול גם את היכולות החדשות של Tableau שיצאו בגרסת. 2020 תחום נוסף שנלמד הקורס הינו אחד התחומים החמים בעולם האנליזה, אשר גרם להתפתחות וכניסה של כלים כמו Tableau הינו תחום.Data Visualization במודול הזה נלמד עקרונות חשובים בויזואליזציה של הנתונים, ובניית דשבורדים תוך כדי יישום של עקרונות אלה. בחלקו השלישי של המסלול נלמד לתכנת ב- Python, השפה המובילה כיום לתחקור הנתונים. נרכוש כלים לעבודה עם נתונים ממקורות שונים ולהצגתם. המודול כולל גם תכנות בסיסי וגם מתקדם עד לרמה של פיתוח מונחה-עצמים Object-( )Oriented כאשר גם בעולמות הדאטה תהליך הפיתוח מכיל עבודה עם אובייקטים. בהמשך המודול נלמד את סט הכלים לעבודה עם נתונים בכלל ונתונים טבלאיים בפרט חבילות יעודיות לעבודה עם נתונים, במרכזן חבילת ה- pandas. דרכה ניחשף לעקרונות שונים בהכנה ובויזואליזציה של נתונים תוך כדי התייחסות לחבילות נוספות כגון matplotlib,numpy ו- seaborn. נלמד לעבוד עם קבצים ומקורות שונים כגון JSON,CSV ו- HTML, עבודה עם בסיסי נתונים ורשת האינטרנט. בעזרת הכלים הללו נכיר לעומק את מגוון השיטות של.)EDA( Exploratory Data Analysis בסיומו של המודול סטודנטים יהיו מסוגלים לבנות Data Pipeline מקצה לקצה. המודול הבא עוסק בסקירה של מונחים, שיטות וטכניקות מעולם הסטטיסטיקה. לאחר שנכיר את מושגי היסוד של העולם הסטטיסטי, נראה כיצד הטרמינולוגיה החדשה מסייעת לנו לתאר את הדאטה בצורה שלמה יותר. המונחים יעזרו לנו לנסח בצורה מתמטית יותר את ההתפלגות של הדאטה, ובכך יאפשרו להחיל על הדאטה הרלוונטי חוקים סטטיסטיים בכדי להחליט האם תופעה מסוימת צפויה ו/או מובהקת. המטרה העיקרית במודול הזה הינה לקשר בין העולם העסקי והדאטה הארגוני לתחום מדעי של סטטיסטיקה ולהבין איך בעזרת שיטות סטטיסטיות ניתן להפיק תובנות נוספות על הנתונים. מודול הבא מציג סקירה מעמיקה וטכנית של תחום.)ML( Machine Learning גם אם אנליסט נתונים לא מריץ אלגוריטם על דאטה, שכן זהו תפקידו של Data Scientist בארגון, עדיין ישנה חשיבות רבה להיכרות עם התחום. במודול זה נסקור את סוגי הבעיות הנפוצות תחום ML ונכיר מונחי יסוד. מטרת המודול לספק היכרות בסיסית עם עולמות ה- ML ולאפשר לאנליסט לתקשר ברמה מקצועית ובשפה משותפת עם חוקרים Scientists( Data ב( ארגון. מודול אחרון במסלול הכשרה זה יחשוף את הסטודנטים לעולם ה- Data,Big ויעניק יכולת ניתוח נתונים בסביבת - Hadoop פרויקט-על מבוסס קוד פתוח של קרן התוכנה אפאצ'י, שמטרתו לעבד כמויות גדולות של נתונים Data( )Big בסביבת הפיתוח. נתחיל בהיכרות עם עולמות ה- Data המסורתיים וטכנולוגיות Big Data חדישות השולטות כיום בשוק המידע. ולאחר מכן נצלול ללמידה שלכלים שונים המאפשרים ניתוח יעיל, מהיר ופשוט של נתונים בסביבת,Hadoop על מנת לייצר ערך עסקי לארגון מהנתונים שבבעלותו. מעבר לתרגול רב בשיעורים, במהלך המסלול הסטודנטים עובדים על חמישה פרויקטים שמאפשרים לסטודנטים ליישם את הידע הנרכש במהלך הלימודים על בעיות עסקיות אמיתיות. קהל יעד: המסלול מיועד כל מי שמועניין להיכנס לעולם המרתק של ניתוח נתונים ברמה טכנולוגית מתקדמת ובעלי תארים בתחומים: סטטיסטיקה, מתמטיקה, מערכות מידע, תעשיה וניהול, מדעי המחשב ובעלי רקע ונסיון בעבודה עם נתונים. דרישות קדם :
תואר אקדמי בתחומים בתחומים רלוונטיים שפת SQL ברמה בסיסית ומעבר מבחן כניסה ב- SQL נסיון בעבודה עם נתונים ומערכות מידע )כלי ) BI אנלגית ברמה גבו ה תוכנית הלימוד: Part 1: Advanced SQL SQL Basic Programming Baseline Data Modeling Basics Basic and Advanced Analytic Functions Code Objects: Views Comprehensive Business Uses Cases Final Project Part 2: Tableau Connecting to Data o Setting Up Connections and Data Sources o Organizing Your Data o Relationship Data Modeling Desktop Basics Creating a Report o Displaying your data o Understanding Fields o Chart types o Filtering & Sorting o Organizing Data: Groups, Sets and Bins o Parameters Dynamic and Statics Advanced Reporting o Creating and Editing Calculated Fields o Aggregations, String Functions, Date Calculations o Table Calculations o Level of Detail o Data Blending o Advanced Charts o Analytics and Forecasting o Mapping Data Geographically Advanced Formatting Dashboards o Combining views into a dashboard o Sizing, Layout and Formatting o Interactivity: Filters and Actions Final Project
Part 3: Data Visualization Data Visualization עקרונות בהצגה ויזואלית של נתונים - מה זה דאטה ויז ולמה צריך את זה סוגי ויזואליזציות בעולם העסקי איך לספר את הסיפור של המספרים סוגי גרפים, מפות וטבלאות הטיות קוגניטיביות בהצגת נתונים + חוקי הגשטלש צבעוניות ומשמעותה כיצד להשתמש בטקסטים וטיפוגרפיה בצורה נכונה אינטראקטיביות ויתרונותיה בהצגת הדאטה בניית דשבורדים שמתאימים למשתמשים Part 4: Python Programming Basic Python Fundamentals o Intro o Python essentials o The working environment Data types o Numbers o Strings o Booleans o None Collections o Lists o Tuples o Dictionaries o Sets Control flow o if else o for in o list comprehension o while Textual interface o input o format מהו תהליך תהליך עבודה נכון על דשבורד צרכים של המשתמשים סוגי דשבורדים בניית היררכיה ולייאאוט, הגדרה מטרה ופעולה בחירת סוג הגרף, המפה או הטבלה שימוש בצבעים כדי להדגיש את הבעיות שימוש בטקסטים וטיפוגרפיה בצורה נכונה אינטראקטיביות בדשבורדים
Intermediate Python Functions o User-defined functions o Built-in functions o Lambda expressions Text files The standard library o import o datetime EDA and visualizations The NumPy library o Array o Broadcasting The matplotlib library o matplotlib objects o Plotting The pandas library o Series and Index o DataFrame o GroupBy o Visualizations Advanced visualizations o Seaborn o Plotly General tools o Intro to regular expressions (re) o API's and Connecting with Data Resources JSON Intro to working with DBs with SQLAlchemy package Final Project Part 5: Introduction to Statistics and Data Analysis Combinatorics Probability Conditional probability & Bayesian thinking o Complete probability theorem o Central limit theorem Random variables and corresponding events Continuous & discrete distributions Hypothesis testing o t-test o Chi-squared test o ANOVA & F-test A/B testing
Time-series Final Project Part 6: Machine Learning Introduction Introduction short overview Background and motivation Programming fundamentals Data Preparation Regression Introduction and measures Linear regression Classification Introduction and measures Decision tree Logistic regression k-nearest neighbors and the metric concept Clustering Introduction and measures k-means Agglomerative clustering and the linkage concept Miscellaneous Deep Learning Recommender systems Text mining and NLP Part 7: Big Data Analytics Data Technologies Introduction Introduction to Big Data Hadoop - a closer look NoSQL Technologies and trends in the world of Big Data Hadoop Infrastructure and Ecosystem Services Hadoop core and ecosystem - The essentials (e.g. HDFS) Data ingestion technologies Overview (Sqoop, Flume, Nifi) Using Hive to query HDFS data with SQL Using Impala to query HDFS data with SQL
Deeper look into Hive and Impala o Understanding Hive tables o Working with partitions o Understanding file formats o Useful functions and tools for Hive (Regex, Ngrams, User-defined functions) o Working with unstructured data o Querying complex data types o Performance considerations Statistics and execution plans Using Oozie as a workflow manager and job scheduler Final Project