מבוא ל- QDA (QDA - Quality Data Analysis). 3 רמות ניהול תהליך Knowledge יודע למה Information יודע מה יודע איך Data Level נתונים, נתונים, נתונים...

Slides:



Advertisements
Similar presentations
כריית מידע -- Clustering
Advertisements

ממיבחניםC שאלות ++.
מבוא למדעי המחשב לתעשייה וניהול
חיפוש בינה מלאכותית אבי רוזנפלד. סוגי חיפוש כלליים UNINFORMED SEARCH -- חיפושים לא מיודעים במרחי מצבים – BFS – DFS INFORMED SEARCH – חיפושים מיודעים –
Map-Reduce Input: a collection of scientific articles on different topics, each marked with a field of science –Mathematics, Computer Science, Biology,
סמינריון מסדי נתונים בסביבת האינטרנט הנחיות למשתתף בסמינר.
To Learn or to be Taught? Harnessing Technology to Enhance Self Regulated Learning.
רקורסיות נושאי השיעור פתרון משוואות רקורסיביות שיטת ההצבה
The Implementation of a Cost Effectiveness Analyzer for Web- Supported Instruction: A Case Study Anat Cohen, Rafi Nachmias (Tel Aviv University)
שיטות מחקר בתקשורת שיעור מס' 3- מדידה. מדידה -הגדרה מדידה - מתן ערך של משתנה לכל תצפית. מדידה - מתן ערך של משתנה לכל תצפית. דוגמא: מספר עיתונים שקורא.
מה החומר למבחן ? כל החומר שנלמד בהרצאות ובתרגולים. לגבי backtracking: לא תידרשו לממש אלגוריתם, אך כן להבין או להשלים מימוש נתון. אחת משאלות המבחן מבוססת.
רקורסיות נושאי השיעור מהן רקורסיות פתרון רקורסיות : שיטת ההצבה שיטת איטרציות שיטת המסטר 14 יוני יוני יוני 1514 יוני יוני יוני 1514.
חורף - תשס " ג DBMS, צורות נורמליות 1 צורה נורמלית שלישית - 3NF הגדרה : תהי R סכמה רלציונית ותהי F קבוצת תלויות פונקציונליות מעל R. R היא ב -3NF.
מבנה כללי של דוח הסיור. רקע כללי והצגת מטרות העבודה ושאלת המחקר.
מבוא למדעי המחשב © אריק פרידמן 1 מצביעים כמערכים דוגמה.
מרצה: פרופסור דורון פלד
תוכנית דעת, שנה"ל תשס"ח, מרצה יהודה הופמן1 מערכות מידע ארגוניות מערכות מידע ארגוניות הרצאה מס' 2: מהו מידע ?
ממשק המשתמש שימושיות או בעצם תכליפאניות?. ISO9241 Web usability is the extent to which a web site enables users, in a given context of use, to achieve.
משטר סטטי שערים לוגיים Wired Drives – © Dima Elenbogen 2009, Moshe Malka :29.
Formal Specifications for Complex Systems (236368) Tutorial #6 appendix Statecharts vs. Raphsody 7 (theory vs. practice)
תכנות תרגול 6 שבוע : תרגיל שורש של מספר מחושב לפי הסדרה הבאה : root 0 = 1 root n = root n-1 + a / root n-1 2 כאשר האיבר ה n של הסדרה הוא קירוב.
מטרה : ניבוי תחום התפוצה של מינים באמצעות מידע על הנישה האקולוגית שלהם מודלים מבוססי נישה כאמצעי לניבוי דגמי תפוצה הבעיה – מעבר ממידע נקודתי למפות תפוצה.
1 Formal Specifications for Complex Systems (236368) Tutorial #1 Course site : T.A. :Emilia Katz.
Questions are the Answer Penick&all H ISTORY R ELATIOINSHIPS A PPLICATION S PECULATION E XPLANATION.
עיבוד אותות ותמונות במחשב
משחק מכף לכף כבסיס לסיעור מוחין משותף אביגיל אורן תמי זייפרט דוד מיודוסר
A. Frank File Organization Various Parameter Issues.
ערכים עצמיים בשיטות נומריות. משוואה אופינית X מציין וקטור עצמי מציינת ערך עצמי תואם לוקטור.
יסודות סטטיסטיקה תיאורית
אביב תשס " ה JCT תיכון תוכנה ד " ר ר ' גלנט / י ' לויאןכל הזכויות שמורות 1 פרק 11 Statecharts תכונות מתקדמות.
Data Structures, CS, TAU, Perfect Hashing 1 Perfect Hashing בעיה : נתונה קבוצה S של n מפתחות מתחום U השוואה ל - Hash : * טבלה קבועה (Hash רגיל - דינאמי.
1 Data Structures, CS, TAU, Perfect Hashing בעיה: נתונה קבוצה S של n מפתחות מתחום U השוואה ל- Hash : * טבלה קבועה (Hash רגיל - דינאמי) * רוצים זמן קבוע.
מערכים עד היום כדי לייצג 20 סטודנטים נאלצנו להגדיר עד היום כדי לייצג 20 סטודנטים נאלצנו להגדיר int grade1, grade2, …, grade20; int grade1, grade2, …, grade20;
עקרון ההכלה וההדחה.
מערכות הפעלה ( אביב 2006) חגית עטיה © 1 סיכום הקורס.
הוספת תקשורת ל - [ תפקידי רוחב בצוות ]. ארכיטקטורת תקשורת מה מבנה האפליקציה ? באילו טכנולוגיות \ ספריות השתמשתם ? מדוע ?
תכנות מונחה עצמים Object Oriented Programming (OOP) אתגר מחזור ב' Templates תבניות.
רכיבי ידע בהוראה ד"ר גילה קאופמן.
Markov Decision Processes (MDP) תומר באום Based on ch. 14 in “Probabilistic Robotics” By Thrun et al. ב"הב"ה.
יסודות סטטיסטיקה יישומית
A. Frank File Organization Hardware Size Parameters.
מה היום ? - - חזרה מהירה. - קריאה וכתיבה לקבצים. - בניית תוכנית כתיבה low-level - בניית ערוץ גלובלי והדגמה מול חומרה - low-level DAQ, פולימורפיזם וטריגר.
1 מבוא למדעי המחשב סיבוכיות. 2 סיבוכיות - מוטיבציה סידרת פיבונאצ'י: long fibonacci (int n) { if (n == 1 || n == 2) return 1; else return (fibonacci(n-1)
Safari On-line books. מה זה ספארי ספארי זו ספריה וירטואלית בנושא מחשבים היא כוללת יותר מ כותרים כל הספרים הם בטקסט מלא ניתן לחפש ספר בנושא מסוים.
Points on a perimeter (Convex Hull) קורס – מבוא לעבוד מקבילי מבצעים – אריאל פנדלר יאיר ברעם.
(C) סיון טל גילוי מידע וזיהוי תבניות תרגול מס. 9 גילוי מידע וזיהוי תבניות תרגול מס. 9 דחיסת נתונים מהו קידוד תכונות של קידודים אי - שוויון קרפט.
שיטות מחקר איכותניות שיעור מס' 2. קיימת מציאות אובייקטיביתהמציאות שאנו תופסים תמיד מתווכת. מטרת המחקר : פירוק המציאות למרכיביה. גילוי חוקיות וקשרים סיבתיים.
(C) סיון טל 1 גילוי מידע וזיהוי תבניות תרגול מס. 5 Principal Component Analysis חזרה על שיטות שערוך לא פרמטריות.
Kashrut is a mitzvah in the Torah and has been passed on through generations. Kashrut is a chok. this means that we don’t know why we do it but we.
Methods public class Demonstrate { public static void main (String argv[]) { public static void main (String argv[]) { int script = 6, acting = 9, directing.
מבוא למדעי המחשב לתעשייה וניהול הרצאה 7. סברוטינות subroutines.
מבנה נתונים ואלגוריתמים ) לשעבר - עיבוד מידע( ד"ר אבי רוזנפלד ד"ר אריאלה ריכרדסון.
מבוא לייצור ממוחשב - CIM מבוא. מטרות הקורס הקורס מיועד להקנות הבנה בטכנולוגיה, תכנון יישום ובקרה של מערכות ייצור ממוחשבות. הקורס ידון ביישום טכנולוגיות.
Visual Studio Team System Visual Studio Team System הילה להב רייס מנהלת תחום Life Cycle Management מנהלת תחום Life Cycle
שיאון שחוריMilOSS-il מוטיבציה  python זה קל ו C זה מהיר. למה לא לשלב?  יש כבר קוד קיים ב C. אנחנו רוצים להשתמש בו, ולבסס מעליו קוד חדש ב python.
ניהול חדשנות: איך עושים את זה?
מספרים אקראיים ניתן לייצר מספרים אקראיים ע"י הפונקציה int rand(void);
מבוא למדעי המחשב סיבוכיות.
המכון למצב מוצק, הפקולטה לפיזיקה
מרכיבי ה - SWOT עוצמות STRENGTHS)) נקודות כוח:
תוכנה 1 תרגול 13 – סיכום.
שילוב שיטות קוגניטיביות בטיפול ריפוי בעיסוק
עבודה עם נתונים באמצעות ADO.NET
השוואת נתונים למודל הסתברותי - כללית
בעיות נוספות ב-NPC.
מערכים של מצביעים הקצאה דינאמית
תוכנה 1 תרגול 13 – סיכום.
מבוא למערכות מידע פרק 1.
מחסנית ותור Stacks and Queues.
תוכנה 1 תרגול 13 – סיכום.
Presentation transcript:

מבוא ל- QDA (QDA - Quality Data Analysis)

3 רמות ניהול תהליך Knowledge יודע למה Information יודע מה יודע איך Data Level נתונים, נתונים, נתונים...

3 רמות ניהול תהליך כיבוי שריפות תפעולית אסטרטגית

הדרך מנתונים למידע אסוף נתונים מבט ראשוני תוך שימוש בכלים גרפיים ניפוי (ניקוי) נתונים טיפול בנתונים תוך שימוש בכלים כמותיים ניתוח (מסקנות והמלצות) מידע

כדי לקבל החלטות אנחנו זקוקים למידע. שאלה: " העולם מלא רעש,אז איך להפוך נתונים למידע ?" תשובה: בעזרת כלים סטטיסטיים

מה עשויה לעשות חשיבה סטטיסטית ? להפריד בין עובדות למבדות למקד תשומת לב בבעיה לשכנע לעבור מתיקונים לכוונונים להבין את המצב האמיתי שקיים לעזור לקבוע מטרות ויעדים נכונים לתרום לשיפור ערך

דוגמה לחוסר הבנה סטטיסטית נומינל = ממוצע –מעל ממוצע – טוב ! –מתחת לממוצע – רע ! פיזור = אפס יש למנוע (לסלק) כל מה שסוטה מערך נומינלי

סוגי נתונים נתון רציףבדיד

4 סולמות של נתונים סולם תאורפעולות מותרות סולם שמי סולם דירוגי סולם מרווחי סולם יחסי

תוכנית אסוף נתוני איכות צריכה לספק תשובה ל-5 שאלות 1.מה ?- יש לזהות תכונות קריטיות לאיכות 2.היכן ? – להגדיר נקודות קריטיות של התהליך 3.כמה ?- להגדיר מדגם אופטימלי 4.מתי ? – להגדיר תדירות הדגימה 5.איך ? – להגדיר שיטת בדיקה (מדידה) וכלים נחוצים

3 עקרונות של אסוף נתונים 1.בשלב התחלתי תוכנית אסוף נתונים צריכה להתייחס רק למטרות המחקר. 2.בשלב סופי תוכנית אסוף נתונים צריכה להתייחס רק לתוצאות המחקר. 3.תמיד תבדוק אישית את הנתונים שנאספו, אל תניח מראש שנתונים יאספו בדיוק בהתאם לתוכנית שפיתחת.

דרכים לאסוף נתונים אסוף נתונים שיטה סבילה (בחינה,SPC...) טוב לניטור שיטה פעילה (תכנון ניסויים-DOE) טוב לניתוח סיבתי

שיטה סבילה תשומות נבדקות (בחינת קבלה) תפוקות נבחנות (בדיקה סופית) פרמטרים של תהליך מבוקרות (מעקב אחר התהליך-SPC)

שיטה פעילה קלטים - should be changed תגובות - should be measured גורמים בלתי נשלטים – should be simulated גורמים נשלטים - should be changed

ניתוח מדדים ל: מגמה (ממוצע, חציון, שכיח) – מדגם קטן פיזור (שונות,סטיית תקן,טווח) - מדגם בינוני צורת ההתפלגות (skewness, kurtosis)- מדגם גדול

בעיות של נתונים העדר נתונים מחסור נתונים יותר מדי נתונים נתונים לא רלוונטיים נתונים שגויים (למשל:בעקבות שגיאות מדידה כגון:דיוק,דייק,אמינות,אי יציבות,כושר הבחנה) נתונים מורעשים אי שלמות של נתונים

איתור וניפוי חריגים חריג (outlier) – שונה לגמרי משאר האוכלוסייה/מדגם,לכן לגביו קיים חשד, שהוא בא מאוכלוסייה אחרת.

ניפוי חריגים אם, כתוצאה של שימוש באיזשהו test, הנתון מזוהה כחריג, יש להוציא אותו מהמדגם.אחרי זה נתן להפעיל את אותו test שוב על מה שנותר. מדיניות לגבי החריג שהוצא: פשוט להוריד אותו לנתח אותו בנפרד

שיטת ניפוי חריגים למשתנה חד מימדי Grubbs’ Test: if T>Tcr

טבלה ל- T cr גודל מדגםT cr

ניפוי חריגים למשתנים רב מימדיים Jackknife Cross-Validation