همایش داده های عظیم– دی ماه 1393

Slides:



Advertisements
Similar presentations
Section Ten. شورون تگزاکو ChevronTexaco زنجیرۀ تأمین خود را به وسیله فناوری اطلاعات، مدرن ساخت کار اصلی شرکت، حفاری، تصفیه، حمل و نقل و فروش بنزین و نفت.
Advertisements

به نام خدا معرفی چهارچوب معماری C4ISR ریحانه جباروند
فاکتورهای مهم در ایجاد یک مقاله علمی
Professor: Dr. Ahmad Abdollahzadeh Amirkabir University of Technology, Computer Engineering and Information Technology Department Intelligent Systems Laboratory.
طبقه بندی تعاریف سیستم های تصمیم یار
Definition. قانون بیز P(b|a) = P(a|b)P(b)/P(a) P(b|a) = P(a|b)P(b)/P(a) این قانون برای استنتاج آماری استفاده می شود. این قانون برای استنتاج آماری استفاده.
1 بسم الله الرحمن الرحیم. 2 پژوهش های آموزشی فرآیند – محور (POER) علی عمادزاده عضو هیئت علمی EDC
Decision Tree.
حمایت از داده سارا فرد ملک محمدی مقدمه در عصر تکنولوژی اطلاعات حمایت از حریم خصوصی فرد در قالب جدیدی تحت عنوان حمایت از داده شکل تازه ای به.
© 2005 Prentice Hall Inc. All rights reserved. o r g a n i z a t i o n a l b e h a v i o r e l e v e n t h e d i t i o n.
تعاریف هوش تجاری مهدی گرکانی درس هوش تجاری
معماری DSS.
© 2005 Prentice Hall Inc. All rights reserved. o r g a n i z a t i o n a l b e h a v i o r e l e v e n t h e d i t i o n.
DSS in Actions. شرکت آتلانتیک الکتریک یک شرکت پیمانکاری سرویس دهی کامل الکتریکی برای کارهای صنعتی و تجاری است که در سال 1969 در چارلزتن تاسیس شد. یک شرکت.
فایل پردازی در C File based Programming in C. انواع فایل متنی –سرعت بالا –حجم کمتر –امکان دسترسی تصادفی –حفظ امنیت داده ها دودویی (باینری) –امکان باز.
1 Network Address Translation (NAT). 2 Private Network شبکه خصوصی شبکه ای است که بطور مستقیم به اینترنت متصل نیست در یک شبکه خصوصی آدرس های IP به دلخواه.
Internet Protocol Security An Overview of IPSec. رئوس مطالب:  مشکلات امنیتی چیست؟  مفهوم TCP/IP  امنیت در چه سطحی؟  IP Security  سرویسهای IPSec Security.
روش تحقیق جلسه چهارم دانشگاه صنعتی اصفهان دانشکده کشاورزی
پیاده سازی کنترلر PC/104. Contents PC/104 پیاده سازی کنترلر HILتست 1.
Eric S. K. Yu Faculty of Information Studies, University of Toronto
افزایش میزان فروش بوسیله سئو سایت SEO. فروش و سئو SEO ( بهینه سازی وب سایت برای موتور جستجو Search Engine Optimization ) رابطه ‌ ای مانند محتوا و بازاریابی.
معماری فناوری اطلاعات چیست؟
مکان یابی در شبکه های حسگر بیسیم
تمرین هفتم بسم الله الرحمن الرحیم درس یادگیری ماشین محمدعلی کیوان راد
معرفی پرتال سازمانی درسا مرکز فناوری اطلاعات و ارتباطات
ویژگی های DHCP جلوگیری از Conflict سرعت بخشیدن به کارها مدیریت متمرکز
فصل اول: رسانه های ذخیره سازی
بنام خدا زبان برنامه نویسی C (21814( Lecture 12 Selected Topics
واحد اسلامشهر TPS دکتر نیلوفر میرسپاسی زهرا رضائی پاییز 1393.
Address: Times New Roman, size 34
PACS = ( Picture Archiving and Communication System)
استانداردهای تصاویر دیجیتال پزشکی با فرمت دایکام DICOM در سیستم PACS
چگونه بفهمیم آیا ژورنالی ISI است؟ ایمپکت فاکتور دارد یا خیر؟
نرم افزار نگهداری و تعمیرات مبتنی بر مدیریت دانش نت CMMS-MKMS
سیستم مدرسه کارنیک شرکت کارنیک سیستم
عنوان : ساختارو عملکرد نظام سلامت
مدیریت مالی و اقتصاد مدیریت موضوع : نقطه سر به سر زمستان 93
Route configuration for 5400W ADSL Router
انجمن انفورماتیک ایران سمينار
VALUE ADDED TAX. VALUE ADDED TAX چیدمان ارائه : 1.تعریف مالیات 2.انواع مالیات 3.هدف از مالیات 4.مالیات در دولت ایران از قبل تا کنون 5.مفهوم مالیات.
متان در جوّ مریخ به تازگی گاز متان در جوّ مریخ، توسط مشاهدات تلسکوپ‌های زمینی، کشف شده است توزیع گاز متان در سیاره یکنواخت نبوده و در طول زمان نیز تغییر.
SSO Single Sign-on Systems
آموزش و یادگیری Education and Training
چرخه تدوین راهبرد و اجرای مدیریت دانش
کوئیز از جلسه قبل) کارخانه ای در حال خرید قطعه‌ای برای یکی از ماشین‌آلات خود می باشد اگر نرخ بهره 10% برای محاسبات فرض شود، دو مدل از قطعه ماشین در دسترس.
بسم الله الرحمن الرحیم.
عنوان دانشجو: نام دانشجو رشته تحصیلی: رشته تحصیلی، گرایش
ارائه کار مازاد با عنوان :
آدرس : میدان هفت تیر – بن بست هوشیار – پلاک 5
سیستم های اطلاعات مدیریت Management Information systems
اولین همایش ملی کاربردهای فناوری اطلاعات در توسعه علمی و ارتقاء سیستم سلامت با رویکرد اقتصاد مقاومتی اینترنت اشیاء تاثیر آن بر توسعه علمی و سیستم های.
ASP.NET فرناز شریعت.
دینامیک سیستمهای قدرت مدرس: دکتر مهدی بانژاد
فصل 4. فصل 4 جمع آوری نیازمندیها و تحلیل سیستم : فاز تولید هر نرم افزار با مرحله ای به نام تعریف مسئله شروع می شود. منظور از تعریف مسئله شناخت محیط.
جلسه ششم حفاظت در سیستم عامل
تدريس يار: ميثم نظرياني
بسم الله الرحمن الرحیم هرس درخت تصمیم Dr.vahidipour Zahra bayat
جستجوی منابع الکترونیک
به نام خدا Koha برنامه.
سمینار SharePoint رانندگی در بزرگراه پرتال ها
فصل ششم مدارهای ترتیبی.
فرشاد آقابزرگی هوش تجاری
ابزارهای جستجوی پایان نامه
یادگیری الکترونیکی مبتنی بر دانش
سخت افزارهای امنیتی Hardware Security تهیه و ارایه : یونس جوان.
داده های عظیم و تغییر ساختار کسب و کار مؤسسات مالی
Uniprocessor Scheduling
فصل 8 –Process and Deployment
آشنایی با فرایند داده کاوی در نرم افزار R گروه داده کاوی دایکه داود دوروش تابستان 6139.
سد خونی- مغزی. تکنولوژی نمایش فاژی و کاربرد آن  مقدمه و تاریخچه  نمایش فاژی در تولید آنتی بادی مونوکونال.
Presentation transcript:

همایش داده های عظیم– دی ماه 1393 تحلیل داده‏های عظیم به عنوان سرویس مدلی برای ارائه خدمات تحلیل داده‏های عظیم بر بستر رایانش ابری همایش داده های عظیم– دی ماه 1393 امیر صحافی – مهدی نظری چراغلو sahafi@iau.ac.ir

فهرست منابع داده‏های عظیم مسئله تحلیل داده های عظیم مروری بر رایانش ابری معماری و سرویس های ابر تحلیل داده‏های عظیم و رایانش ابری مدل Hadoop و معماری Map-Reduce تحلیل داده های عظیم به عنوان سرویس نتیجه‏گیری ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

داده های عظیم در حال حاضر روزانه حجم بسیار عظیمی داده در حال تولید است. بیش از 90% داده­های تولید شده و ذخیره شده در دنیای دیجیتال به نوعی غیرساخت­یافته هستند. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

داده های عظیم 1990 1995 2005 2010 2015 9XB XB بر اساس پیش‏بینی‏ها حجم داده‏ها با نرخ تقریبی 9 برابر در هر 5 سال افزایش می‏یابد. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

ویژگیهای اصلی داده‏های عظیم Big Data Volume Velocity Variety سه ویژگی اصلی داده‏های عظیم حجم بالا سرعت بالا تنوع بالا ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

مراحل تحلیل داده‏های عظیم دریافت داده انتقال داده ذخیره داده مدیریت پردازش و تحلیل بصری سازی نتایج ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری تعریف مدل ابر ارائه شده از سوی موسسه ملی فناوری و استاندارد (NIST) آمریکا: رایانش ابري مدلی است براي فراهم کردن دسترسی آسان بر اساس تقاضاي کاربر از طریق شبکه به مجموعه اي از منابع رایانشی قابل تغییر و پیکربندي (مثل: شبکه ها، سرورها، فضاي ذخیره سازي، برنامه هاي کاربردي و سرویس ها) که این دسترسی بتواند با کمترین نیاز به مدیریت منابع و یا نیاز به دخالت مستقیم فراهم کننده سرویس به سرعت فراهم شده یا آزاد (رها) گردد. این مدل شامل 4 مدل استقرار، 3 مدل سرویس و 5 خصوصیت لازم می باشد. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری تعریف ارایه شده موسسه ملی استاندارد و فناوری آمریکا (NIST) مدل‏های استقرار ابر ابر خصوصی ابر گروهی ابر عمومی ابر مختلط ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری مدل های استقرار بر اساس NIST ابر خصوصی (private cloud) تنها برای یک سازمان کار می کند. ممکن است توسط خود سازمان یا شرکت دیگری مدیریت شود. می تواند درون یا بیرون سازمان جای گیرد. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری مدل های استقرار بر اساس NIST ابر گروهی (community cloud) برای چندین سازمان که نیازهای یکسان دارند و به دنبال بهره مندی از مزایای رایانش ابری با به اشتراک گذاردن زیر ساخت هستند. یک گروه مشخص که وظیفه ای مشترک ( مثل ماموریت ها، نیازهای امنیتی، سیاست گذاری و ملاحظات قانونی) دارند. می تواند توسط سازمان های عضو یا یک شرکت دیگر مدیریت شود. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری مدل های استقرار بر اساس NIST ابر عمومی (public cloud) بر اساس مدل رایانش همگانی برای عموم موجود است. مالک آن یک سازمان فروشنده سرویس های ابری است. بطور کلی ارزانتر هستند. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

رایانش ابری مدل های استقرار بر اساس NIST ابر مختلط (hybrid cloud) آمیزه ای است از دو ابر یا بیشتر (خصوصی، گروهی و یا عمومی) که هرکدام هویت منحصر به فرد خودشان را نیز حفظ می کنند. یک ابر مختلط ممکن است دسترسی استاندارد و یا اختصاصی را به داده ها و برنامه ها و همچنین برنامه های قابل حمل داشته باشد. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

لایه‏های ارائه سرویس در معماری رایانش ابری مدل‏های سرویس ابر نرم‏افزار به عنوان سرویس پلتفرم به عنوان سرویس زیرساخت به عنوان سرویس Client Physical Hardware - (server) Iaas Management Services Fault Tolerance Paas Saas ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

تحلیل داده‏های عظیم و رایانش ابری ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

ساختار Hadoop ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

تحلیل داده های عظیم به عنوان سرویس تحلیل داده های عظیم به عنوان سرویس ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

تحلیل داده های عظیم به عنوان سرویس مدل معماری "تحلیل داده های عظیم به عنوان سرویس" بر اساس لایه های سرویس دهی در ابر ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

تحلیل داده های عظیم به عنوان سرویس نیاز سازمان استفاده از مدل معماری BAaas در قالب ابر خصوص در قالب ابر گروهی در قالب ابر عمومی در قالب ابر مختلط ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

جمع بندی امروزه حجم داده ها، با تنوع زیاد و سرعت بالا در حال افزایش است که از آن با عنوان مسئله "داده های عظیم" یاد می‌شود. از مهمترین دستاوردهای تحلیل داده های عظیم و دانش سودمند مستخرج از آن دانست که سازمان ها توانسته‌اند با یاری گرفتن از آن عرصه جدیدی در فناوری و مدیریت تعریف کنند. استفاده از سرویس های ابری به منظور ذخیره، پردازش و تحلیل این داده ها می‌تواند به عنوان راهکاری مقرون به صرفه و همچنین به شکل مبتنی بر تقاضا مورد توجه قرار گیرد. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

جمع بندی می توان یک مدل ابری جامع تحت عنوان تحلیل داده های عظیم به عنوان سرویس در استفاده از سرویس های ابری به منظور ذخیره، پردازش و تحلیل این داده ها می‌تواند به عنوان راهکاری مقرون به صرفه و همچنین به شکل مبتنی بر تقاضا مورد توجه قرار گیرد. با توجه به نیازهای خاص برخی از سازمان ها، بهره‌گیری از سرویس یاد شده، با در نظر گیری مدل توضیح داده شده در قالب ابر خصوصی، گروهی و یا عمومی امکانپذیر بوده و همچنین سرویس تحلیل می تواند به شکل یک ابر مختلط پیاده سازی شود. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

منابع Gantz, J., Reinsel, D.,”Extracting value from chaos”, IDC iView, pp 1–12, 2011. Philip Chen, C. L., Chun-Yang Zhang., “Dataintensive applications, challenges, techniques and technologies: A survey on Big Data”, Information Sciences, 275, pp 314-347, 2014. Chen, Min, Shiwen Mao, and Yunhao Liu., “Big Data: A Survey”, Mobile Networks and Applications 19(2), pp- 171-209, 2014. Armbrust, M., Fox, A., Griffith, R., Joseph, A. D., Katz, R., Konwinski, A., Zaharia, M., “A view of cloud computing”, Communications of the ACM, 53(4), pp- 50-58, 2010. Mell, P., & Grance, T., “The NIST definition of cloud computing”, 2011. Foster, I., Yong, Z., Raicu, I., Lu, S., “Cloud computing and Grid computing 360-degree compared”, IEEE Grid computing environments workshop, pp- 1-10, IEEE, 2008. Sosinsky, B., “Cloud computing bible”, Vol. 762, John Wiley & Sons, 2010. Agrawal, D., Das, S., & El Abbadi, A., “Big data and cloud computing: current state and future opportunities”, In Proceedings of the 14th International Conference on Extending Database Technology, pp- 530-533, ACM, 2011. Ahuja, S. P., & Moore, B., “State of Big Data Analysis in the Cloud”, Network and Communication Technologies, 2(1), 2013. Ji, C., Li, Y., Qiu, W., Awada, U., Li, K., “Big data processing in cloud computing environments”, In Proceedings of the 2012 12th International Symposium on Pervasive Systems, Algorithms and Networks, pp- 17-23. IEEE Computer Society, 2012. Hashem, I. A. T., Yaqoob, I., Anuar, N. B., Mokhtar, S., Gani, A., & Khan, S. U., “The rise of “big data” on cloud computing: Review and open research issues”, Information Systems, 47, pp- 98-115, 2015. Dean, J., Ghemawat, S., “MapReduce: simplified data processing on large clusters”, Communications of the ACM, 51(1), pp- 107-113, 2008. ارائه شده توسط امیر صحافی sahafi@iau.ac.ir

ارائه شده توسط امیر صحافی sahafi@iau.ac.ir