انجمن انفورماتيک ايران نسل جديد مراکز داده سخنران : سيد علی ميرپور پائيز 89

بخش اول : مراکز داده سنتی اهميت مراکز داده حجم اطلاعات تولیدی بشر استاندارد TIA-942 امکانات مراکز داده قدیمی رفتار (نیاز) مشتریان

اهميت مراکز داده اهمیت مراکز داده بر کسی پوشیده نیست مانند سد ، نیروگاه ، سیلو و . . .

حجم اطلاعات توليدی بشر: کاربران Twitter روزی چقدر اطلاعات توليد می کنند ؟ ( کسی تمايل دارد حدس بزند ؟)

حجم اطلاعات توليدی بشر: کاربران Twitter روزی 7 ترابایت اطلاعات تولید می کنند بیش از 2 پتا بایت در سال 000ر10 سی دی در روز 5 میلیون فلاپی دیسک 300 گیگا بایت در مدتی که به صحبت من گوش می کنید

حجم اطلاعات توليدی بشر: 40,000 BCE cave paintings bone tools 3500 writing 0 C.E. O How much information are we talking about? O Last year, EMC asked the University of California at Berkeley to find out . . . And here’s the answer. O From the beginning of history to the end of 1999, mankind created the equivalent of 12 billion gigabytes (12 exabytes) of information. O Thirteen percent of this information was generated in 1999 alone. paper 105 2000 3B 1450 printing 1999 1½B 1870 electricity, telephone transistor 1947 computing 1950 GIGABYTES Late 1960s Internet (DARPA) 1993 The web 1999 Source: UC Berkeley, School of Information Management and Systems.

حجم اطلاعات توليدی بشر: 2003 24B 2002 12B 40,000 BCE cave paintings bone tools GIGABYTES 3500 writing 0 C.E. 2001 6B O But that 12 billion gigabytes is a drop in the ocean compared to what’s coming. O The amount of new information we’re creating is doubling each year. O More than 90 percent of it is “born digital.” O And every bit of it will have to be stored . . . Protected . . . managed . . . And leveraged if it’s to be useful. paper 105 2000 3B 1450 printing 1870 electricity, telephone 93% of new information born digital transistor 1947 GIGABYTES computing 1950 Late 1960s Internet (DARPA) 1993 The web 1999 Source: UC Berkeley, School of Information Management and Systems.

حجم اطلاعات توليدی بشر: Source : IDC.com

استاندارد TIA-942: طراحی الکتریکی ، برق ، ups ، سیم کشی ، باتری ، کف کاذب ، سقف ، لرزش ، آب ، اطفاء حریق ، ورودی فیزیکی ، نور ، در ، تهویه و خنک سازی ، راهرو سرد و گرم ، زون ، رک ، دو گانگی (redundancy) ، مشخصات ساختمان ایمن رویه های کاری ، چارت سازمانی ، حفاظت فیزیکی ، مسائل منطقه ای و بین المللی ، مسائل مخابراتی ، ریسک و . . .

مثال : يو پی اس های روتاری (ديناميک)

امکانات مراکز داده قديمی : امکان ارائه انواع سرور ها با ظرفیت دیسک و پهنای باند های گوناگون امکانات clustering و virtualization برای بالا بردن توان پردازشی امکان نصب انواع نرم افزارهای مورد علاقه شما

رفتار(نياز) مشتريان : نیاز به یک سرور با توان پردازش مشخص یا میزان حافظه مشخص ظرفیت دیسک مشخص پهنای باند مشخص سایر امکانات مثل backup دوره ای یا دیتابیس سرور جداگانه یا firewall و . . .

اشکالات : بلا استفاده ماندن قسمت عمده سرویس خریداری شده (استفاده از 5 الی 10% ظرفیت در مراکز داده خارج از سازمان) (استفاده از 20 الی 40% ظرفیت در مراکز داده داخل سازمان) قابلیت ضعیف در scalable بودن (اندازه پذیری) نیاز به انتقال به سایر سرورها یا مراکز

رفتار(نياز) جديد مشتريان : نیاز به پردازش مشخص بدون توجه به سرور یا میزان حافظه ظرفیت دیسک متغیر پهنای باند متغیر نیاز متفاوت در مقاطع زمانی متفاوت (حتی در یک روز) حجم زیاد بانکهای اطلاعاتی نیاز به دیتای دیگران یا برنامه دیگران

مشکلات مراکز داده قبلی بانکهای اطلاعاتی با افزایش دیتا ، کندتر می شوند سرعت جستجو کاهش می یابد حجم دیتا بسیار زیاد شده نیاز به سرورهای سریعتر و قویتر است . . .

بخش دوم : مراکز داده جديد خواسته مشتری : سرویس به جای سرور (استاندارد TIA-942) خواسته مشتری ، cloud computing ، زمانبندی توانایی مرکزداده دیتابیس sql و حجم دیتا سرورهای قویتر ، مین فریم ، سوپرکامپیوتر پردازش مرکزی یا توزیع شده سرعت گوگل در دیتاهای حجم زیاد

فايل سيستمهای بزرگ Google File System (GFS) Hadoop

چه کسانی از Hadoop استفاده می کنند ؟ Amazon Facebook Google IBM New York Times Yahoo! . . .

ساختار Hadoop

Hadoop و NoSql چگونه کار می کند ؟ جمع آوری دیتا Scribe ذخیره و آنالیز دیتا Hadoop یادگیری سریع از دیتا Pig

ديتابيس های NoSql Google BigTable Dynamo Cassandra MongoDB . . . . (به wikipedia مبحث NoSql مراجعه کنید)

مقايسه سرعت در Query پيچيده

مقايسه سرعت در Query ساده

مقايسه سرعت در اضافه کردن رکورد

بخش سوم : مراکز داده Google Google File System BigTable هر دیتا حداقل در سه نسخه PC های عادی سیستم عامل Linux در کانتینر و نه ساختمانهای ایمن و زیر زمین با سیستمهای خنک کننده ساده یا کم مصرف طراحی و در نقاط مختلف دنیا نصب شده اند.

نمای يک سرور Google

داخل مرکز داده Google

کانتينر های مرکز داده Google

نمای مرکز داده Google از بيرون

خواسته کشورهای صنعتی از کشورهای در حال توسعه سالهای 1960 – توليد مواد اوليه سالهای 1980 – (ساخت قطعات) سالهای 1990 – استفاده از خدمات کارشناسی در توليد تکنولوژی سالهای 1995 – توسعه تکنولوژی ساخت سالهای 2000 - ؟؟؟؟؟

مدل کسب و کار متفاوت است

با تشکر از حوصله شما پاسخ به سوالات با تشکر از حوصله شما پاسخ به سوالات