CHAPTER 5: Interaction Devices Designing the User Interface: Strategies for Effective Human-Computer Interaction Fifth Edition Ben Shneiderman & Catherine Plaisant in collaboration with Maxine S. Cohen and Steven M. Jacobs

Interaction Devices Keyboard Layouts Pointing devices Novel devices Speech & auditory interfaces Displays تخطيطات لوحة المفاتيح أجهزة التأشير أجهزة جديدة الكلام والسمعية واجهات يعرض

Speech and auditory interfacesالكلام والسمعية واجهات Speech recognition still does not match the fantasy of science fiction: demands of user's working memory background noise problematic variations in user speech performance impacts effectiveness most useful in specific applications, such as to benefit handicapped users التعرف على الكلام لا يزال لا يتطابق مع الخيال الخيال العلمي: متطلبات الذاكرة العاملة للمستخدم الضوضاء الخلفية إشكالية الاختلافات في تأثير الكلام تأثير المستخدم الأكثر فائدة في تطبيقات محددة، مثل الاستفادة من المستخدمين المعوقين

Speech and auditory interfaces (cont.)

Discrete word recognition التعرف على كلمة منفصلة Recognize individual words spoken by a specific person; can work with 90- to 98-percent reliability for 20 to 200 word vocabularies Speaker-dependent training, in which the user repeats the full vocabulary once or twice Speaker-independent systems are beginning to be reliable enough for certain commercial applications الاعتراف بالكلمات الفردية التي يتحدث بها شخص معين؛ يمكن أن تعمل مع 90- إلى 98 في المئة الموثوقية لمدة 20 إلى 200 كلمة المفردات التدريب المعتمدة على المتحدث، والتي يكرر المستخدم المفردات كاملة مرة واحدة أو مرتين وقد بدأت أنظمة السماعات المستقلة بأن تكون موثوقة بما يكفي لتطبيقات تجارية معينة

Continuous-speech recognition التعرف المستمر على الكلام Challenges: Difficulty in recognizing boundaries between spoken words Normal speech patterns blur boundaries Diverse accents Variable speaking rates Disruptive background noise Challenging emotional intonation التحديات: صعوبة في التعرف على الحدود بين الكلمات المنطوقة أنماط خطاب عادي طمس الحدود لهجات متنوعة معدلات التحدث المتغيرة الضوضاء الخلفية التخريبية تحدي التجويد العاطفي

Continuous-speech recognition التعرف المستمر على الكلام Applications of CSR systems: Enable users to dictate letters and compose reports verbally for automatic transcription. Enable automatic scanning and retrieval from radio or television programs, court proceedings, lectures, or telephone calls for specific words or topics. Examples: IBM ViaVoice® speech-dictation system Dragon® - NaturallySpeaking™ Medical system Dragon® - ناتوراليسباكينغ ™ النظام الطبي تطبيقات أنظمة المسؤولية الاجتماعية للشركات: تمكين المستخدمين من إملاء الحروف وإعداد التقارير شفهيا للنسخ التلقائي. تمكين المسح التلقائي واسترجاعها من البرامج الإذاعية أو التلفزيونية، إجراءات المحكمة، المحاضرات، أو المكالمات الهاتفية لكلمات أو مواضيع محددة. أمثلة: عب ViaVoice® الكلام نظام الإملاء Dragon® - ناتوراليسباكينغ ™ النظام الطبي

Voice Information System Interactive Voice Response (IVR) – can provide good customer service at low cost. Voice Information technologies are used in Personal Voicemail systems. Telephone based speech systems enable storing and forwarding of spoken messages with user commands entered with keyboards. ( eg: Whatsapp) Small hand held voice note-takers available in the market. Audio books have been successful – allow users to control the pace, while conveying the curator’s enthusiasm or author’s emotions.

نظام المعلومات الصوتية الاستجابة الصوتية التفاعلية (إيفر) - يمكن أن توفر خدمة العملاء جيدة بتكلفة منخفضة. وتستخدم تقنيات المعلومات الصوتية في أنظمة البريد الصوتي الشخصية. أنظمة الكلام القائمة على الهاتف تمكن تخزين وإعادة توجيه الرسائل المنطوقة مع أوامر المستخدم دخلت مع لوحات المفاتيح. (على سبيل المثال: ال واتساب) يد صغيرة عقدت مكبرات الصوت صوت المتاحة في السوق. وكانت الكتب السمعية ناجحة - تسمح للمستخدمين للسيطرة على وتيرة، في حين نقل الحماس أمين أو عواطف المؤلف.

Speech generation Speech generation is a successful technology: Inexpensive, compact and reliable systems using digitized speech segments have been used in Automobile Navigation System, Internet services, Utility Control rooms and Children's games. Applications for Blind: Text-to-speech utilities like the built-in Microsoft Windows Narrator. Screen readers like Freedom Scientific’s JAWS – allows users with visual impairments to productively navigate between windows, select applications, browse graphical interfaces and read text

جيل الكلام جيل الكلام هو تكنولوجيا ناجحة: وقد استخدمت أنظمة غير مكلفة ومدمجة وموثوق بها باستخدام شرائح رقمية رقمية في نظام الملاحة في السيارات وخدمات الإنترنت وغرف التحكم في المرافق وألعاب الأطفال. تطبيقات للمكفوفين: أدوات تحويل النص إلى كلام مثل المدمج في مايكروسوفت ويندوز الراوي. قراء الشاشة مثل جاوس سبيد سسينتيفيك - يسمح للمستخدمين مع إعاقات بصرية للتنقل بشكل مثمر بين النوافذ، حدد التطبيقات، تصفح واجهات رسومية وقراءة النص

Displays – Small and Large The display has become the primary source of feedback to the user from the computer The display has many important characteristics, including: Physical dimensions (usually the diagonal dimension and depth) Resolution (the number of pixels available) Number of available colors, color correctness Luminance, contrast, and glare Power consumption Refresh rates (sufficient to allow animation and video) Cost Reliability

الشاشات - الصغيرة والكبيرة أصبح العرض المصدر الأساسي للتعليقات للمستخدم من الكمبيوتر العرض لديه العديد من الخصائص الهامة، بما في ذلك: الأبعاد المادية (عادة البعد القطري وعمق) الدقة (عدد وحدات البكسل المتاحة) عدد الألوان المتاحة، وصحة اللون الإنارة والتباين والوهج استهلاك الطاقة تحديث معدلات (كافية للسماح للرسوم المتحركة والفيديو) كلفة الموثوقية

Displays – Small and Large (cont.) Usage characteristics distinguish displays: Portability Privacy Saliency Ubiquity Simultaneity خصائص الاستخدام تميز يعرض: قابلية التنقل الإجمالية البروز كل مكان تزامن

Display technology Raster-scan cathode-ray tube (CRT) electron beam sweeping out lines of dots to form letters refresh rates 30 to 70 per second Liquid-crystal displays (LCDs) voltage changes influence the polarization of tiny capsules of liquid crystals Thin film, light weight, low electricity consumption Plasma Displays rows of horizontal wires are slightly separated from vertical wires by small glass-enclosed capsules of neon-based gases Flat profile, consume more electricity

تقنية الشاشات مسح أنبوب المسح الكاثود النقطي (كرت) شعاع الالكترون تجتاح خطوط النقاط لتشكيل الحروف معدلات التحديث 30 إلى 70 في الثانية الواحدة شاشات الكريستال السائل (شاشات الكريستال السائل) تغيرات الجهد تؤثر على استقطاب كبسولات صغيرة من بلورات سائلة رقيقة الفيلم، خفيفة الوزن، انخفاض استهلاك الكهرباء عرض البلازما يتم فصل صفوف الأسلاك الأفقية بشكل طفيف عن الأسلاك العمودية بواسطة كبسولات زجاجية صغيرة محتوية على غازات نيونية شقة الشخصي، تستهلك المزيد من الكهرباء

Display technology (cont.) Light-emitting diodes (LEDs) certain diodes emit light when a voltage is applied arrays of these small diodes can be assembled to display characters Used in large public displays, curved displays Matrices of some miniature LEDs are also used in some head-mounted displays. Organic Light-emitting diodes (OLEDs) Durable & energy efficient Laid on flexible plastic or metallic foil Used with wearable or roll able displays

تستخدم مع يمكن ارتداؤها أو لفة يعرض قادرة الثنائيات الباعثة للضوء (المصابيح) بعض الثنائيات تنبعث ضوء عندما يتم تطبيق الجهد يمكن تجميع صفائف من هذه الثنائيات الصغيرة لعرض الأحرف المستخدمة في يعرض العامة الكبيرة، يعرض المنحني وتستخدم مصفوفات بعض المصابيح المصغرة أيضا في بعض أجهزة العرض المثبتة على الرأس. العضوية الثنائيات الباعثة للضوء (أوليدس) دائم وكفاءة في استخدام الطاقة وضعت على البلاستيك المرن أو المعدنية احباط تستخدم مع يمكن ارتداؤها أو لفة يعرض قادرة

Display technology (cont.) Electronic ink technology Paper-like resolution Tiny capsules with negatively charged black particles and positively charged white particles can be selectively made visible. Tiny Projectors – Micro vision Pico projectors Project color images on the wall from mobile devices Braille displays for the blind users تكنولوجيا الحبر الإلكترونية دقة تشبه الورق كبسولات صغيرة مع جزيئات سوداء مشحونة سالبة وجسيمات بيضاء مشحونة إيجابيا يمكن أن تكون مرئية بشكل انتقائي مرئية. أجهزة العرض الصغيرة - العرض الصغير بيكو أجهزة العرض صور ملونة المشروع على الحائط من الأجهزة النقالة عروض برايل للمستخدمين المكفوفين

Large Displays Informational wall displays Interactive wall displays Multiple desktop displays يعرض جدار المعلوماتية يعرض جدار تفاعلي يعرض سطح المكتب المتعدد

Large Displays

Large Informational Wall Displaysكبير يعرض جدار المعلوماتية Effective in Control rooms Details can be retrieved on individual consoles Applications: Military command and control operations Utility Management Emergency response Allows teams of collaborating scientists and decision makers فعالة في غرف التحكم يمكن استرجاع التفاصيل على لوحات المفاتيح الفردية التطبيقات: عمليات القيادة والسيطرة العسكرية إدارة المرافق رد طارئ يسمح للفرق من العلماء المتعاونين وصناع القرار

Interactive Wall Displays التفاعلية جدار يعرض Large touch sensitive screen on which a computer screen is projected Digital white board System: SMART Board® from SMART technologies Inc. Colored pens and digital eraser simulate a traditional white board Facilitates Screen recording and software keyboard شاشة كبيرة تعمل باللمس الحساسة التي يتم عرض شاشة الكمبيوتر لوحة بيضاء الرقمية نظام: سمارت Board® من شركة سمارت تيشنولوجيز Inc. تحاكي الأقلام الملونة والممحاة الرقمية لوحة بيضاء تقليدية يسهل تسجيل الشاشة ولوحة المفاتيح البرمجيات

Multiple Desktop Displays Discontinuities in the overall display space Can be of different size and resolution Users to stand or rotate their heads or bodies to attend all displays Useful for personal creative applications Example: Flash application might require a timeline, a stage, graphic component editors, a scripting language editor, a directory browser and a preview window, all open at the same time.

عرض سطح المكتب متعددة حالات الانقطاع في مساحة العرض الإجمالية يمكن أن تكون مختلفة من حيث الحجم والقرار المستخدمين للوقوف أو تدوير رؤوسهم أو الهيئات لحضور جميع شاشات العرض مفيدة للتطبيقات الإبداعية الشخصية مثال: قد يتطلب تطبيق فلاش جدولا زمنيا، ومرحلة، ومحررين مكونين للرسوم البيانية، ومحرر لغة البرمجة النصية، ومستعرض دليل ونافذة معاينة، وكلها مفتوحة في نفس الوقت.

Heads-up and helmet mounted displays A heads-up display can, for instance, project information on a partially silvered widescreen of an airplane or car. A helmet/head mounted display (HMD) moves the image with the user. 3D images

رؤساء متابعة وعرض خوذة على سبيل المثال، يمكن أن يعرض عرض الرأس على معلومات المشروع على شاشة عريضة جزئيا من الفضة لطائرة أو سيارة. A خوذة / رئيس شنت العرض (همد) يحرك الصورة مع المستخدم. الصور ثلاثية الأبعاد

Mobile device displays يعرض جهاز الجوال Currently mobile devices used for brief tasks, except for game playing Optimize for repetitive tasks Custom designs to take advantage of every pixel Data Lens allows compact overviews Web browsing difficult Okay for linear reading, but making comparisons can be difficult الأجهزة المحمولة حاليا تستخدم لمهام وجيزة، باستثناء لعب اللعبة تحسين المهام المتكررة تصاميم مخصصة للاستفادة من كل بكسل داتالنس يسمح نظرة عامة المدمجة تصفح الإنترنت الصعب حسنا للقراءة الخطية، ولكن إجراء المقارنات يمكن أن يكون صعب