1. עבוד אותות במערכת החושים סמסטר א' תש"ע http://www.eng.tau.ac.il/~mira/Senses2009 Lecture 12 http://www.eng.tau.ac.il/~mira/Senses2009

2. Auditory Binaural Pathway

3. Neural Auditory pathway Auditory Nerve Cochlear Nucleus Medial Superior Olive Lateral Superior Olive Lateral lemniscus Inferior Colliculus Medial geniculate nucleus Primary auditory cortex

4. Schematic Representation of the Brainstem Auditory Pathway

5. Brainstem MRI & fMRI Scans AxialCoronal Sagittal

6. Auditory Pathway and Brainstem Outline Overlapped on fMRI Scans

7. Binaural Stimulation Coronal cut (2/11) - MGBAxial cut (6/12) -SOC Axial cut (10/12) - LL Axial cut (2/12) - CN 0 0.025 Coronal cut (6/11) - AC

8. Auditory Lateralization Cues Interaural Time delay – The sound reaches the closest ear before the other Interaural Level delay – The sound at the closest ear is louder

9. LATERALIZATION 1 5 9 2 3 4 8 6 7 Perception Stimulus R L R R L L ILD ITD ITD=ILD=0

10. Histograms = number of times a subject reported perceiving a position when ITD or ILD presented Normal Performance

11. 1 2 3 4 5 6 7 8 9 10 1 2 3 4 5 6 7 8 9 -110 0-10 0 1 -1 1 2 3 4 5 6 7 8 9 -10 010 1 2 3 4 5 6 7 8 9 Center-OrientedSide --Oriented position ITD(msec) ILD(dB) Abnormal Performance

12. Lesion Detection

13. Correlation between MRI and Lateralization Normal Lateralization MS10 MS20 MS50 MS52 CVA23

14. Correlation between MRI and Lateralization Center-Oriented Lateralization

15. Correlation between MRI and Lateralization Side-Oriented Lateralization

16. Correlation between MRI and Lateralization

17. Monaural & Binaural Activation in a Right Sagittal Section Left Ear Stimulation Right & Left Ears Stimulation Right Ear Stimulation

18. Monaural & Binaural Activation in a Left Sagittal Section Left ear stimulation Both ears stimulation Right ear stimulation

19. Binaural masking מוסיפים רק רעש לאוזן השניה – ובאורח מוזר, ניתן שוב לזהות את הצליל על רקע הרעש. צליל מונוטוני והרעש מושמעים לאוזן אחת, קשה להבדיל את הצליל מהרעש. הרעש ממסך את הצליל. צליל מונוטוני ורעש מושמעים לשתי האוזניים. הרעש ממסך את הצליל. ניתן לגרום לכך ששוב נשמע את הצליל על ידי כך שניצור הפרש פאזה בין הצלילים בשתי האוזניים.

20. Cocktail party effect אם יש כמה מקורות קול מופרדים במרחב, קל להקשיב לקול אם הקול שאנו מעונינים בו נמצא במיקום שונה מקולות הרקע. זה נובע מכך שהצליל והממסך יוצרים קונפיגורציה אינטרנאורלית שונה מזו של הממסך בלבד.

21. Find the minimum ITD/ILD We will conduct an experiment to measure the minimum ILD/ITD. t Left, L Left t Right, L Right

22. Minimal Audible Angle - MAA מהו ההפרש הקטן ביותר בשינוי מיקום הקול המאפשר הבחנה בשינוי זה ? היכולת שלנו להבחין בהפרש במיקום מקור הקול היא טובה ביותר כשהקול מגיע מלפנים בחזית הראש. יכולת זו הולכת ופוחתת כשמקור הקול נמצא בצדי הראש או מאחור. שינויים קטנים בכיוון הקול מלפנים יוצרים הבדלים גדולים ב - ITD.

23. Superior Olive Complex

25. Coincidence Detection Cells Coincidence detection (CD) is one of the common ways to describe the functionality of a single neural cell. Correlation There are several type of such cells: –Excitatory Inhibitory (EI) –Excitatory Excitatory (EE) –Cumulative

26. Neural mechanisms – EE Type cells Spikes when inputs coincide. Spikes when inputs coincide.

27. EE Formulation

28. Neural mechanisms – EI Type cells Spikes with excitatory input unless inhibited. Spikes with excitatory input unless inhibited.

29. EI Formulation

30. Complex Cells

31. EI Cells Signal Separation Signal separation ability is considered as most important in tasks such as cocktail party, BMLD. Signal separation ability is considered as most important in tasks such as cocktail party, BMLD.

32. EE Cells spontaneous rate The spontaneous rate of cells that results from external noise reduced at higher levels The spontaneous rate of cells that results from external noise reduced at higher levels

33. ITD Mean Rate From Agmon-Snir et al.(1998), Nature 293,268-272 Model Predictions

34. ILD Mean Rate

35. JND(ITD) All Information: Rate & Timing Rate Only

36. Phase Delay in EE Cells Inputs

37. Prediction of JND(ITD) from EE Cell E EE E N=6 N=20 N=6 N=20 E EE E N Excitatory Inputs

38. Prediction of JND(ILD) from EI Cell Rate Coding and All Information Coding provided similar results E EI E 1 Excitatory Inputs M Inhibitory Inputs M=3 M=15