Fw: seeing with sound

From: Eugene Kornienko ( korn@online.ru ) Date: 2001-02-09 06:36

--- Original Message ---
From: "David Chalmers" <chalmers@ARIZONA.EDU >
Sent: Thursday, November 16, 2000 01:36 AM
Subject: Seeing with sound

Кто-то передал мне этот чрезвычайно интересный материал. vOICe, о
котором идёт речь, это новое устройство, позволяющее слепому "видеть".
Оно преобразует изображение 8x8 в звук: верх-низ представляется высотой
тона, лево-право - интервалом времени, яркость - громкостью. Подробности
можно посмотреть на сайте
http://www.seeingwithsound.com/ .

-- David Chalmers.

Здесь приведены несколько отобранных письменных отзывов от слепых
пользователей "The vOICe Learning Edition". Конечно, сколько людей,
столько и мнений, поэтому эти комментарии не относятся ко всем
пользователям. Некоторым из них vOICe не понравился и они даже
отказались от него. Это только начало. Будущее покажет, какой новый
взгляд (новое зрение) обеспечат нам последние технологии. На самом деле,
только в последние месяцы появились первые слепые пользователи,
использующие vOICe с достаточной степенью "погружения". Они используют
переносную установку с камерой "webcam" на голове, стерео наушниками,
микрофоном для речевых команд и мощным ноутбуком в рюкзаке. Сообщение,
которое приводится ниже поступило от первого такого пользователя. Это
слепая женщина, которая действительно "носит" vOICe ежедневно в
соответствии с прямым смыслом названия "переносная установка".

July 9, 2000:

Как человек, ранее видевший, я могу сказать, что soundscapes (звуковой
обзор) кажется вновь дал мне ощущение зрения. Я (а на моём месте мог
быть слепой от рождения) смогла представить и увидеть, как если бы у
меня были глаза, как выглядит моя прихожая. Как выглядит штора на левом
из моих трёх окон. В общем этот vOICe и webcam превратили мою прихожую
из неясного "мысленного образа" в то, что кажется настоящим трёхмерным
зрением.

Для меня не имеет значения, что это мои уши вызывают зрительные
представления. Важно, что звуковой образ восстановил путь, чтобы мне
снова видеть, не имеет значения, что это 3D чёрно-белый образ. Вместо
мира неясных туманных осязаемых объектов этот vOICe дал моему мозгу
увидеть объекты как картины. Похоже, что vOICe создаёт чёрно-белые
наброски того, на что я смотрю, а мой разум раскрашивает этот образ.

Сейчас я сижу перед моим компьютером и вижу поток цвета на экране, но
это vOICe говорит мне, что я смотрю на квадратный объект. Это похоже на
то, как выглядит мир через запачканные очки. Вы видите форму и
расположение объектов вокруг себя, но не различаете тонких деталей. Я не
знаю, является ли это особым человеческим языком, но это точно язык,
которым мои уши говорят моему разуму, что я сейчас вижу. Называйте, как
хотите, это работает! Больше я не смогу без этого обходиться!

November 1, 2000:

Я хочу поделиться с вами двумя наблюдениями. Во-первых, как я говорила,
я ношу это устройство ежедневно. И вот вчера я мыла посуду. В то время,
как вода убегала из раковины, я пошла вытереть руки. Потом, когда я
вернулась вымыть раковину, я была ошеломлена тем, что увидела раковину
"в глубину", как образ. Я отступила на шаг и опять медленно подошла,
чтобы посмотреть не похоже ли это на чисто мысленную иллюзию. Нет,
чувство видения глубины раковины не пропадало. Я вспомнила, когда я была
ребёнком, то заглядывала в колодец. Он похож на длинный тоннель, и в
конце - блеск воды, который всегда давал мне ощущение глубины.
Разглядывание раковины напомнило это. Испытывая это новое ощущение, я
начала ходить и замечать, как вещи и комната звучат для меня. Я знаю,
благодаря касанию и "мысленной картине", на что должны быть похожи мои
разные комнаты, но теперь я стояла в дверях дома и ощущала глубину
помещения, а мой разум заполнял эту картину деталями. Возможно ли, что
тело и разум могут привыкнуть к звуковому обзору так, что ты
почувствуешь глубину? Я не говорю о том, что я могу почувствовать это,
когда я хожу. Но сейчас я стою и смотрю на вещи.

Ещё одна смешная вещь случилась из-за того, что я ношу vOICe. Я купила
CD-player. Чтобы его слушать, надо надеть наушники. Я думала, что хорошо
бы слушать музыку во время домашних занятий. Пока я стою, всё нормально.
Потом я стала ходить. И вдруг стукнулась о стену и налетела на стол. Я
не ожидала от себя такой неуклюжести. Потом до меня дошло. CD не даёт
мне информации, к которой я уже приучилась, пользуясь vOICe. Мне
приходится быть более сосредоточенной, когда я слушаю CD. Я вам скажу,
это похоже на то, как если бы вы вновь ослепли. Я едва могла найти
что-то у себя дома. Вот какая разница!

Если бы теперь я могла догадаться, как использовать CD и vOICe вместе, и
не терять информацию о звуковом образе, это было бы интересно. Но до
этого, я боюсь, я стукнусь лбом о несколько стен. (grin)

Этот слепой пользователь - женщина старше сорока лет. Она ослепла в
результате химического взрыва примерно двадцать лет назад. Она
пользуется звуковым дисплеем уже несколько месяцев, носит видеокамеру на
голове и наушники всё время, то есть весьма увлечена этим. Кто-то мог бы
сказать ей, что в её интерпретации звуки описываются зрительными
терминами, но почему же это нам не было известно из многочисленных
исследований слухового восприятия? Надёжных научных данных в этой
области пока нет. Вы не знаете аналогичных примеров (кроме речи), где
продолжительное ощущение каких-то звуковых сигналов приводит к
внезапному изменению субъективного восприятия? Нужны любые идеи, ведь мы
столкнулись с новой областью, где много неизвестного.

Всего хорошего.

Peter Meijer
Peter.B.L.Meijer@philips.com