Читаем Создатели искусственного гения. О бунтарях, которые наделили интеллектом Google, Facebook и весь мир полностью

Первоначально Лекун разрабатывал свою идею, находясь рядом с Хинтоном в Торонто. По-настоящему эта идея расцвела, когда он перебрался в Bell Labs, где в его распоряжении были огромные массивы данных, необходимые для обучения лекуновой сверточной нейронной сети (тысячи не дошедших до адресата писем). Кроме того, там были более мощные компьютеры (новейшая рабочая станция Sun Microsystem), позволявшие с большой скоростью анализировать эти конверты. Он объяснил Хинтону, что перешел в Bell Labs, потому что там ему обещали собственную рабочую станцию, тогда как во время стажировки в Торонто ему приходилось делить машинное время с другими учеными. Через несколько недель после перехода в Bell Labs, используя тот же самый базовый алгоритм, он создал систему, способную распознавать написанные от руки цифры с точностью, которая превосходила все другие технологии, разрабатывающиеся в AT&T. Эта система работала так хорошо, что вскоре нашла коммерческое применение. Помимо Bell Labs, AT&T принадлежала компания NCR, которая продавала кассовые аппараты и другое оборудование для бизнеса, и к середине 1990-х годов AT&T стала продавать технологию Лекуна банкам как способ автоматического чтения рукописных чеков. В этот момент творение Лекуна прочитывало более 10 процентов всех чеков, которые выписывались в США.

Но он рассчитывал на большее. В стеклянных стенах комплекса Bell Labs в Холмделе, который называли «самым большим зеркалом в мире», Лекун и его коллеги разработали микрочип, получивший название ANNA. Это был акроним с акронимом внутри97

. ANNA расшифровывалась как Analog Neural Network ALU (аналоговая нейронная сеть ALU), а ALU, в свою очередь, расшифровывалось как Arithmetic Logic Unit (арифметическая логическая единица). ALU – это особая микросхема, разработанная специально для математических расчетов, связанных с нейронными сетями. Вместо того чтобы запускать свои алгоритмы с использованием обычных микрочипов, применяемых для решения любых задач, компания Лекуна разработала микросхему для данной конкретной задачи. Благодаря этому расчеты выполнялись со скоростью около 4 миллиардов операций в секунду, что значительно превосходило стандарты того времени. Эта фундаментальная концепция – микросхема, созданная специально для нейронных сетей, – с течением времени привела к перестройке всей мировой индустрии микрочипов, хотя случилось это двадцатью годами позже.

Вскоре после того, как банковский сканер Лекуна вышел на коммерческий рынок, AT&T, бывшая общенациональная телекоммуникационная корпорация, которая уже не раз делилась на множество мелких компаний, разделилась снова. NCR и исследовательская группа Лекуна оказались по разные стороны, и проект с банковским сканером был аннулирован, что ввергло Лекуна в состояние разочарования и депрессии. Группа уже вот-вот подбиралась к технологиям с использованием всемирной паутины, которая еще только начинала разворачиваться в Америке, а его вообще лишили возможности работать над нейронными сетями. Когда компания начала увольнять ученых, Лекун понял, что тоже хочет уйти. «Я не хочу заниматься тем дерьмом, которое хочет навязать мне компания, – сказал он начальнику лаборатории. – Я работаю над компьютерным зрением». Удерживать его не стали.

В 1995 году двое исследователей Bell Labs98 – Владимир Вапник и Ларри Джекель – поспорили. Вапник говорил, что через десять лет «никто в здравом уме не будет использовать нейронные сети». Джекель принял сторону коннекционистов. Они поспорили на «дорогой обед», и Лекун выступил в качестве посредника. Они распечатали взаимные обязательства и подписались. Практически сразу ситуация повернулась так, что поражение Джекеля казалось неминуемым. Проходили месяцы, и в мире коннекционистов снова наступили заморозки. Да, фургон Померло мог ехать без водителя. Да, система NETtalk, разработанная Сейновски, могла читать вслух. А банковский сканер Лекуна мог читать рукописные чеки. Но было ясно, что этот фургон способен ездить лишь по прямой или там, где никого нет. Система NETtalk годится, скорее, как фокус для вечеринок. А для чтения чеков существовала масса других возможностей. Сверточные нейронные сети Лекуна не справлялись с анализом более сложных изображений, таких как фотографии собак, кошек и автомобилей. И было не ясно, есть ли у них вообще перспектива. В конечном счете Джекель одержал победу, но это была пустая победа. Через десять лет после их пари ученые все же продолжали пользоваться нейронными сетями, но технология за это время продвинулась немногим дальше системы Лекуна, способной читать рукописные цифры. «Я выиграл пари, потому что Ян не сдался, – говорит Джекель. – Научное сообщество фактически игнорировало его, но он не сдавался».

Перейти на страницу:

Похожие книги

Гиперпространство. Научная одиссея через параллельные миры, дыры во времени и десятое измерение
Гиперпространство. Научная одиссея через параллельные миры, дыры во времени и десятое измерение

Инстинкт говорит нам, что наш мир трёхмерный. Исходя из этого представления, веками строились и научные гипотезы. По мнению выдающегося физика Митио Каку, это такой же предрассудок, каким было убеждение древних египтян в том, что Земля плоская. Книга посвящена теории гиперпространства. Идея многомерности пространства вызывала скепсис, высмеивалась, но теперь признаётся многими авторитетными учёными. Значение этой теории заключается в том, что она способна объединять все известные физические феномены в простую конструкцию и привести учёных к так называемой теории всего. Однако серьёзной и доступной литературы для неспециалистов почти нет. Этот пробел и восполняет Митио Каку, объясняя с научной точки зрения и происхождение Земли, и существование параллельных вселенных, и путешествия во времени, и многие другие кажущиеся фантастическими явления.

Мичио Каку

Зарубежная образовательная литература, зарубежная прикладная, научно-популярная литература
Происхождение эволюции. Идея естественного отбора до и после Дарвина
Происхождение эволюции. Идея естественного отбора до и после Дарвина

Теория эволюции путем естественного отбора вовсе не возникла из ничего и сразу в окончательном виде в голове у Чарльза Дарвина. Идея эволюции в разных своих версиях высказывалась начиная с Античности, и даже процесс естественного отбора, ключевой вклад Дарвина в объяснение происхождения видов, был смутно угадан несколькими предшественниками и современниками великого британца. Один же из этих современников, Альфред Рассел Уоллес, увидел его ничуть не менее ясно, чем сам Дарвин. С тех пор работа над пониманием механизмов эволюции тоже не останавливалась ни на минуту — об этом позаботились многие поколения генетиков и молекулярных биологов.Но яблоки не перестали падать с деревьев, когда Эйнштейн усовершенствовал теорию Ньютона, а живые существа не перестанут эволюционировать, когда кто-то усовершенствует теорию Дарвина (что — внимание, спойлер! — уже произошло). Таким образом, эта книга на самом деле посвящена не происхождению эволюции, но истории наших представлений об эволюции, однако подобное название книги не было бы настолько броским.Ничто из этого ни в коей мере не умаляет заслуги самого Дарвина в объяснении того, как эволюция воздействует на отдельные особи и целые виды. Впервые ознакомившись с этой теорией, сам «бульдог Дарвина» Томас Генри Гексли воскликнул: «Насколько же глупо было не додуматься до этого!» Но задним умом крепок каждый, а стать первым, кто четко сформулирует лежащую, казалось бы, на поверхности мысль, — очень непростая задача. Другое достижение Дарвина состоит в том, что он, в отличие от того же Уоллеса, сумел представить теорию эволюции в виде, доступном для понимания простым смертным. Он, несомненно, заслуживает своей славы первооткрывателя эволюции путем естественного отбора, но мы надеемся, что, прочитав эту книгу, вы согласитесь, что его вклад лишь звено длинной цепи, уходящей одним концом в седую древность и продолжающей коваться и в наше время.Само научное понимание эволюции продолжает эволюционировать по мере того, как мы вступаем в третье десятилетие XXI в. Дарвин и Уоллес были правы относительно роли естественного отбора, но гибкость, связанная с эпигенетическим регулированием экспрессии генов, дает сложным организмам своего рода пространство для маневра на случай катастрофы.

Джон Гриббин , Мэри Гриббин

Зарубежная образовательная литература, зарубежная прикладная, научно-популярная литература / Научно-популярная литература / Образование и наука
Форма реальности. Скрытая геометрия стратегии, информации, общества, биологии и всего остального
Форма реальности. Скрытая геометрия стратегии, информации, общества, биологии и всего остального

Эта книга изменит ваше представление о мире. Джордан Элленберг, профессор математики и автор бестселлера МИФа «Как не ошибаться», показывает всю силу геометрии – науки, которая только кажется теоретической.Математику называют царицей наук, а ее часть – геометрия – лежит в основе понимания мира. Профессор математики в Висконсинском университете в Мэдисоне, научный сотрудник Американского математического общества Джордан Элленберг больше 15 лет популяризирует свою любимую дисциплину.В этой книге с присущими ему легкостью и юмором он рассказывает, что геометрия не просто измеряет мир – она объясняет его. Она не где-то там, вне пространства и времени, а здесь и сейчас, с нами. Она помогает видеть и понимать скрытые взаимосвязи и алгоритмы во всем: в обществе, политике и бизнесе. Геометрия скрывается за самыми важными научными, политическими и философскими проблемами.Для кого книгаДля тех, кто хочет заново открыть для себя геометрию и узнать об этой увлекательной науке то, чего не рассказывали в школе.Для всех, кому интересно посмотреть на мир с новой стороны.На русском языке публикуется впервые.

Джордан Элленберг

Зарубежная образовательная литература, зарубежная прикладная, научно-популярная литература
Жизнь: зарядное устройство. Скрытые возможности вашего организма
Жизнь: зарядное устройство. Скрытые возможности вашего организма

Стивен Рассел – автор 15 книг, большинство из которых стали бестселлерами, создатель популярного документального сериала для Би-би-си, продолжает лучшие традиции «босоногих докторов», которые бродили по странам Древнего Востока, исцеляя людей от физических и душевных недугов.Стивен Рассел долгое время изучал китайскую медицину, а также китайские боевые искусства, способствующие оздоровлению. Позже занялся изучением психиатрии в поисках способа совместить древние восточные методы и современную науку для исцеления нуждающих.Книги Стивена Рассела до предела насыщены мощными уникальными методиками оздоровления, самопомощи и самовосстановления, ведь его опыт поистине огромен. Вот уже более 20 лет он оказывает целительную помощь своим многочисленным пациентам: ведет частный прием, проводит семинары, выступает на радио и телевидении. Перевод: И. Мелдрис

Стивен Рассел

Зарубежная образовательная литература, зарубежная прикладная, научно-популярная литература / Научпоп / Документальное