IBM Watson
IBM Watson — компьютерная система, способная отвечать на вопросы, заданные на естественном языке.[1] Разработана в рамках проекта IBM DeepQA исследовательской командой под руководством главного исследователя Дэвида Ферруччи.[2] Watson назван в честь основателя и первого генерального директора IBM, промышленника Томаса Дж. Ватсона.[3][4]
Изначально система разрабатывалась для ответов на вопросы в популярной телеигре Jeopardy![5], и в 2011 году компьютерная система Watson соревновалась в Jeopardy! с чемпионами Брэдом Раттером и Кеном Дженнингсом,[3][6] выиграв главный приз в размере 1 миллиона долларов США.[7]
В феврале 2013 года IBM объявила, что первое коммерческое применение Watson будет связано с поддержкой принятия решений по лечению рака лёгких в Memorial Sloan Kettering Cancer Center (Нью-Йорк) совместно с WellPoint (ныне Elevance Health).[8]
Описание
Watson был создан как вычислительная вопросно-ответная система, разработанная IBM для применения передовых технологий обработки естественного языка, поиска информации, представления знаний, автоматизированное рассуждение и машинное обучение в области открытых вопросно-ответных систем. Система носит название DeepQA (при этом не использовались глубокие нейронные сети).[1]
IBM заявляла, что Watson использует «более 100 различных методов для анализа естественного языка, поиска источников, генерации гипотез, поиска и оценки доказательств, а также объединения и ранжирования гипотез».[10]
В последние годы возможности Watson были расширены, а принципы его работы изменены с учётом новых моделей развёртывания (Watson на IBM Cloud), эволюции методов машинного обучения и оптимизированного аппаратного обеспечения для разработчиков и исследователей.
Программное обеспечение
Watson использует программное обеспечение DeepQA от IBM и реализацию фреймворка Apache UIMA (Unstructured Information Management Architecture). Система написана на различных языках, включая Java, C++ и Prolog, и работает под управлением SUSE Linux Enterprise Server 11 с использованием фреймворка Apache Hadoop для распределённых вычислений.[11][12][13]
Помимо системы DeepQA, в Watson реализовано несколько модулей стратегий. Например, один модуль рассчитывал сумму ставки для Final Jeopardy на основе уровня уверенности в правильности ответа и текущих результатов всех участников. Другой модуль использовал правило Байеса для вычисления вероятности того, что каждый неоткрытый вопрос может быть Daily Double, используя исторические данные из J! Archive в качестве априорной вероятности. Если обнаруживался Daily Double, сумма ставки вычислялась с помощью двухслойной нейронной сети того же типа, что использовалась в TD-Gammon, нейросетевой программе для игры в нарды, разработанной Джеральдом Тесоро в 1990-х годах. Параметры в модулях стратегий настраивались путём тестирования на статистической модели человеческих участников, построенной на данных J! Archive, и выбора наилучших.[14][15][16]
Аппаратное обеспечение
Система оптимизирована под рабочие нагрузки, интегрируя массово-параллельные процессоры POWER7 и построена на технологии IBM DeepQA,[17] которую она использует для генерации гипотез, сбора доказательств и анализа данных.[1] Watson использует кластер из девяноста серверов IBM Power 750, каждый из которых оснащён восьмиядерным процессором POWER7 с тактовой частотой 3,5 ГГц и четырьмя потоками на ядро. В сумме система использует 2 880 потоков POWER7 и 16 терабайт ОЗУ.[17]
По словам Джона Ренни, Watson способен обрабатывать 500 гигабайт (эквивалент миллиона книг) в секунду.[18] Главный изобретатель IBM и старший консультант Тони Пирсон оценил стоимость аппаратного обеспечения Watson примерно в три миллиона долларов.[19] Производительность по тесту Linpack составляет 80 тераFLOPS, что примерно вдвое меньше порога для попадания в список Top 500 Supercomputers.[20] По словам Ренни, весь контент для игры Jeopardy был загружен в ОЗУ Watson, поскольку доступ к данным с жёстких дисков был бы слишком медленным для конкуренции с человеческими чемпионами.[18]
Данные
Источниками информации для Watson служили энциклопедии, словари, тезаурусы, статьи новостных агентств и литературные произведения. Watson также использовал базы данных, таксономии и онтологии, включая DBPedia, WordNet и Yago.[21] Команда IBM предоставила Watson миллионы документов, включая словари, энциклопедии и другие справочные материалы, которые использовались для построения базы знаний.[22]
Работа системы
Watson разбирает вопросы на ключевые слова и фрагменты предложений для поиска статистически связанных фраз.[22] Главная инновация Watson заключалась не в создании нового алгоритма, а в способности быстро выполнять сотни проверенных алгоритмов анализа языка одновременно.[22][23] Чем больше алгоритмов независимо находят один и тот же ответ, тем выше вероятность его правильности. После того как Watson получает небольшой набор потенциальных решений, он сверяет их со своей базой данных, чтобы убедиться в их осмысленности.[22]
Сравнение с человеческими игроками
Основной принцип работы Watson — разбор ключевых слов в подсказке и поиск связанных терминов в качестве ответов. Это даёт Watson определённые преимущества и недостатки по сравнению с человеческими игроками Jeopardy!.[24] Watson испытывает трудности с пониманием контекста подсказок. Watson может читать, анализировать и учиться на естественном языке, что позволяет ему принимать решения, схожие с человеческими.[25] В результате человеческие игроки обычно быстрее формируют ответы, особенно на короткие подсказки.[22] Программирование Watson не позволяет ему использовать популярную тактику нажатия на кнопку до того, как будет сформирован ответ.[22] Однако Watson стабильно быстрее реагирует на сигнал, как только ответ сформирован, и не подвержен психологическим приёмам со стороны людей, например, постоянному переключению между категориями.[22][26]
В серии из 20 тренировочных игр Jeopardy! люди могли использовать 6-7 секунд, которые Watson тратил на прослушивание подсказки и принятие решения о сигнале.[22] За это время Watson также должен был оценить ответ и определить, достаточно ли он уверен в результате, чтобы нажать кнопку.[22] Часть системы, использовавшейся для победы в конкурсе, включала электронную схему, получающую сигнал «готов» и проверяющую, достаточно ли высок уровень уверенности Watson для активации кнопки. Благодаря скорости этой схемы по сравнению с человеческой реакцией, Watson реагировал быстрее, кроме случаев, когда человек предугадывал (а не реагировал на) сигнал.[27] После сигнала Watson озвучивает ответ электронным голосом в формате вопроса, принятом в Jeopardy![22] Голос Watson был синтезирован на основе записей актёра Джеффа Вудмана для программы IBM синтеза речи в 2004 году.[28]
Персонал Jeopardy! использовал разные способы уведомления Watson и людей о моменте нажатия кнопки,[27] что было критично во многих раундах.[26] Люди получали сигнал с помощью лампочки, которую они воспринимали за доли секунды.[29][30] Watson получал электронный сигнал и мог активировать кнопку примерно за восемь миллисекунд.[31] Люди пытались компенсировать задержку восприятия, предугадывая сигнал,[32] но вариация времени предугадывания обычно была слишком велика, чтобы конкурировать со скоростью Watson.[26] Watson не пытался предугадывать сигнал.[30][32]
История
Разработка
После победы Deep Blue над Гарри Каспаровым в шахматах в 1997 году IBM искала новый вызов. В 2004 году менеджер IBM Research Чарльз Ликел во время ужина с коллегами заметил, что ресторан внезапно затих — причиной стала серия побед Кена Дженнингса в Jeopardy!. Заинтересовавшись возможностью создать систему для этой игры, Ликел передал идею руководству, и в 2005 году исполнительный директор IBM Research Пол Хорн поддержал инициативу. Несмотря на сложности поиска сотрудников, готовых взяться за более сложную задачу, чем шахматы, в итоге Дэвид Ферруччи согласился возглавить проект.[33] В конкурсах, организованных правительством США, предшественник Watson — система Piquant — правильно отвечала лишь на 35 % вопросов и часто требовала несколько минут на ответ.[34][35][36] Для успешного участия в Jeopardy! Watson должен был отвечать за несколько секунд, что тогда считалось невозможным.[22]
В первых тестах 2006 года под руководством Дэвида Ферруччи Watson получил 500 вопросов из прошлых выпусков Jeopardy!. Лучшие игроки отвечали правильно до 95 % вопросов, а Watson — только на 15 %. В 2007 году команде IBM дали 3-5 лет и штат из 15 человек для решения задачи.[22] Джон Э. Келли III сменил Пола Хорна на посту главы IBM Research в 2007 году.[37] InformationWeek назвал Келли «отцом Watson» и отметил его вклад в идею соревнования с людьми.[38] К 2008 году разработчики довели Watson до уровня конкуренции с чемпионами Jeopardy!.[22] К февралю 2010 года Watson регулярно побеждал людей в Jeopardy!.[39]
Во время игры Watson имел доступ к 200 миллионам страниц структурированного и неструктурированного контента, занимавших 4 терабайта дискового пространства[11] включая полный текст Википедии 2011 года,[40] но не был подключён к Интернету.[41][22] Для каждого вопроса на экране отображались три наиболее вероятных ответа Watson. Watson стабильно опережал людей по скорости реакции, но испытывал трудности в категориях с короткими подсказками.[22]
Хотя система в основном разрабатывалась IBM, в создании Watson участвовали преподаватели и аспиранты Политехнический институт Ренсселера, Университет Карнеги — Меллона, Амхерстский университет Массачусетса, Институт информационных наук Университета Южной Калифорнии, Техасский университет в Остине, Массачусетский технологический институт и Университет Тренто,[9] а также студенты Нью-Йоркский медицинский колледж.[42] Среди программистов IBM, работавших над Watson, был победитель Кто хочет стать миллионером? 2001 года Эд Туант, который также участвовал в Jeopardy! в 1989 году.[43]
Jeopardy!
Подготовка
В 2008 году представители IBM связались с исполнительным продюсером Jeopardy! Гарри Фридманом по поводу участия Watson в игре против Кена Дженнингса и Брэда Раттера, двух самых успешных участников шоу, и продюсеры согласились.[22][44] Отличия Watson от людей вызвали споры между IBM и командой Jeopardy! при подготовке соревнования.[24] IBM опасалась, что авторы вопросов воспользуются слабостями Watson, превратив игру в тест Тьюринга. Для исключения этого третья сторона случайным образом выбирала вопросы из ранее написанных, но не показанных выпусков.[24] Персонал Jeopardy! также выражал опасения по поводу скорости реакции Watson на кнопку. Изначально Watson сигнализировал электронно, но по просьбе организаторов стал нажимать кнопку физически, как и люди.[45] Даже с роботизированным «пальцем» Watson оставался быстрее соперников. Кен Дженнингс отмечал: «Если хочешь выиграть, всё решает кнопка», и что Watson «может нажимать с микросекундной точностью каждый раз без колебаний. Человеческие рефлексы не могут конкурировать с компьютерными цепями».[26][32][46] Стивен Бейкер, журналист, описавший разработку Watson в книге Final Jeopardy, сообщал, что конфликт между IBM и Jeopardy! в мае 2010 года чуть не привёл к отмене соревнования.[24] В рамках подготовки IBM построила макет студии Jeopardy! в конференц-зале одного из своих центров. В тренировочных играх участвовали бывшие игроки, а ведущим был Тодд Алан Крейн из The Onion.[22] Было проведено около 100 тестовых матчей, из которых Watson выиграл 65 %.[47]
Для визуализации на телевидении Watson представлялся в виде аватара — глобуса, вдохновлённого символом IBM «умная планета». Дженнингс описывал аватар как «светящийся синий шар, пересечённый „нитями“ мысли — ровно 42 нити»,[48] что является отсылкой к числу 42 из Автостопом по галактике Дугласа Адамса.[48] Джошуа Дэвис, художник-автор аватара, объяснял, что в игре Watson мог использовать 36 состояний уверенности; он надеялся найти 42, чтобы усилить отсылку, но не смог выделить столько состояний.[49]
Тренировочный матч был записан 13 января 2011 года, а официальные — 14 января 2011 года. Все участники сохраняли тайну результатов до эфира в феврале.[50]
Тренировочный матч
В тренировочном матче для прессы 13 января 2011 года Watson выиграл раунд из 15 вопросов у Кена Дженнингса и Брэда Раттера со счётом $4 400 против $3 400 у Дженнингса и $1 200 у Раттера, хотя перед последним вопросом Дженнингс и Watson были вничью. Ни один из игроков не дал неверного ответа.[51]
Первый матч
Первый раунд был показан 14 февраля 2011 года, второй — 15 февраля 2011 года. Право выбора первой категории определялось жребием, который выиграл Раттер.[52] Watson, представленный на экране и с искусственным голосом, правильно ответил на второй вопрос, а затем выбрал четвёртый вопрос первой категории, чтобы быстрее найти Daily Double.[53] Watson правильно угадал местоположение Daily Double. В конце первого раунда Watson и Раттер набрали по $5 000, Дженнингс — $2 000.[52]
В работе Watson проявились некоторые особенности. В одном случае Watson повторил перефразированный неверный ответ Дженнингса («What are the '20s?» — «What is 1920s?»), так как не мог распознать ответы других участников. В другом случае Watson получил зачёт за ответ «What is a leg?», хотя правильный ответ был «What is: he’s missing a leg?», а Дженнингс ошибся с «What is: he only had one hand?». После обсуждения ответ Watson был признан неверным, и в эфире этот момент был вырезан.[54] Watson также демонстрировал сложные стратегии ставок на Daily Double, например, ставки $6 435 и $1 246.[55] Джеральд Тесоро, один из исследователей IBM, объяснял, что ставки Watson рассчитывались на основе уровня уверенности и сложной регрессионной модели Game State Evaluator.[16]
В Double Jeopardy! Watson вышел вперёд, правильно ответив на оба Daily Double. На второй Daily Double Watson дал правильный ответ при уровне уверенности 32 %.[55]
В раунде Final Jeopardy! Watson единственный не ответил на вопрос в категории «Города США» («Его крупнейший аэропорт назван в честь героя Второй мировой войны, второй по величине — в честь сражения Второй мировой войны»). Раттер и Дженнингс ответили «Чикаго», а Watson — «What is Торонто?????» с пятью вопросительными знаками, указывающими на низкую уверенность.[55][56][57] Ферруччи объяснял, что Watson мог выбрать канадский город, потому что категория слабо указывала на тип ответа, фраза «город США» не встречалась в вопросе, а в США есть города с названием Торонто, и у Торонто есть команда Американской лиги.[58] Крис Велти, также работавший над Watson, предполагал, что система не смогла правильно разобрать вторую часть подсказки. Эрик Найберг, профессор Университета Карнеги — Меллона, отмечал, что ошибка возникла из-за отсутствия у Watson сравнительных знаний для исключения этого варианта.[57] Вторым вариантом Watson был Чикаго, но оба варианта были ниже порога уверенности: 14 % и 11 % соответственно. Ставка Watson составила $947.
Игра завершилась с результатом: Дженнингс — $4 800, Раттер — $10 400, Watson — $35 734.[55]
Второй матч
Во вступлении ведущий Алекс Требек (уроженец Канады) пошутил, что узнал о Торонто как о городе США, а ошибка Watson в первом матче побудила инженера IBM надеть куртку Toronto Blue Jays.[59]
В первом раунде Дженнингс впервые смог выбрать Daily Double,[60] а Watson впервые ошибся на Daily Double в Double Jeopardy![61] После первого раунда Watson впервые занял второе место, уступив Раттеру и Дженнингсу, которые временно увеличили свои суммы.[61][62] Тем не менее, итоговая победа осталась за Watson — $77 147 против $24 000 у Дженнингса и $21 600 у Раттера.[63]
Итог
Призы составляли: $1 000 000 за первое место (Watson), $300 000 за второе (Дженнингс), $200 000 за третье (Раттер). IBM пожертвовала 100 % выигрыша Watson на благотворительность: 50 % — World Vision, 50 % — World Community Grid.[64] Дженнингс и Раттер также пожертвовали по 50 % своих выигрышей.[65]
В знак признания достижений IBM и Watson Дженнингс добавил к своему ответу в Final Jeopardy! фразу: «Я, например, приветствую наших новых компьютерных повелителей», перефразируя шутку из The Simpsons.[66] Позже Дженнингс написал статью для Slate, где отметил:
IBM хвасталась в СМИ, что навыки Watson по ответам на вопросы пригодятся не только для раздражения Алекса Требека. Компания видит будущее, в котором такие области, как медицинская диагностика, бизнес-аналитика и техническая поддержка будут автоматизированы программами, подобными Watson. Как заводские рабочие были вытеснены роботами в XX веке, так и мы с Брэдом стали первыми работниками умственного труда, вытесненными новым поколением «мыслящих» машин. «Участник викторины» — возможно, первая профессия, ставшая избыточной из-за Watson, но, уверен, не последняя.[48]
Философия
Философ Джон Сёрль утверждает, что Watson — несмотря на впечатляющие возможности — не способен мыслить.[67] Ссылаясь на свой мысленный эксперимент Китайская комната, Сёрль считает, что Watson, как и другие вычислительные машины, способен лишь манипулировать символами, не понимая их смысла; однако у этого эксперимента есть и критики.[68]
Матч против членов Конгресса США
28 февраля 2011 года Watson сыграл неэфирный выставочный матч Jeopardy! против членов Палаты представителей США. В первом раунде Раш Д. Холт-младший (демократ, бывший участник Jeopardy!), соревновавшийся с Биллом Кэссиди (республиканец), лидировал, Watson был вторым. Однако по сумме всех игр итоговый счёт составил $40 300 у Watson и $30 000 у конгрессменов.[69]
Кристофер Падилья из IBM отметил: «Технология Watson — это значительный шаг вперёд в вычислениях. В условиях работы с большими данными в государственном секторе такие технологии могут помочь принимать лучшие решения и улучшить обслуживание граждан».[69]
Применение
После национального резонанса, вызванного участием в Jeopardy! в 2011 году, IBM искала партнёров в сферах образования, метеорологии, медицины и розничной торговли, чтобы продемонстрировать возможности Watson. Это в итоге привело к неудаче в поиске прибыльного продукта для компании.[70]
В 2011 году генеральный юрисконсульт IBM опубликовал в The National Law Review статью о том, что юридическая профессия станет эффективнее с Watson.[71] После успеха на Jeopardy! начался дорогостоящий и неудачный проект по использованию Watson для помощи врачам в диагностике и лечении рака в Memorial Sloan Kettering Cancer Center. В итоге подразделение обошлось в 4 миллиарда долларов, но было продано за четверть этой суммы — 1 миллиард долларов в 2022 году.[72] К 2023 году Watson привёл к потере IBM 10 % рыночной стоимости, затраты в четыре раза превысили доход, а также к массовым сокращениям.[70]
С 2012 года и до конца 2010-х технологии Watson использовались для создания приложений (в основном впоследствии закрытых)[73] для поддержки принятия решений в различных областях, среди которых:
- диагностика рака и подбор лечения,[74]
- розничная торговля,[75]
- закупка медицинского оборудования,[76]
- кулинария и рецепты,[77][78]
- водосбережение,[79]
- гостиничный бизнес,[80]
- генетическое секвенирование человека,[80]
- разработка и идентификация музыки,[81]
- прогнозирование погоды,[82]
- продажа рекламы с учётом прогноза погоды,[83]
- обучение студентов,[84]
- подготовка налоговой отчётности.[85]
В 2021 году технологический журналист The New York Times Стив Рор объяснял:
Ошибки компании с Watson начались с раннего акцента на крупных и сложных инициативах, призванных принести как признание, так и значительный доход, по мнению более десятка нынешних и бывших менеджеров и учёных IBM, опрошенных для этой статьи. Несколько из них попросили не называть их имена, так как не были уполномочены говорить или сохраняли деловые связи с IBM.
— Стив Рор
В 2023 году в The Atlantic Мак Шверин писал:
Но руководители компании выбрали более сложную задачу — загрузить в машину совершенно разные типы материалов. Они рассматривали Watson как билет в будущее целого поколения.
— Мак Шверин
В итоге изначальное видение IBM Watson как революционной технологии не реализовалось.[86] Возможности Watson оказались востребованы в узких задачах, таких как обработка естественного языка для викторин, а не для универсального решения коммерческих проблем.[87] Несоответствие между возможностями Watson и маркетингом IBM стало одной из причин коммерческих неудач и последующего упадка. Завышенные ожидания также привели к негативному общественному восприятию Watson и искусственного интеллекта.[73]
В 2019—2023 годах IBM сместила акцент на отдельную инициативу WatsonX, отличную от Watson, с ориентацией на отраслевые решения в рамках облачных и платформенных стратегий IBM Watsonx.[73][70]
Здравоохранение
Watson использовался для анализа медицинских данных и поддержки врачей при постановке диагнозов и выборе лечения рака.[88][89] При поступлении запроса от врача Watson начинал многошаговый процесс: анализировал ввод, изучал данные пациента, выявлял медицинский и наследственный анамнез, сравнивал различные источники и формировал гипотезы.[90][89]
IBM утверждала, что Watson может использовать широкий спектр источников, включая рекомендации по лечению, электронные медицинские карты и научные публикации.[89] Однако впоследствии руководство компании объясняло неудачу проектов нехваткой данных.[72]
Важно, что Watson не участвовал в постановке диагноза, а помогал врачам выбирать варианты лечения для уже диагностированных пациентов.[91] В исследовании 1 000 сложных случаев рекомендации Watson совпали с мнением врачей в 99 % случаев.[92]
IBM сотрудничала с Кливлендской клиникой,[93] MD Anderson Cancer Center и Memorial Sloan-Kettering Cancer Center. В 2011 году IBM заключила исследовательское партнёрство с Nuance Communications и врачами Университета Мэриленда и Гарварда для создания коммерческого продукта на основе Watson как системы поддержки принятия клинических решений. IBM сотрудничала с WellPoint (ныне Anthem) для использования Watson в подборе вариантов лечения,[94] а в 2013 году Watson был внедрён для поддержки решений по лечению рака лёгких в Memorial Sloan-Kettering Cancer Center.[8] Сотрудничество с Кливлендской клиникой было направлено на повышение экспертности Watson в медицине. Однако пилотный проект MD Anderson Cancer Center, начатый в 2013 году, не достиг целей и был закрыт после инвестиций в $65 млн.[95][96][93]
В 2016 году IBM запустила продукт «IBM Watson for Oncology» для предоставления персонализированных вариантов лечения рака.[86] Также IBM сотрудничала с Manipal Hospitals в Индии для онлайн-консультаций.[97][98]
В итоге компания столкнулась с трудностями на рынке здравоохранения, не получив прибыли и столкнувшись с конкуренцией.[86] В 2022 году IBM объявила о продаже подразделения Watson Health компании Francisco Partners.[86][72]
IBM Watson Group
9 января 2014 года IBM объявила о создании бизнес-единицы Watson.[99] Штаб-квартира IBM Watson Group расположена в Silicon Alley (Нью-Йорк), штат сотрудников — 2 000 человек. IBM инвестировала $1 млрд в запуск подразделения. Watson Group разрабатывает три облачных сервиса: Watson Discovery Advisor (для НИОКР в фармацевтике, издательском деле и биотехнологиях), Watson Engagement Advisor (для самообслуживания на основе анализа естественного языка) и Watson Explorer (для поиска и обмена аналитикой на основе федеративного поиска).[99] Компания также запустила венчурный фонд в $100 млн для поддержки разработки «когнитивных» приложений. По данным IBM, облачный Watson стал в 24 раза быстрее (рост производительности на 2 300 %) и уменьшился в размерах на 90 % — с размеров спальни до трёх стопок коробок из-под пиццы.[99] Генеральный директор IBM Вирджиния Рометти заявила, что хочет достичь $10 млрд годового дохода от Watson за 10 лет.[100] В 2017 году IBM и MIT создали совместную лабораторию искусственного интеллекта MIT-IBM Watson AI Lab с инвестициями IBM в $240 млн.[101] В марте 2018 года CEO IBM Джинни Рометти предложила «Закон Watson» — применение ИИ во всех сферах бизнеса и жизни.[102]
Примечания
- ↑ 1 2 3 DeepQA Project: FAQ. IBM (22 апреля 2009). Дата обращения: 11 февраля 2011. Архивировано 29 июня 2011 года.
- ↑ Ferrucci, David; Levas, Anthony; Bagchi, Sugato; Gondek, David; Mueller, Erik T. (2013-06-01). “Watson: Beyond Jeopardy!”. Artificial Intelligence. 199: 93—105. DOI:10.1016/j.artint.2012.06.009.
- ↑ 1 2 Hale, Mike. Actors and Their Roles for $300, HAL? HAL! (February 8, 2011). Дата обращения: 11 февраля 2011.
- ↑ The DeepQA Project. IBM Research (22 апреля 2009). Дата обращения: 18 февраля 2011. Архивировано 29 июня 2011 года.
- ↑ Dave Ferrucci at Computer History Museum – How It All Began and What's Next. IBM Research (1 декабря 2011). Дата обращения: 11 февраля 2012. Архивировано 13 марта 2012 года.
- ↑ Loftus, Jack IBM Prepping 'Watson' Computer to Compete on Jeopardy! Gizmodo (26 апреля 2009). Дата обращения: 18 сентября 2017. Архивировано 31 июля 2017 года.
- ↑ IBM's "Watson" Computing System to Challenge All Time Henry Lambert Jeopardy! Champions. Sony Pictures Television (14 декабря 2010). Архивировано 16 июня 2013 года.
- ↑ 1 2 Upbin, Bruce IBM's Watson Gets Its First Piece Of Business In Healthcare. Forbes (8 февраля 2013). Дата обращения: 18 сентября 2017. Архивировано 18 сентября 2017 года.
- ↑ 1 2 Ferrucci, D.; et al. (2010). “Building Watson: An Overview of the DeepQA Project”. AI Magazine. 31 (3): 59—79. DOI:10.1609/aimag.v31i3.2303. Архивировано из оригинала December 28, 2017. Дата обращения February 19, 2011. Используется устаревший параметр
|url-status=(справка) - ↑ Watson, A System Designed for Answers: The Future of Workload Optimized Systems Design. IBM Systems and Technology 3 (февраль 2011). Дата обращения: 9 сентября 2015. Архивировано 4 марта 2016 года.
- ↑ 1 2 Jackson, Joab IBM Watson Vanquishes Human Jeopardy Foes. PC World (17 февраля 2011). Дата обращения: 17 февраля 2011. Архивировано 20 февраля 2011 года.
- ↑ Takahashi, Dean IBM researcher explains what Watson gets right and wrong. VentureBeat (17 февраля 2011). Дата обращения: 18 февраля 2011. Архивировано 18 февраля 2011 года.
- ↑ Novell. Watson Supercomputer to Compete on 'Jeopardy!' – Powered by SUSE Linux Enterprise Server on IBM POWER7. The Wall Street Journal (2 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 21 апреля 2011 года.
- ↑ Tesauro, G.; Gondek, D. C.; Lenchner, J.; Fan, J.; Prager, J. M. (May 2012). “Simulation, learning, and optimization techniques in Watson's game strategies”. IBM Journal of Research and Development. 56 (3.4): 16:1–16:11. DOI:10.1147/JRD.2012.2188931. ISSN 0018-8646.
- ↑ Tesauro, G.; Gondek, D. C.; Lenchner, J.; Fan, J.; Prager, J. M. (2013-05-31). “Analysis of Watson's Strategies for Playing Jeopardy!”. Journal of Artificial Intelligence Research [англ.]. 47: 205—251. arXiv:1402.0571. DOI:10.1613/jair.3834. ISSN 1076-9757.
- ↑ 1 2 Tesauro, Gerald Watson's wagering strategies. IBM Research News. IBM (13 февраля 2011). Дата обращения: 18 февраля 2011. Архивировано 18 февраля 2011 года.
- ↑ 1 2 Is Watson the smartest machine on earth? Computer Science and Electrical Engineering Department. University of Maryland, Baltimore County (10 февраля 2011). Дата обращения: 11 февраля 2011. Архивировано 27 сентября 2011 года.
- ↑ 1 2 Rennie, John How IBM's Watson Computer Excels at Jeopardy! PLoS blogs (14 февраля 2011). Дата обращения: 19 февраля 2011. Архивировано 22 февраля 2011 года.
- ↑ Lucas, Mearian Can anyone afford an IBM Watson supercomputer? (Yes). Computerworld (21 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 12 декабря 2013 года.
- ↑ Top500 List – November 2013. Top500.org. Дата обращения: 4 января 2014. Архивировано 31 декабря 2013 года.
- ↑ Ferrucci, David; et al. “The AI Behind Watson – The Technical Article”. AI Magazine (Fall 2010). Архивировано из оригинала November 6, 2020. Дата обращения November 11, 2013. Используется устаревший параметр
|url-status=(справка) - ↑ 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 Thompson, Clive. Smarter Than You Think: What Is I.B.M.'s Watson? (June 16, 2010). Архивировано 5 июня 2011 года. Дата обращения: 18 февраля 2011.
- ↑ Will Watson Win On Jeopardy!? Nova ScienceNOW. Public Broadcasting Service (20 января 2011). Дата обращения: 27 января 2011. Архивировано 14 апреля 2011 года.
- ↑ 1 2 3 4 Needleman, Rafe Reporters' Roundtable: Debating the robobrains. CNET (18 февраля 2011). Дата обращения: 18 февраля 2011. (недоступная ссылка)
- ↑ Russo-Spena, Tiziana; Mele, Cristina; Marzullo, Marialuisa (2018). “Practising Value Innovation through Artificial Intelligence: The IBM Watson Case”. Journal of Creating Value [англ.]. 5 (1): 11—24. DOI:10.1177/2394964318805839. ISSN 2394-9643. S2CID 56759835.
- ↑ 1 2 3 4 Jeopardy! Champ Ken Jennings (February 15, 2011). Архивировано 14 февраля 2011 года. Дата обращения: 15 февраля 2011.
- ↑ 1 2 Gondek, David How Watson "sees," "hears," and "speaks" to play Jeopardy! IBM Research News (10 января 2011). Дата обращения: 21 февраля 2011.
- ↑ Avery, Lise Interview with Actor Jeff Woodman, Voice of IBM's Watson Computer (MP3). Anything Goes!! (14 февраля 2011). Дата обращения: 15 февраля 2011. Архивировано 21 сентября 2019 года.
- ↑ Kosinski, Robert J. A Literature Review on Reaction Time. Clemson University (2008). Дата обращения: 10 января 2016. Архивировано 17 марта 2016 года.
- ↑ 1 2 Baker (2011), p. 174.
- ↑ Baker (2011), p. 178.
- ↑ 1 2 3 Strachan, Alex. For Jennings, it's a man vs. man competition (February 12, 2011). Архивировано 21 февраля 2011 года. Дата обращения: 15 февраля 2011.
- ↑ Baker (2011), pp. 6–8.
- ↑ Baker (2011), p. 30.
- ↑ Radev, Dragomir R.; Prager, John; Samn, Valerie (2000). “Ranking potential answers to natural language questions” (PDF). Proceedings of the 6th Conference on Applied Natural Language Processing. Архивировано из оригинала (PDF) 2011-08-26. Дата обращения 2011-02-23. Используется устаревший параметр
|url-status=(справка) - ↑ Prager, John; Brown, Eric; Coden, Annie; Radev, Dragomir R. (July 2000). “Question-answering by predictive annotation” (PDF). Proceedings, 23rd Annual International ACM SIGIR Conference on Research and Development in Information Retrieval. Архивировано из оригинала (PDF) 2011-08-23. Дата обращения 2011-02-23. Используется устаревший параметр
|url-status=(справка) - ↑ IBM's Paul Horn retires, Kelly named research chief, EE Times (July 18, 2007). Архивировано 3 июня 2020 года. Дата обращения: 27 мая 2020.
- ↑ IBM Cognitive Colloquium Spotlights Uncovering Dark Data, InformationWeek (October 14, 2015). Архивировано 3 июня 2020 года. Дата обращения: 27 мая 2020.
- ↑ Brodkin, Jon IBM's Jeopardy-playing machine can now beat human contestants. Network World (10 февраля 2010). Дата обращения: 19 февраля 2011. Архивировано 3 июня 2013 года.
- ↑ Zimmer, Ben Is It Time to Welcome Our New Computer Overlords? The Atlantic (17 февраля 2011). Дата обращения: 17 февраля 2011. Архивировано 29 августа 2018 года.
- ↑ Raz, Guy Can a Computer Become a Jeopardy! Champ? National Public Radio (28 января 2011). Дата обращения: 18 февраля 2011. Архивировано 28 февраля 2011 года.
- ↑ “Medical Students Offer Expertise to IBM's Jeopardy!-Winning Computer Watson as It Pursues a New Career in Medicine” (PDF). InTouch. New York Medical College. 18: 4. June 2012. Архивировано из оригинала (PDF) 2012-11-23. Используется устаревший параметр
|url-status=(справка) - ↑ 'Millionaire' quiz whiz Toutant had passion for trivia, Austin's arts scene. Дата обращения: 23 сентября 2021. Архивировано 23 сентября 2021 года.
- ↑ Stelter, Brian. I.B.M. Supercomputer 'Watson' to Challenge 'Jeopardy' Stars (December 14, 2010). Дата обращения: 14 декабря 2010.
- ↑ Baker (2011), p. 171.
- ↑ Flatow, Ira IBM Computer Faces Off Against 'Jeopardy' Champs. Talk of the Nation. National Public Radio (11 февраля 2011). Дата обращения: 15 февраля 2011. Архивировано 17 февраля 2011 года.
- ↑ Sostek, Anya. Human champs of 'Jeopardy!' vs. Watson the IBM computer: a close match (February 13, 2011). Архивировано 17 февраля 2011 года. Дата обращения: 19 февраля 2011.
- ↑ 1 2 3 Jennings, Ken My Puny Human Brain. Slate. Newsweek Interactive Co. LLC (16 февраля 2011). Дата обращения: 17 февраля 2011. Архивировано 18 февраля 2011 года.
- ↑ Baker (2011), p. 117.
- ↑ Baker (2011), pp. 232–258.
- ↑ Dignan, Larry IBM's Watson wins Jeopardy practice round: Can humans hang? ZDnet (13 января 2011). Дата обращения: 13 января 2011. Архивировано 13 января 2011 года.
- ↑ 1 2 «The IBM Challenge Day 1». Jeopardy. February 14, 2011. Серия 23, сезон 27.
- ↑ Lenchner, Jon Knowing what it knows: selected nuances of Watson's strategy. IBM Research News. IBM (3 февраля 2011). Дата обращения: 16 февраля 2011. Архивировано 16 февраля 2011 года.
- ↑ Johnston, Casey Jeopardy: IBM's Watson almost sneaks wrong answer by Trebek. Ars Technica (15 февраля 2011). Дата обращения: 15 февраля 2011. Архивировано 18 февраля 2011 года.
- ↑ 1 2 3 4 Computer crushes the competition on 'Jeopardy!' (15 февраля 2011). Дата обращения: 19 февраля 2011. Архивировано 19 февраля 2011 года.
- ↑ Staff. IBM's computer wins 'Jeopardy!' but... Toronto? CTV News (15 февраля 2011). Дата обращения: 15 февраля 2011. Архивировано 27 ноября 2012 года.
- ↑ 1 2 Robertson, Jordan; Borenstein, Seth For Watson, Jeopardy! victory was elementary (16 февраля 2011). Дата обращения: 17 февраля 2011. Архивировано 20 февраля 2011 года.
- ↑ Hamm, Steve Watson on Jeopardy! Day Two: The Confusion over and Airport Clue. A Smart Planet Blog (15 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 24 октября 2011 года.
- ↑ Oberman, Mira Computer creams human Jeopardy! champions. Vancouver Sun (17 февраля 2011). Дата обращения: 17 февраля 2011. Архивировано 20 февраля 2011 года.
- ↑ Johnston, Casey Bug lets humans grab Daily Double as Watson triumphs on Jeopardy. Ars Technica (17 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 21 февраля 2011 года.
- ↑ 1 2 Upbin, Bruce IBM's Supercomputer Watson Wins It All With $367 Bet. Forbes (17 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 21 февраля 2011 года.
- ↑ Oldenburg, Ann Ken Jennings: 'My puny brain' did just fine on 'Jeopardy!'. USA Today (17 февраля 2011). Дата обращения: 21 февраля 2011. Архивировано 20 февраля 2011 года.
- ↑ «Show 6088 – The IBM Challenge, Day 2». Jeopardy!. Syndicated.
- ↑ World Community Grid to benefit from Jeopardy! competition. World Community Grid (4 февраля 2011). Дата обращения: 19 февраля 2011. Архивировано 14 января 2012 года.
- ↑ Jeopardy! And IBM Announce Charities To Benefit From Watson Competition. IBM Corporation (13 января 2011). Дата обращения: 19 февраля 2011. Архивировано 10 ноября 2021 года.
- ↑ Markoff, John. Computer Wins on 'Jeopardy!': Trivial, It's Not (February 16, 2011). Архивировано 22 октября 2014 года. Дата обращения: 17 февраля 2011.
- ↑ Searle, John. Watson Doesn't Know It Won on 'Jeopardy!' (February 23, 2011). Архивировано 10 ноября 2021 года. Дата обращения: 26 июля 2011.
- ↑ Lohr, Steve. Creating AI based on the real thing (December 5, 2011). Архивировано 10 ноября 2021 года. Дата обращения: 26 февраля 2017..
- ↑ 1 2 NJ congressman tops 'Jeopardy' computer Watson (2 марта 2011). Дата обращения: 2 марта 2011. Архивировано 7 марта 2011 года.
- ↑ 1 2 3 America Forgot About IBM Watson. Is ChatGPT Next?, The Atlantic (May 5, 2023). Архивировано 5 мая 2023 года.
- ↑ Weber, Robert C.. Why 'Watson' matters to lawyers, The National Law Review (February 14, 2011). Архивировано 8 сентября 2019 года.
- ↑ 1 2 3 Lohr, Steve. IBM is selling off Watson Health to a private equity firm. (англ.), The New York Times (21 января 2022). Архивировано 21 января 2022 года. Дата обращения: 20 марта 2025.
- ↑ 1 2 3 Lohr, Steve. What Ever Happened to IBM's Watson? (англ.), The New York Times (16 июля 2021). Архивировано 16 июля 2021 года. Дата обращения: 20 марта 2025.
- ↑ Lohr, Steve. IBM Is Counting on Its Bet on Watson, and Paying Big Money for It (англ.), The New York Times (17 октября 2016). Дата обращения: 20 марта 2025.
- ↑ Ungerleider, Neal. The North Face Testing Watson-Powered Virtual Personal Shoppers, Fast Company (April 23, 2014). Архивировано 17 января 2019 года.
- ↑ Hesseldahl, Arik. First Investment by IBM's Watson Fund Is for Welltok, Vox (February 12, 2014). Архивировано 28 сентября 2021 года.
- ↑ Yang, Ina. Caviar + Mango: Chef Watson Wants You to Cook Outside the Comfort Zone, NPR (July 13, 2015). Архивировано 14 июля 2015 года.
- ↑ O'Brien, Terrence Watson's South American spin on a Canadian classic (амер. англ.). Engadget (20 июня 2015). Дата обращения: 20 марта 2025. Архивировано 11 мая 2020 года.
- ↑ Johnson, Scott K.. IBM's Watson Fed Images to Estimate Water Use Efficiency in California, Ars Technica (July 6, 2016). Архивировано 6 июля 2016 года.
- ↑ 1 2 Hardawar, Devindra. IBM's big bet on Watson is paying off with more apps and DNA analysis, Engadget (May 5, 2015). Архивировано 29 сентября 2020 года.
- ↑ Liu, Bin; Liao, Yuanyuan (2025-01-31). “Integrating IBM Watson BEAT generative AI software into flute music learning: the impact of advanced AI tools on students' learning strategies”. Education and Information Technologies [англ.]. DOI:10.1007/s10639-025-13394-y. ISSN 1573-7608.
- ↑ IBM's Watson Takes On Yet Another Job, as a Weather Forecaster, Smithsonian (26 August 2016). Архивировано 1 сентября 2016 года. Дата обращения: 29 августа 2016.
- ↑ IBM finally reveals why it bought The Weather Company, Market Watch (15 June 2016). Архивировано 22 августа 2016 года. Дата обращения: 29 августа 2016.
- ↑ Pearson Taps IBM's Watson as a Virtual Tutor for College Students, Bloomberg (October 25, 2016). Архивировано 27 сентября 2017 года. Дата обращения: 26 сентября 2017.
- ↑ H&R Block Enlists IBM Watson to Find Tax Deductions, PC Magazine (2 February 2017). Архивировано 15 февраля 2017 года. Дата обращения: 14 февраля 2017.
- ↑ 1 2 3 4 Strickland, Eliza. How IBM Watson Overpromised and Underdelivered on AI Health Care, IEEE Spectrum (April 2, 2019). Архивировано 30 июля 2021 года.
- ↑ Yu, Jea. Back from the Dead, IBM's Watson AI is Alive and Re-Emerging, MarketBeat / Nasdaq (April 10, 2023). Архивировано 26 апреля 2023 года.
- ↑ IBM Watson is AI for Business. IBM (9 июля 2024).
- ↑ 1 2 3 Putting Watson to Work: Watson in Healthcare. IBM. Дата обращения: 11 ноября 2013. Архивировано 11 ноября 2013 года.
- ↑ IBM Watson Helps Fight Cancer with Evidence-Based Diagnosis and Treatment Suggestions. IBM. Дата обращения: 12 ноября 2013. Архивировано 26 апреля 2013 года.
- ↑ Saxena, Manoj IBM Watson Progress and 2013 Roadmap (Slide 7). IBM (13 февраля 2013). Дата обращения: 12 ноября 2013. Архивировано 13 ноября 2013 года.
- ↑ IBM. MD Anderson Taps IBM Watson to Power "Moon Shots" Mission Aimed at Ending Cancer, Starting with Leukemia. Пресс-релиз.
- ↑ 1 2 Miliard, Mike. Watson Heads to Medical School: Cleveland Clinic, IBM Send Supercomputer to College, Healthcare IT News (October 30, 2012). Архивировано 11 ноября 2013 года. Дата обращения: 11 ноября 2013.
- ↑ Mathews, Anna Wilde. Wellpoint's New Hire: What is Watson? (September 12, 2011). Архивировано 22 февраля 2017 года. Дата обращения: 12 марта 2017.
- ↑ IBM's Jeopardy! Stunt Computer Is Curing Cancer Now. New York Magazine (23 ноября 2016).
- ↑ MD Anderson Benches IBM Watson In Setback For Artificial Intelligence In Medicine, Forbes. Архивировано 2 октября 2017 года. Дата обращения: 18 сентября 2017.
- ↑ ANI. Manipal Hospitals to adopt IBM's 'Watson for Oncology' supercomputer for cancer treatment (28 октября 2016). Архивировано 18 января 2017 года. Дата обращения: 17 января 2017.
- ↑ Goel, Vindu. IBM Now Has More Employees in India Than in the U.S. (англ.), The New York Times (28 сентября 2017). Дата обращения: 20 марта 2025.
- ↑ 1 2 3 IBM (January 9, 2014). IBM Watson Group Unveils Cloud-Delivered Watson Services to Transform Industrial R&D, Visualize Big Data Insights and Fuel Analytics Exploration. Пресс-релиз.
- ↑ Ante, Spencer E. IBM Set to Expand Watson's Reach. The Wall Street Journal (9 января 2014). Дата обращения: 9 января 2014. Архивировано 9 мая 2015 года.
- ↑ Inside the Lab (сентябрь 2017). Дата обращения: 6 октября 2020. Архивировано 23 октября 2020 года.
- ↑ «IBM CEO Rometty Proposes 'Watson’s Law': AI In Everything» Архивировано 16 апреля 2021 года., Adrian Bridgewater, Forbes, March 20, 2018
Литература
- Baker, Stephen. Final Jeopardy: Man vs. Machine and the Quest to Know Everything. — Boston, New York : Houghton Mifflin Harcourt, 2011. — ISBN 978-0-547-48316-0.
- Baker, Stephen (2012) Final Jeopardy: The Story of Watson, the Computer That Will Transform Our World, Mariner Books.
- Jackson, Joab (2014). IBM bets big on Watson-branded cognitive computing PCWorld: Jan 9, 2014 2:30 PM
- Greenemeier, Larry. (2013). Will IBM’s Watson Usher in a New Era of Cognitive Computing? Scientific American. Nov 13, 2013 |* Lazarus, R. S. (1982).
- Kelly, J.E. and Hamm, S. (2013). Smart Machines: IBM’s Watson and the Era of Cognitive Computing. Columbia Business School Publishing
Ссылки
- Официальный сайт Watson
- О Watson на Jeopardy.com
- Power Systems
- The Watson Trivia Challenge. The New York Times. 16 июня 2010.
- This is Watson — IBM Journal of Research and Development (издатель IEEE)