Конфиденциальность виртуальных ассистентов
Конфиденциальность виртуальных ассистентов — это область, изучающая вопросы безопасности и конфиденциальности персональных данных, передаваемых и обрабатываемых виртуальными ассистентами (виртуальными помощниками). Виртуальные ассистенты — это программное обеспечение, предназначенное для помощи пользователю в выполнении различных задач[1]. К самым известным относятся Alexa (Алекса) от Amazon, Siri (Сири) от Apple; также подобные продукты есть у Google и Microsoft. Существует обеспокоенность тем, как операторы этих ассистентов используют и защищают передаваемые им данные[2].
Поскольку виртуальные ассистенты, как и роботы или прочие системы искусственного интеллекта, часто воспринимаются как «заботливые» сущности, пользователи склонны пренебрегать потенциальными рисками для конфиденциальности в пользу удобства. Люди теснее взаимодействуют с устройствами, которые имитируют человеческое поведение, что и делают виртуальные ассистенты[3]. В подходе privacy by design (приватность по конструкту) и концепции виртуальной кнопки безопасности (Virtual Safety Button, КБВ) предложены методы, направленные на достижение баланса между удобством и защитой данных пользователя.
Одноуровневая и многоуровневая верификация
Виртуальная кнопка безопасности, способная распознавать движения, предложена как способ усиления верификации на устройствах, где сегодня применён только один уровень проверки. Современные ассистенты часто активируются лишь по голосовой команде, которая может быть произнесена кем угодно, а не только владельцем[4]. Многоуровневая верификация предполагает прохождение нескольких стадий проверки прежде, чем ассистент включится. КБВ — пример второй ступени, где ассистент, например Alexa, активируется только при одновременном сочетании голоса и движения[4].
Риск возникает в случае, если, например, Amazon Alexa остаётся без присмотра в доме: сейчас единственной защитой служит голосовая активация, не требующая присутствия владельца[4]. Это вызывает вопросы о безопасности обрабатываемых данных и побуждает индустрию внедрять дополнительные уровни верификации, такие как кнопка безопасности[4].
Голосовая верификация в Siri
Функция «Привет, Сири» позволяет iPhone постоянно слушать окружающие звуки до тех пор, пока не будет распознана активационная фраза[5]. Если пользователь отключает эту функцию, устройство не будет постоянно ожидать команду и, соответственно, окружающий звук записываться не будет[5]. Верификация по голосу представляет собой пример одноуровневой защиты, где исключительно голос используется для подтверждения личности владельца.
Примеры виртуальных ассистентов
Alexa от Amazon
Alexa интегрирована с умной колонкой Echo, представляет собой устройство, полностью управляемое голосом, и может воспроизводить музыку, предоставлять справочную информацию и выполнять иные функции[6]. Управление происходит только голосом; кнопок нет, а также отсутствует механизм, позволяющий убедиться, что распознан именно голос владельца[4]. Виртуальная кнопка безопасности предлагается как дополнительный уровень защиты для этого ассистента[4].
Преимущества добавления кнопки безопасности (КБВ) к Alexa
КБВ использует Wi-Fi-технологии для обнаружения кинематического движения человека[4]. Например, сценарии кражи представляют опасность, потому что умный замок может сработать при обнаружении движения[4]. Введение дополнительного уровня проверки с помощью КБВ снижает подобные риски[4]. Добавление КБВ обеспечивает не только дополнительную защиту, но и большую приватность устройства[4].
Siri от Apple
Siri — ассистент Apple для iPhone, который собирает предоставляемые пользователем данные и может их анализировать[2]. Ключевую роль в уровне приватности играет экосистема интерфейса, где хранятся эти данные; среди особенно уязвимой информации — местоположение при использовании GPS[7]. Любая информация, передаваемая ассистенту (например, координаты), сохраняется внутри такой экосистемы[7].
«Привет, Сири»
Фраза активации «Привет, Сири» переводит устройство в режим прослушивания, и ассистент будет улавливать окружающий звук до повторного обнаружения фразы[5]. Это особенно полезно для людей с нарушением зрения, поскольку позволяет им управлять приложениями исключительно голосом[8].
Уровень верификации в Siri
В Siri также реализован только один уровень проверки. Если пользователь настраивает код доступа для определённых функций, Siri попросит его ввести. Однако ради удобства многие пользователи отказываются от использования паролей[4].
Cortana
Cortana — ассистент компании Microsoft, также активируется голосом и предусматривает только один уровень проверки[6]. Кнопка виртуальной безопасности как второй уровень не используется. Большинство команд — справка о погоде, звонки и навигация — требуют доступа к персональным данным пользователя, что создаёт риски для конфиденциальности.
Ассистент Google
Ассистент Google (ранее Google Now) считается наиболее «человеко-подобным» ассистентом[6]. Это объясняется как расширенными возможностями обработки естественного языка, так и предварительным предугадыванием пользовательских желаний. Некоторые подобные взаимодействия называют промокомандами[6].
Автоматизированные виртуальные ассистенты для совместных поездок
Компании, предоставляющие услуги совместных поездок, такие как Uber и Lyft, используют искусственный интеллект для масштабирования и оптимизации процессов. Алгоритмы устанавливают динамические («пиковые» или prime time) тарифы исходя из спроса и предложения[9]. Искусственный интеллект также помогает решать вопросы приватности при работе с конфиденциальными данными клиентов, однако сохраняет вопросы о рисках приватности в компаниях этого типа[9].
Доступность условий использования
Условия использования — первый этап, на котором пользователь предоставляет компаниям (например, Apple) доступ к своим данным. Контракт уточняет функциональность устройств и их возможности, а также информацию, которая допускается к обработке как приватная[10]. При этом даже если пользователь читает этот текст, его изложение часто запутанно и неконкретно: информация обычно дана мелким шрифтом и распространяется на широкий круг случаев, мало понятных среднему пользователю[10].
Приватность по дизайну
Приватность по дизайну — подход к защите данных, при котором меры конфиденциальности закладываются уже на этапе проектирования интерфейса и всего продукта[11]. Даже сервисы, не связанные напрямую с геолокацией, потенциально могут отслеживать местоположение пользователя — например, посредством Wi-Fi. Всё больше организаций стремятся к стандартизации и внедрению принципов «приватности по конструкту»[11].
Если продукт не учитывает приватность по дизайну, производитель должен добавить соответствующие решения на других этапах. Главная цель — обеспечение такого организационного и технологического стандарта, который бы предотвращал появление уязвимостей[11]. Такой подход может быть применён и к виртуальным ассистентам.
Существует ряд патентов и предложений, согласно которым системы искусственного интеллекта должны по умолчанию поддерживать различные режимы работы с приватными данными. Внедрение методов privacy by design избавляет компании от необходимости «достраивать» защиту приватных данных для будущих версий продуктов — защита закладывается на изначальном этапе[12]. Это делает функционирование алгоритмов приватности более надёжным, включая даже экстремальные сценарии[11].
Искусственный интеллект
Искусственный интеллект призван имитировать действия человека, облегчая выполнение повседневных задач[13]. В процессе автоматизации формируется множество пользовательских интерфейсов.
Остаётся нерешённой проблема выбора, какую информацию виртуальный ассистент должен обрабатывать и хранить[13]. В контексте ИИ и виртуальных ассистентов важно понимать, какую часть данных они получают и каким образом может быть поставлена под угрозу приватность пользователя.
Полемика
С развитием виртуальных ассистентов растёт и общественное беспокойство по поводу их возможной политической ангажированности, способности транслировать спорные точки зрения с массовым влиянием, а также широкого распространения этих технологий[14].
Также вызывает вопросы использование методов краудсорсинга, предоставляющего возможности для инноваций через пользовательский вклад, но потенциально позволяющего компаниям присваивать себе идеи, предложенные пользователями[15].
Методика «Волшебник страны Оз»
Одной из методик исследования взаимодействия между человеком и роботом является подход «Волшебник страны Оз»: исследователь-оператор частично управляет устройством, пока пользователь выполняет задание[16]. Данный подход дополняется оценкой со стороны человека, что позволяет совершать тесты и оптимизацию систем искусственного интеллекта и роботов[16]. Таким образом, максимизация «человечности» — не всегда необходимое условие: ассистенты могут быть эффективными, даже если не стремятся полностью имитировать человека.
Примечания
- ↑ System and method for distributed virtual assistant platforms (patent). Дата обращения: 6 июня 2024.
- ↑ 1 2 Sadun, Erica. Talking to Siri : [англ.] / Erica Sadun, Steve Sande. — Que Publishing, 2012. — ISBN 9780789749734.
- ↑ Turkle, Sherry. A Nascent Robotics Culture: New Complicities for Companionship (англ.). MIT. Дата обращения: 6 июня 2024.
- ↑ 1 2 3 4 5 6 7 8 9 10 11 Lei, Xinyu (2017). “The Insecurity of Home Digital Voice Assistants - Amazon Alexa as a Case Study”. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ 1 2 3 Zhang, Guoming (2017). “Proceedings of the 2017 ACM SIGSAC Conference on Computer and Communications Security - CCS '17: DolphinAttack” [англ.]: 103—117. DOI:10.1145/3133956.3134052. ISBN 9781450349468. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ 1 2 3 4 López, Gustavo. Alexa vs. Siri vs. Cortana vs. Google Assistant: A Comparison of Speech-Based Natural User Interfaces // Advances in Human Factors and Systems Interaction : [англ.] / Gustavo López, Luis Quesada, Luis A. Guerrero. — 2018. — Vol. 592. — P. 241–250. — ISBN 978-3-319-60365-0. — doi:10.1007/978-3-319-60366-7_23.
- ↑ 1 2 Andrienko, Gennady; Gkoulalas-Divanis, Aris; Gruteser, Marco; Kopp, Christine; Liebig, Thomas; Rechert, Klaus (2013). “Report from Dagstuhl”. ACM Sigmobile Mobile Computing and Communications Review [англ.]. 17 (2): 7. DOI:10.1145/2505395.2505398. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ Ye, Hanlu; Malu, Meethu; Oh, Uran; Findlater, Leah (2014). “Current and future mobile and wearable device use by people with visual impairments”. Proceedings of the 32nd annual ACM conference on Human factors in computing systems - CHI '14 [англ.]: 3123—3132. DOI:10.1145/2556288.2557085. ISBN 9781450324731. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ 1 2 Ballard, Dyllan. Algorithms, Artificial Intelligence, and Joint Conduct (англ.). Competition Policy International. Дата обращения: 6 июня 2024.
- ↑ 1 2 Stylianou, Konstantinos K. (2010). “An Evolutionary Study of Cloud Computing Services Privacy Terms”. John Marshall Journal of Computer & Information Law [англ.]. 27 (4). Дата обращения 2024-06-06.
- ↑ 1 2 3 4 Cavoukian, Ann. Building Privacy into Mobile Location Analytics (MLA) Through Privacy by Design (англ.). Privacy by Design. FTC. Дата обращения: 6 июня 2024. Архивировано 16 октября 2019 года.
- ↑ Personal virtual assistant (patent). Дата обращения: 6 июня 2024.
- ↑ 1 2 McCorduck, Pamela. Machines who think: a personal inquiry into the history and prospects of artificial intelligence : [англ.]. — 25th anniversary update. — Natick, Mass. : A.K. Peters, 2004. — ISBN 978-1568812052.
- ↑ Barberá, Pablo; Jost, John T.; Nagler, Jonathan; Tucker, Joshua A.; Bonneau, Richard (2015). “Tweeting from Left to Right”. Psychological Science [англ.]. 26 (10): 1531—1542. DOI:10.1177/0956797615594620. PMID 26297377. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ Budak, Ceren; Goel, Sharad; Rao, Justin M. (2016). “Fair and Balanced? Quantifying Media Bias through Crowdsourced Content Analysis”. Public Opinion Quarterly [англ.]. 80: 250—271. DOI:10.1093/poq/nfw007. Дата обращения 2024-06-06.
|access-date=требует|url=(справка) - ↑ 1 2 The Wizard of Oz Experiment: Conversation and Active Learning in Human-Robot Interaction (англ.). Дата обращения: 6 июня 2024.