Цифровой геноцид

Фреймворк для диалоговых интерфейсов и агентских взаимодействий

Михаил поднял интересную тему https://www.tgoop.com/rmntcai/31

В сфере conversation AI — не в одном лишь в сегменте adult — недостаёт фреймворков для оценки клиентского опыта собственно в переписке, для анализа коммуникации пользователей с искусственными агентами. Что считать успехом коммуникаций? Время проведенное в диалоге или результат от общения с агентом?

Это нетривиальный вопрос о метриках и ОЧЕНЬ практичный - например, в финтехе я делал ботов коллекторов или ипотечных - и, конечно, там было о том, чтобы довести до конца и получить деньги или клиентскую заявку, но вообще продукт должен не только быть основан на метрике автоматизации труда, но и LVT, CSI и т.п.

Тут и удобочитаемость, и прагматика Грайса, и разные формальные семантики и прагматики языка, но вот и свежего,например, чтобы и самому не забыть трекать направление:

https://www.pure.ed.ac.uk/ws/files/359164984/3544549.3583179.pdf

Специальная группа по разработке теорий использования языка во взаимодействии с диалоговыми пользовательскими интерфейсами в рамках ACM возникла в 2023 году, предполагается некоторая междисциплинарность:
“понимание того, что управляет выбором языка пользователя в таких диалогах между человеком и машиной (HMD), является скудным. Эта группа специальных интересов призвана стать катализатором для обсуждения и построения фундаментальных теорий о том, как люди создают язык, когда участвуют в разговоре с диалоговыми пользовательскими интерфейсами (CUI).”

Цели обозначены амбициозно, как
1) описание существующих и теоретических подходов, принятых в настоящее время в дисциплинах социальных наук, а также разработка 2) дорожную карту работы, которую необходимо провести для создания теорий, ориентированных на CUI, чувствительных к нюансам HMD и CUI.

Что предлагается в качестве основных путей:
а) Социолингвистика: стиль как приспособление к собеседнику (audience design по Алану Беллу? Перевод мой, но я не лингвист)
б) The Computers Are Social Actors (CASA) paradigm - люди бездумно применяют те же социальные эвристики, которые используются для человеческого взаимодействия, к компьютерам
в) Нейрофизиология, слабо верю
г) Натуралистические подходы посредством статистического анализа реальных диалогов человека и машины

Telegram

Artificial Intimacy

Одна из частых проблем по части CTA в юзеромашинной переписке, с которыми сталкиваются стартапы в нише conversational AI, — это перехлёст с числом и частотой вопросов от чатбота. До такой степени, что общение начинает выглядеть как допрос. В какой-то момент…

www.tgoop.com/gulagdigital/2612

1.1K viewsedited  May 9, 2024 at 16:45

Фреймворк для диалоговых интерфейсов и агентских взаимодействий

Михаил поднял интересную тему https://www.tgoop.com/rmntcai/31

В сфере conversation AI — не в одном лишь в сегменте adult — недостаёт фреймворков для оценки клиентского опыта собственно в переписке, для анализа коммуникации пользователей с искусственными агентами. Что считать успехом коммуникаций? Время проведенное в диалоге или результат от общения с агентом?

Это нетривиальный вопрос о метриках и ОЧЕНЬ практичный - например, в финтехе я делал ботов коллекторов или ипотечных - и, конечно, там было о том, чтобы довести до конца и получить деньги или клиентскую заявку, но вообще продукт должен не только быть основан на метрике автоматизации труда, но и LVT, CSI и т.п.

Тут и удобочитаемость, и прагматика Грайса, и разные формальные семантики и прагматики языка, но вот и свежего,например, чтобы и самому не забыть трекать направление:

https://www.pure.ed.ac.uk/ws/files/359164984/3544549.3583179.pdf

Специальная группа по разработке теорий использования языка во взаимодействии с диалоговыми пользовательскими интерфейсами в рамках ACM возникла в 2023 году, предполагается некоторая междисциплинарность:
“понимание того, что управляет выбором языка пользователя в таких диалогах между человеком и машиной (HMD), является скудным. Эта группа специальных интересов призвана стать катализатором для обсуждения и построения фундаментальных теорий о том, как люди создают язык, когда участвуют в разговоре с диалоговыми пользовательскими интерфейсами (CUI).”

Цели обозначены амбициозно, как
1) описание существующих и теоретических подходов, принятых в настоящее время в дисциплинах социальных наук, а также разработка 2) дорожную карту работы, которую необходимо провести для создания теорий, ориентированных на CUI, чувствительных к нюансам HMD и CUI.

Что предлагается в качестве основных путей:
а) Социолингвистика: стиль как приспособление к собеседнику (audience design по Алану Беллу? Перевод мой, но я не лингвист)
б) The Computers Are Social Actors (CASA) paradigm - люди бездумно применяют те же социальные эвристики, которые используются для человеческого взаимодействия, к компьютерам
в) Нейрофизиология, слабо верю
г) Натуралистические подходы посредством статистического анализа реальных диалогов человека и машины

BY Цифровой геноцид