Predicción de la satisfacción del usuario a partir de chats de atención al cliente

Mostrar todas las versiones(4)

Los servicios de atención al cliente son determinantes de la experiencia de usuario de las empresas Fintech. Este trabajo busca entender, empleando técnicas de machine learning, qué factores llevan a los clientes de una Fintech a evaluar de forma positiva su experiencia. Esto se hizo a partir de dos...

Descripción completa

Detalles Bibliográficos
Autores principales: Romanisio, Alejandro, Gravano, Agustín
Formato: Objeto de conferencia
Lenguaje:Español
Publicado: 2023
Materias:
Ciencias Informáticas
atención al cliente
encuestas de satisfacción
modelos predictivos
XGBoost
procesamiento de lenguaje natural
Acceso en línea:http://sedici.unlp.edu.ar/handle/10915/165744
Aporte de:
SEDICI (UNLP) de Universidad Nacional de La Plata
id I19-R120-10915-165744
record_format dspace
spelling I19-R120-10915-1657442024-05-08T20:04:25Z http://sedici.unlp.edu.ar/handle/10915/165744 Predicción de la satisfacción del usuario a partir de chats de atención al cliente Customer satisfaction prediction based on customer service chats Romanisio, Alejandro Gravano, Agustín 2023-09 2023 2024-05-08T13:18:53Z es Ciencias Informáticas atención al cliente encuestas de satisfacción modelos predictivos XGBoost procesamiento de lenguaje natural Los servicios de atención al cliente son determinantes de la experiencia de usuario de las empresas Fintech. Este trabajo busca entender, empleando técnicas de machine learning, qué factores llevan a los clientes de una Fintech a evaluar de forma positiva su experiencia. Esto se hizo a partir de dos fuentes de datos: los registros de los usuarios y las conversaciones del servicio de atención al cliente vía WhatsApp. Experimentamos con modelos predictivos basados en XGBoost, entrenados con features del contexto del usuario, las características de las conversaciones y la semántica de las palabras utilizadas en las conversaciones. Los resultados fueron menores a lo esperado (AUC = 0.5152), pero dejan aprendizajes valiosos para quienes encaren problemas semejantes en el futuro, relacionados a los desafíos de los siguientes aspectos críticos: i. evitar el data leakage, ii. evaluar modelos y scoring metrics exhaustivamente, iii. realizar chequeos intermedios, iv. no subestimar el tiempo necesario para la transformación de datos, v. realizar un proceso de unit testing y vi. conocer el dominio. Este trabajo describe las distintas etapas de la metodología: extracción y transformación de los datos, generación de features, entrenamiento de modelos predictivos, selección del modelo óptimo y evaluación en datos de test. Customer service is a determining factor in the user experience of Fintech companies. This work seeks to understand, using machine learning techniques, what factors lead the clients of a specific Fintech company to positively evaluate their experience. Two data sources were used to achieve this: user records from their sign up and the log of conversations with customer service via WhatsApp. We experimented with predictive models based on XGBoost, trained with features of the user context, the characteristics of the conversations and the semantics of the words used in the conversations. The results were lower than expected (AUC = 0.5152), but they leave valuable lessons for those who face similar problems in the future, related to the challenges of the following critical aspects: i. avoid data leakage, ii. evaluate models and scoring metrics thoroughly, iii. carry out intermediate checkpoints, iv. do not underestimate the time required for data transformation, v. perform a unit testing process and vi. know the domain. This paper describes the different stages of the methodology: data extraction and transformation, feature generation, predictive model training, optimal model selection and test data evaluation. Sociedad Argentina de Informática e Investigación Operativa Objeto de conferencia Objeto de conferencia http://creativecommons.org/licenses/by-nc-sa/4.0/ Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International (CC BY-NC-SA 4.0) application/pdf 7-21
institution Universidad Nacional de La Plata
institution_str I-19
repository_str R-120
collection SEDICI (UNLP)
language Español
topic Ciencias Informáticas
atención al cliente
encuestas de satisfacción
modelos predictivos
XGBoost
procesamiento de lenguaje natural
spellingShingle Ciencias Informáticas
atención al cliente
encuestas de satisfacción
modelos predictivos
XGBoost
procesamiento de lenguaje natural
Romanisio, Alejandro
Gravano, Agustín
Predicción de la satisfacción del usuario a partir de chats de atención al cliente
topic_facet Ciencias Informáticas
atención al cliente
encuestas de satisfacción
modelos predictivos
XGBoost
procesamiento de lenguaje natural
description Los servicios de atención al cliente son determinantes de la experiencia de usuario de las empresas Fintech. Este trabajo busca entender, empleando técnicas de machine learning, qué factores llevan a los clientes de una Fintech a evaluar de forma positiva su experiencia. Esto se hizo a partir de dos fuentes de datos: los registros de los usuarios y las conversaciones del servicio de atención al cliente vía WhatsApp. Experimentamos con modelos predictivos basados en XGBoost, entrenados con features del contexto del usuario, las características de las conversaciones y la semántica de las palabras utilizadas en las conversaciones. Los resultados fueron menores a lo esperado (AUC = 0.5152), pero dejan aprendizajes valiosos para quienes encaren problemas semejantes en el futuro, relacionados a los desafíos de los siguientes aspectos críticos: i. evitar el data leakage, ii. evaluar modelos y scoring metrics exhaustivamente, iii. realizar chequeos intermedios, iv. no subestimar el tiempo necesario para la transformación de datos, v. realizar un proceso de unit testing y vi. conocer el dominio. Este trabajo describe las distintas etapas de la metodología: extracción y transformación de los datos, generación de features, entrenamiento de modelos predictivos, selección del modelo óptimo y evaluación en datos de test.
format Objeto de conferencia
Objeto de conferencia
author Romanisio, Alejandro
Gravano, Agustín
author_facet Romanisio, Alejandro
Gravano, Agustín
author_sort Romanisio, Alejandro
title Predicción de la satisfacción del usuario a partir de chats de atención al cliente
title_short Predicción de la satisfacción del usuario a partir de chats de atención al cliente
title_full Predicción de la satisfacción del usuario a partir de chats de atención al cliente
title_fullStr Predicción de la satisfacción del usuario a partir de chats de atención al cliente
title_full_unstemmed Predicción de la satisfacción del usuario a partir de chats de atención al cliente
title_sort predicción de la satisfacción del usuario a partir de chats de atención al cliente
publishDate 2023
url http://sedici.unlp.edu.ar/handle/10915/165744
work_keys_str_mv AT romanisioalejandro predicciondelasatisfacciondelusuarioapartirdechatsdeatencionalcliente
AT gravanoagustin predicciondelasatisfacciondelusuarioapartirdechatsdeatencionalcliente
AT romanisioalejandro customersatisfactionpredictionbasedoncustomerservicechats
AT gravanoagustin customersatisfactionpredictionbasedoncustomerservicechats
_version_ 1807223094301949952

Ejemplares similares