[ES] La Realidad Virtual (RV) esta comenzando a transformar el comercio minorista al permitir entornos de compra inmersivos que combinan la riqueza experiencial de las tiendas fisicas con la flexibilidad de las plataformas digitales. Sin embargo, la mayoria de las implementaciones actuales permanecen estaticas, ofreciendo entornos identicos a todos los compradores y transfiriendo principios de diseno del comercio fisico sin validacion empirica. Al mismo tiempo, la comprension cientifica de como los consumidores piensan, sienten y se comportan en tiendas virtuales inmersivas esta dominada por autoinformes post-hoc, que proporcionan acceso limitado a procesos implicitos y dinamicos. Esta tesis investiga si las senales conductuales multimodales capturadas desde visores de RV estandar (seguimiento ocular, de cabeza y de manos, patrones de navegacion y pupilometria) pueden servir como indicadores fiables de rasgos, experiencias y estados del comprador, apoyando el desarrollo de sistemas de comercio en RV adaptativos.
Fundamentada en el marco Estimulo-Organismo-Respuesta, la investigacion desarrolla un marco de tres pilares para el comercio adaptativo en RV: (1) Clasificadores de Compradores, reconocimiento de rasgos de personalidad estables a partir del comportamiento natural de compra; (2) Dimensiones del Comprador, comprension de como las manipulaciones de diseno ambiental influyen en la agradabilidad subjetiva; y (3) Moderadores del Comprador, prediccion de estados cognitivos y afectivos dinamicos para respuestas adaptativas en tiempo real. Este marco progresa desde la comprension de la persona, a los efectos ambientales, hasta la gestion inteligente de su interaccion.
A traves de tres estudios empiricos, la tesis demuestra que cada pilar puede implementarse utilizando unicamente sensores nativos de RV. El Estudio 1 muestra que los rasgos de personalidad de los Cinco Grandes pueden reconocerse a partir del comportamiento naturalista (precisiones del 79-85%). El Estudio 2 revela que las manipulaciones atmosfericas producen efectos mas sutiles en RV de lo predicho, sin embargo, el modelado conductual clasifica exitosamente las preferencias de agradabilidad subjetiva (74,4%) donde los autoinformes muestran diferencias insignificantes, con los patrones de movimiento de cabeza como indicadores mas diagnosticos. El Estudio 3 demuestra que los estados cognitivos dinamicos pueden predecirse a partir de patrones conductuales multimodales (64-71%), con validacion convergente mediante EEG confirmando precision predictiva comparable (RV: 64-71% vs EEG: 58-65%). Una manipulacion adaptativa exploratoria produjo efectos nulos pero establecio un marco metodologico e identifico requisitos de diseno criticos para futuras implementaciones.
En conjunto, estos estudios demuestran que los constructos psicologicos fundamentales estan incorporados en patrones conductuales multimodales dentro de entornos de compra inmersivos en RV. La tesis avanza la teoria al extender las perspectivas de cognicion incorporada y estimulo-organismo-respuesta al comercio virtual, avanza la metodologia al validar el modelado conductual nativo de RV como alternativa escalable a los autoinformes y la biosensorica externa, y ofrece marcos practicos para futuros sistemas que puedan segmentar compradores, optimizar atmosferas comerciales y adaptar la complejidad de la interaccion usando unicamente los sensores del hardware de RV de consumo., [EN] Virtual Reality (VR) is beginning to transform retail by enabling life-sized, immersive shopping environments that blend the experiential richness of physical stores with the flexibility of digital platforms. However, most current v-commerce implementations remain static, offering identical environments to all shoppers and largely transferring design principles from physical retail without empirical validation. At the same time, scientific understanding of how consumers think, feel, and behave in immersive virtual stores is still dominated by post-hoc self-reports, which provide limited access to implicit and dynamic processes. This thesis addresses these gaps by investigating whether multimodal behavioral signals captured entirely from standard VR head-mounted displays (eye, head, and hand tracking, navigation patterns, and pupillometry) can serve as reliable indicators of shopper traits, experiences, and states, and thereby support the development of Adaptive Virtual Reality retail systems.
Grounded in the Stimulus-Organism-Response framework and informed by principles for future bio-cybernetic feedback systems, the research develops the foundations for a three-pillar framework for AVR retail that systematically addresses: (1) Shopper Classifiers, recognizing stable personality traits from natural shopping behavior for implicit user segmentation, (2) Shopper Dimensions, understanding how environmental design manipulations influence subjective pleasantness to optimize store atmospherics, and (3) Shopper Moderators, predicting dynamic cognitive and affective states for real-time adaptive system responses. This framework progresses logically from understanding the person, to understanding environmental effects, to intelligently managing their interaction.
Across three empirical studies in immersive VR shopping environments, the thesis demonstrates that each pillar can be successfully implemented using VR-native sensors alone. Study 1 shows that Big Five personality traits can be recognized from naturalistic shopping behavior (accuracies 79-85%). Study 2 reveals that atmospheric design manipulations produce subtler effects in VR than physical retail research predicts, yet behavioral data modeling successfully classifies subjective pleasantness preferences (74.4% accuracy) where traditional self-reports show negligible differences, with head movement patterns emerging as the most diagnostic indicators. Study 3 demonstrates that dynamic cognitive states during complex shopping tasks can be predicted from multimodal behavioral patterns (accuracy 64-71%), with convergent EEG validation confirming that VR behavioral features achieve comparable predictive accuracy to neurophysiological measures (VR: 64-71% vs EEG: 58-65%). An exploratory adaptive manipulation produced null effects on psychological outcomes but established a methodological framework and identified critical design requirements for future AVR implementations.
Taken together, these studies demonstrate that fundamental psychological constructs, from stable traits to momentary experiences to evolving cognitive states, are embodied in multimodal behavioral patterns within immersive VR shopping environments. The thesis advances theory by extending embodied cognition and stimulus-organism-response perspectives into v-commerce, advances methodology by validating VR-native behavioral data modeling as a scalable alternative to self-report and external biosensing, and offers practical frameworks for future VR retail systems that can segment shoppers, optimize store atmospherics, and adapt interaction complexity using only the sensors already embedded in consumer VR hardware., [CA] La Realitat Virtual (RV) esta comencant a transformar el comerc minorista en permetre entorns de compra immersius que combinen la riquesa experiencial de les botigues fisiques amb la flexibilitat de les plataformes digitals. No obstant aixo, la majoria de les implementacions actuals romanen estatiques, oferint entorns identics a tots els compradors i transferint principis de disseny del comerc fisic sense validacio empirica. Al mateix temps, la comprensio cientifica de com els consumidors pensen, senten i es comporten en botigues virtuals immersives encara esta dominada per autoinformes post-hoc, que proporcionen acces limitat a processos implicits i dinamics. Aquesta tesi investiga si els senyals conductuals multimodals capturats des de visors de RV estandard (seguiment ocular, de cap i de mans, patrons de navegacio i pupil·lometria) poden servir com a indicadors fiables de trets, experiencies i estats del comprador, donant suport al desenvolupament de sistemes de comerc en RV adaptatius.
Fonamentada en el marc Estimul-Organisme-Resposta, la investigacio desenvolupa un marc de tres pilars per al comerc adaptatiu en RV: (1) Classificadors de Compradors, reconeixement de trets de personalitat estables a partir del comportament natural de compra; (2) Dimensions del Comprador, comprensio de com les manipulacions de disseny ambiental influeixen en l'agradabilitat subjectiva; i (3) Moderadors del Comprador, prediccio d'estats cognitius i afectius dinamics per a respostes adaptatives en temps real. Aquest marc progressa des de la comprensio de la persona, a la comprensio dels efectes ambientals, fins a la gestio intel·ligent de la seua interaccio.
A traves de tres estudis empirics, la tesi demostra que cada pilar pot implementar-se amb exit utilitzant unicament sensors nadius de RV. L'Estudi 1 mostra que els trets de personalitat dels Cinc Grans poden reconeixer-se a partir del comportament naturalista (precisions del 79-85%). L'Estudi 2 revela que les manipulacions atmosferiques produeixen efectes mes subtils en RV del predit, no obstant aixo, el modelatge conductual classifica amb exit les preferencies d'agradabilitat subjectiva (74,4%) on els autoinformes tradicionals mostren diferencies insignificants, amb els patrons de moviment de cap com els indicadors mes diagnostics. L'Estudi 3 demostra que els estats cognitius dinamics poden predir-se a partir de patrons conductuals multimodals (64-71%), amb validacio convergent mitjancant EEG confirmant precisio predictiva comparable (RV: 64-71% vs EEG: 58-65%). Una manipulacio adaptativa exploratoria va produir efectes nuls pero va establir un marc metodologic i va identificar requisits de disseny critics per a futures implementacions.
En conjunt, aquests estudis demostren que els constructes psicologics fonamentals estan incorporats en patrons conductuals multimodals dins d'entorns de compra immersius en RV. La tesi avanca la teoria en estendre les perspectives de cognicib incorporada i estimul-organisme-resposta al comerc virtual, avanca la metodologia en validar el modelatge conductual nadiu de RV com a alternativa escalable als autoinformes i la biosensorica externa, i ofereix marcs practics per a futurs sistemes de comerc en RV que puguen segmentar compradors, optimitzar atmosferes comercials i adaptar la complexitat de la interaccio utilitzant unicament els sensors integrats en el maquinari de RV de consum., I would also like to acknowledge that the RHUMBO project has received funding from the European Union’s Horizon 2020 research and innovation programme under the Marie Skłodowska-Curie grant agreement No. 813234.