EMPATIA-CM: Comprehensive Protection of Gender-based Violence Victims through Multimodal Affective Computing

Authors

DOI:

https://doi.org/10.24197/st.1.2022.1-33

Keywords:

Multimodal Affective Computing, Cyberphysical systems, Artificial Intelligence, Gender-based Violence, Wireless Sensor Networks.

Abstract

The EMPATIACM project begins in January 2019, executed by a multidisciplinary team formed by the Institute of Gender Studies in Universidad Carlos III of Madrid (UC3M-IEG, with research staff from several branches of the Social Sciences and Humanities) and by the UC3M-TEC group (formed in turn by research personnel from several branches of Engineering), with the  fundamental objective  of   understanding the reactions of victims of Gender-based Violence (GBV) to dangerous situations, generate mechanisms for automatic detection of these situations and study how to react in a comprehensive, coordinated and effective way to protect them in the best possible way. This objective is divided into six sub-objectives, which demonstrate the need and added value of the multidisciplinary approach.

EMPATIA combines cyberphysical systems and affective computing proposing a comprehensive protocol that improves the protection of victims of gender violence with a solution capable of automatically, immediately and remotely warning of risk situations.

Close to the end of the project, it is time to assess the work done and the results achieved, presenting the contributions in each of the sub-objectives raised in the project proposal.

Downloads

Download data is not yet available.

Author Biography

Rosa San Segundo, Universidad Carlos III de Madrid

 

 

References

Abadi, M.K.; Subramanian, R.; Kia, S.; Avesani, P.; Patras, I.; Sebe, N. “DECAF: MEG-based multimodal database for decoding affective physiological responses”. IEEE T. on Affective Computing; 6, 209–222, 2015

Aiken, J. H.; Murphy, J. C. (2012). Evidence Issues in Domestic Violence Civil Cases. Family Law Quarterly, 34(1), 43¬62. CEPOL Conference 2012.

BioSignalPlux. Research Toolkit System for Physiological Signals. Último Acceso, diciembre 2021. https://biosignalsplux.com/products/kits/researcher.html. Manual de uso: https://biosignalsplux.com/downloads/docs/manuals/biosignalsplux_User_Manual.pdf

Blanco Ruiz, M.A.; Gutiérrez Martín, L.; Miranda Calero, J. A.; Canabal Benito, M. F.; Romero Perales, E.; Sainz de Baranda Andújar, C.; San Segundo Manuel, R.; Larrabeiti López, D.; Peláez Moreno, C.; López Ongil, C., (2021-b), "UC3M4Safety Database - List of Audiovisual Stimuli", https://doi.org/10.21950/CXAAHR, e-cienciaDatos, V1.

Blanco Ruiz, M.A.; Gutiérrez Martín, L.; Miranda Calero, J.A.; Canabal Benito, M.F.; Rituerto González, E.; Luis Mingueza, C.; Robredo García, J.C.; Morán González, B.; Páez Montoro, A.; Ramírez Bárcenas A; Martínez Rubio, E.; Romero Perales, E.; Sainz de Baranda Andújar, C.; San Segundo Manuel, R.; Larrabeiti López, D.; Peláez Moreno, C.; López Ongil, C. (2021-a). “UC3M4Safety Database: List of Audiovisual Stimuli (Video)”, https://doi.org/10.21950/LUO1IZ, e-cienciaDatos V1.

Blanco-Ruiz, M.A.; Sainz-de Baranda, C.; Gutiérrez-Martín, L.; Romero-Perales, E.; López-Ongil, C. “Emotion elicitation under audiovisual stimuli reception: Should artificial intelligence consider the gender perspective?” Int. Journal of Environmental Research and Public Health, vol. 17, no. 22, 2020: https://www.mdpi.com/1660-4601/17/22/8534

BONI, (2021). “App BONI (panic button) to reduce gender violence against women and girls”. Acceleration Action in Sustainable Development Goals (SDG) from UN (#SDGAction 339369) https://sustainabledevelopment.un.org/partnership/?p=33936

Bradberry, T. (2016) “Beyond the restraining order” Bradberry, T. Officer.com. Ultimo acceso diciembre 2021. https://www.officer.com/investigations/article/12242934/portable¬alarm-systems¬act¬as¬a¬protection¬extension¬for¬domestic¬violence¬ situations

Bradley, M.; Lang, P.J. (1994) “Measuring emotion: The self-assessment manikin and the semantic differential”. Journal of Behavior Therapy and Experimental Psychiatry, 25 (1), 49-59. DOI: https://www.sciencedirect.com/science/article/abs/pii/0005791694900639

Campos Gaviño, M.A.; Larrabeiti López, D. (2020) “Toward Court-Admissible Sensor Systems to Fight Domestic Violence” MCSS 2020: 278-291. DOI:10.1007/978-3-030-59000-0_21

Canabal, M. F.; Miranda, J. A.; Lanza-Gutiérrez, J. M.; Pérez Garcilópez, I.; López-Ongil, C. (2020) "Electrodermal Activity Smart Sensor Integration in a Wearable Affective Computing System" XXXV Conference on Design of Circuits and Integrated Systems (DCIS), pp. 1-6, doi: 10.1109/DCIS51330.2020.9268662.

Cohen, JC. (2009) Defining identification: a theoretical look at the identification of audiences with media characters. Mass Communication and Society, 4 (3), 245-264 URL: https://www.tandfonline.com/doi/abs/10.1207/S15327825MCS0403_01

Convenio Estambul (2011). Convenio del Consejo de Europa sobre prevención y lucha contra la violencia contra las mujeres y la violencia doméstica. Estambul, 11V.2011. www.coe.int/conventionviolence.

Ending GBV (2020). Ending Gender-based violence in Justice and Fundamental Rights web page of European Commission. https://ec.europa.eu/info/policies/justice-and-fundamental-rights/gender-equality/gender-based-violence/ending-gender-based-violence_en

Escudero Nafs, A.; Polo Usaola, C.; López Gironés, M.; Aguilar Redo, L. (2005). La persuasión coercitiva, modelo explicativo del mantenimiento de las mujeres en una situación de violencia de genero. II: Las emociones y las estrategias de la violencia. Revista de la Asociación Española de Neuropsiquiatría, no.96 Madrid oct./dic. 2005.

Estrategia Madrid (2016). Estrategia Madrileña contra la Violencia de Género (2016 – 2021), Consejería de Asuntos Sociales de la Comunidad de Madrid, 2016. https://www.comunidad.madrid/transparencia/informacion-institucional/planes-programas/estrategia-madrilena-violencia-genero-20162021

Hong¬Wei, Ng.; Nguyen, V.D.; Vonikakis, V. and Winkler, S. 2015. “Deep Learning for Emotion Recognition on Small Datasets using Transfer Learning”. In Proceedings of the 2015 ACM on Int. Conf. on Multimodal Interaction (ICMI '15). ACM, New York, NY, USA, 443¬449.

Koelstra S.; Muhl, C.; Patras, I. “DEAP: A Database for Emotion Analysis using Physiological Signals” IEEE T. on Affective Computing, 2012.

Larradet, F.; Niewiadomski, R.; Barresi, G.; Caldwell, D.G.; Mattos, L.S. (2020) “Toward Emotion Recognition From Physiological Signals in the Wild: Approaching the Methodological Issues in Real-Life Data Collection” Frontiers in Psychology. https://doi.org/10.3389/fpsyg.2020.01111

Ley Orgánica 1/2004, de 28 de diciembre, de Medidas de Protección Integral contra la Violencia de Género. https://www.boe.es/eli/es/lo/2004/12/28/1/con

López-Ossorio, J.J., González-Álvarez, J.L., Andrés-Pueyo, A. (2016) ‘Predictive effectiveness of the police risk assessment in intimate partner violence’, Psychosocial Intervention, 25, 1–7

Mao, Q.; Dong, M.; Huang, Z. and Zhan, Y.; 2014. "Learning Salient Features for Speech Emotion Recognition Using Convolutional Neural Networks," in IEEE Transactions on Multimedia, vol. 16, no. 8, pp. 2203¬2213, Dec. 2014.

Martinez, H. P.; Bengio, Y. and Yannakakis, G.N.; 2013 "Learning deep physiological models of affect," in IEEE Computational Intelligence Magazine, vol. 8, no. 2, pp. 20¬33, May 2013.

Mata Gil, S.; Sánchez Cabaco, A.; Fernández Mateos, L. M.; González Díez, S.; Pérez Lancho, M. C (2014) “Protocolo de screening de hipervigilancia emocional en el trastorno de estrés postraumático en víctimas de violencia de género”. Int. Journal of Developmental and Educational Psychology. INFAD Revista de Psicología, Nº1¬Vol.2, 2014. ISSN: 0214¬9877. pp:187-204

Mehrabian, A., & Russell, J. A. (1974). The Basic Emotional Impact of Environments: Perceptual and Motor Skills. https://doi.org/10.2466/pms.1974.38.1.283

Miranda, J.A.; Canabal, M.F.; Lanza-Gutiérrez, J.M.; Portela-García, M.; López-Ongil, C.; Alcaide, T.R. (2017) “Meaningful Data Treatment from Multiple Physiological Sensors in a Cyber-Physical System” XXXII Conference on Design of Circuits and Integrated Systems (DCIS), pp. 100–104.

Miranda, J.A.; Marino, R.; Lanza-Gutierrez, J.M.; Riesgo, T.; Garcia-Valderas, M.; Lopez-Ongil, C. (2018) “Embedded Emotion Recognition within Cyber-Physical Systems using Physiological Signals” XXXIII Conference on Design of Circuits and Integrated Systems (DCIS). pp. 1–6.

Miranda, J.A.; Canabal, M.F.; Lanza-Gutiérrez, J.M.; García, M.P.; López-Ongil, C. (2019) “Toward Fear Detection using Affect Recognition” XXXIV Conference on Design of Circuits and Integrated Systems (DCIS), pp. 1–4.

Miranda, J.A.; Canabal, M.F.; Gutiérrez-Martín, L.; Lanza-Gutiérrez, J.M.; López-Ongil, C. (2020) "A Design Space Exploration for Heart Rate Variability in a Wearable Smart Device," XXXV Conference on Design of Circuits and Integrated Systems (DCIS) pp. 1-6, doi: 10.1109/DCIS51330.2020.9268628.

Miranda, J.A.; Canabal, M.F.; Gutiérrez-Martín,, L.; Lanza-Gutiérrez, J. M.; Portela-García, M.; López-Ongil, C (2021) “Fear recognition for women using a reduced set of physiological signals,” Sensors, vol. 21, no. 5 [Online]. Available: https://www.mdpi.com/1424-8220/21/5/1587

Pacto de Estado (2019). Pacto de Estado contra la Violencia de Género. Texto refundido, 2019. https://violenciagenero.igualdad.gob.es/pactoEstado/docs/Documento_Refundido_PEVG_2.pdf. Resoluciones y datos sobre Pacto de Estado contra la Violencia de Género, 2021. https://violenciagenero.igualdad.gob.es/pactoEstado/

Pan, S. J. and Yang, Q.; 2010. "A Survey on Transfer Learning," in IEEE T. on Knowledge and Data Engineering, vol. 22, no. 10, pp. 1345¬1359, Oct. 2010.2

Picard, R. W.; 1995. “Affective Computing”, MIT Technical Report #321.

Picard, R. W.; Vyzas, E.; Healey, J. "Toward machine emotional intelligence: analysis of affective physiological state," in IEEE T. on Pattern Analysis and Machine Intelligence, vol. 23, no. 10, pp. 1175-1191, Oct. 2001, doi: 10.1109/34.954607

Protocolo Extremadura (2016). Protocolo Actuación Sanitaria ante la Violencia de Género en Extremadura, 2016. Consejería de Igualdad y Empleo. Junta de Extremadura. Instituto de la Mujer de Extremadura (IME). http://www.juntaex.es/filescms/comunicacion/uploaded_files/2016/Sanidad_y_Politicas_Sociales/ 11_Noviembre/Protocolo_VG_Definitivo_07112016.pdf

Protocolo Ministerio Sanidad (2007). Protocolo común para la actuación sanitaria ante la violencia de género. Comisión Contra la Violencia de Género del Consejo Interterritorial del Sistema Nacional de Salud. Ministerio de Sanidad y Consumo 2007. http://www.060.es.

Quazi, M.T. (2012). “Human emotion recognition using Smart Sensors”, Master Thesis, Massey University, New Zealand, 2012.

Ramírez-Bárcenas, A.; Portela-García, M.; García-Valderas, M.; López-Ongil, C. (2020) "System Dependability in Edge Computing Wearable Devices" XXXV Conference on Design of Circuits and Integrated Systems (DCIS) pp. 1-6, doi: 10.1109/DCIS51330.2020.9268674.

Rincón González, P. P. (2003) Tesis Doctoral: “Trastorno de estrés postraumático en mujeres víctimas de violencia doméstica: evaluación de programas de intervención memoria”. Universidad Complutense de Madrid. Presentada para optar al grado de doctor por Paulina Paz Bajo la dirección del Doctor: Francisco Javier Labrador Encinas Madrid, 2003

Rituerto-González, E.; Luis-Mingueza, C.; Peláez-Moreno, C. (2021-a) “Using audio events to extend a multi-modal public speaking database with reinterpreted emotional annotations” IberSPEECH, pp. 61–65. doi: 10.21437/IberSPEECH.2021-13

Rituerto-González, E.; Miranda, J.A.; Canabal, M.F.; Lanza-Gutiérrez, J.M.; Peláez-Moreno, C.; López-Ongil, C. (2020) “A Hybrid Data Fusion Architecture for BINDI: A Wearable Solution to Combat Gender-Based Violence”. In Multimedia Communications, Services and Security; Dziech, A., Mees, W., Czyzewski, A., Eds.; Springer. pp. 223–237

Rituerto-González, Esther; Peláez-Moreno, Carmen. “End-to-end Recurrent Denoising Autoencoder Embeddings for Speaker Identification” (2021-b) Neural Computing and Applications. doi.org/10.1007/s00521-021-06083-7

Rodríguez¬ Hidalgo, A.; Peláez¬ Moreno, C.; Gallardo¬A ntolín, A.; 2018. “Echoic log¬surprise: A multi¬scale scheme for acoustic saliency detection”, Expert Systems with Applications, vol 114, (pp. 255–266).ç

Sainz de Baranda, C.; Blanco-Ruiz, M.; Zorrilla-Muñoz, V.; San Segundo Manuel, R. (2020) "El papel de la tecnología en la seguridad y el empoderamiento de las víctimas de violencia de género" X Congreso Nacional de Igualdad: Educando en Igualdad: Respuestas Interdisciplinares.

Sainz-de-Baranda, C.; Blanco-Ruiz, M.; Miranda Calero, J.A.; Gutiérrez-Martín, L.; Canabal Benito, M. F.; San Segundo, R.; López-Ongil, C. (2021a). “Perspectiva de género y social en las STEM. La construcción de sistemas inteligentes para detección de emociones” Sociología y Tecnociencia, 11, Extra, 1, 83-115. DOI: 10.24197/st.Extra_1.2021.83-11

Sainz-de-Baranda, C.; Blanco-Ruiz, M.; San Segundo, R. (2021b). “El rol del audiovisual en la activación de la memoria autobiográfica en víctimas de violencia de género. Cuestiones de género: de la Igualdad y la diferencia”, 16, 810-835; DOI: 10.18002/cg.v0i16.6918

Sainz-de-Baranda, C.; Blanco-Ruiz, M.; Zorrilla, V.; San-Segundo, R. (2021c). “El papel de la tecnología en la seguridad y el empoderamiento de las víctimas de violencia de género”. Del Pozo Marca, Figueruelo Burrieza A (Dir.) y Ramos Hernández R. Formando en la igualdad real: contenidos para un proyecto democrático. 393-406. Aranzadi, ISBN: 9788413459806

Sainz de Baranda, C.; Blanco-Ruiz, M. (2021-d) "Gender biases in technology: The case of the Self-Assessment Manikin (SAM) in measuring emotions”. 8th European Communication Conference ECREA

Schmidt, P.; Reiss, A.; Dürichen, R.; Marberger, C.; Van Laerhoven, K.; “Introducing WESAD, a Multimodal Dataset for Wearable Stress and Affect Detection”. Proc 20th ACM Int. Conference on Multimodal Interaction, Boulder, CO, USA, 16–20 October 2018

SDGs-ONU, 2015. Sustainable Development Goals, United Nations Organization, 2015. Last access, December 2021. https://www.undp.org/sustainable-development-goals

Soleymani, M.; Lichtenauer, J.; Pun, T.; Pantic, M. “A Multimodal Database for Affect Recognition and Implicit Tagging”. IEEE T. on Affect. Comput.; 3, 42–55, 2012

Subramanian, R.; Wache, J.; Abadi, M.; Vieriu, R.; Winkler, S.; Sebe, N. “ASCERTAIN: Emotion and Personality Recognition using Commercial Sensors”. IEEE T. on Affect. Comput.; 9, 147–160, 2017

Tratado Lisboa (2007). Tratado de Lisboa por el que se modifican el Tratado de la Unión Europea y el Tratado constitutivo de la Comunidad Europea, firmado en Lisboa el 13 de diciembre de 2007. https://eur-lex.europa.eu/legal-content/ES/ALL/?uri=OJ:C:2007:306:TOC

VG-Ayto. Sevilla (2018). Análisis y Propuesta de Mejora de Actuación en Materia de Violencia de Género. Delegación de la Mujer. Ayuntamiento de Sevilla. Ultimo acceso, diciembre 2021. https://www.sevilla.org/servicios/mujer¬igualdad/ planes¬normativas¬y-publicaciones/publicaciones/analisis¬y¬propuesta¬de¬mejora¬de¬actuacion¬en-materia¬de¬violencia¬de¬genero.pdf

Vogt, T.; André, E.; Wagner, J. (2008). “Automatic Recognition of Emotions from Speech: A Review of the Literature and Recommendations for Practical Realisation”, Affect and Emotion in Human¬Computer Interaction, LNCS, 4868, 75–91.

Walker Leonor, E. (1984). The Battered Woman Syndrome. New York, USA: Springer.

Zorrilla-Muñoz, V.; de Lamo Velado, I.; Nieto Rojas, P. "Modelo De Mejora Político-Social De Protocolos De Atención A Las Víctimas De Violencia De Género" (2020) VIII Congreso de la Red Española de Política Social

Downloads

Published

11/02/2022

How to Cite

San Segundo, R., & López Ongil, C. (2022). EMPATIA-CM: Comprehensive Protection of Gender-based Violence Victims through Multimodal Affective Computing . Sociología Y Tecnociencia, 12(1), 1–33. https://doi.org/10.24197/st.1.2022.1-33

Most read articles by the same author(s)