Discurso Multimodal

Discurso multimodal. Los modos y los medios de la comunicación contemporánea (2001) Gunther KRESS & Theo VAN LEEUWEN

GUÍA PARA EL ANÁLISIS MULTIMODAL Y/O UNA TEORÍA DEL LENGUAJE DE LOS MÚLTIPLES MEDIOS • DIFERENTES MODOS O SISTEMAS SEMIÓTICOS DE CODIFICACIÓN : 1. Lengua 2. Imagen visual 3. Música 4. Sonido 5. Gestualidad 6. Color

Circuito de la comunicación (VERBAL Y NO-VERBAL) CANAL / MEDIO

CÓDIGO /SISTEMA SEMIÓTICO

EMISOR

MENSAJE

RECEPTOR

RETROALIMENTACIÓN

ARTICULACIÓN DEL SENTIDO EN TEXTOS MULTIMODALES • La lingüística tradicional tenía un lenguaje definido como un sistema que funciona a través de la doble articulación, donde un mensaje era una articulación entre significante y significado. • Los textos multimodales son constructores de sentido en múltiples articulaciones, llamadas ESTRATOS: discurso, diseño, producción y distribución.

DISCURSO • Los discursos son conocimientos socialmente construidos de (algún aspecto de) la realidad. Por ‘socialmente construido’ queremos decir que han sido desarrollados en contextos sociales específicos y en formas que son apropiadas a los intereses de los actores sociales en esos contextos, sean contextos muy amplios o particulares; contextos explícitamente institucionalizados o informales.

• Los discursos no sólo proveen versiones sobre quién hace qué, cuándo y dónde, sino que también suman evaluaciones, interpretaciones y argumentos a estas versiones.

DISEÑO • Está a la mitad del camino entre el contenido y la expresión. Es el lado conceptual de la expresión, y es el lado expresivo de la concepción. Los diseños son (usos de los) recursos semióticos en todos los modos semióticos y combinaciones de modos semióticos. • Los diseños son medios para entender los discursos en el contexto de una situación comunicativa dada. Pero los diseños también suman algo nuevo: permiten y dan lugar a la situación comunicativa que cambia el conocimiento socialmente construido en la (inter) acción social.

• el diseño todavía está separado de la producción material real del producto semiótico y de la articulación material real del acontecimiento semiótico. • Los recursos sobre los que el diseño trabaja, los modos semióticos, son aún abstractos, capaces de ser llevados a cabo a través de diferentes materialidades.

Modo • Los modos son recursos semióticos (CÓDIGOS) que permiten la realización simultánea de discursos y tipos de (inter)acción. • Los diseños usan entonces estos recursos, combinando modos semióticos y seleccionando dentro de las opciones disponibles de acuerdo a los intereses de una situación comunicativa particular.

PRODUCCIÓN • Se refiere a la organización de la expresión, a la articulación material real del evento semiótico o a la producción material real del artefacto semiótico. • Aquí competen un conjunto de habilidades diferentes: habilidades técnicas, habilidades de la mano y del ojo, habilidades no relacionadas a modos semióticos sino a medios semióticos.

‘MEDIO’ • Es la forma de ejecución (la sustancia material elaborada en la cultura y trabajada en un tiempo cultural), el sentido en que lo usan los artistas cuando hablan del medio ‘óleo’ o ‘témpera sobre papel’, ‘bronce sobre base de mármol’; y también se aplica a los medios que no producen huellas que perduren más allá del momento de la articulación, como el habla o la música. • A veces, el diseño y la producción, modo y medio, son difíciles de separar

PROCEDENCIA • Se refiere a la idea de que los signos pueden ser ‘importados’ desde un contexto (otra era, grupo social, cultura) a otro, para dar a entender ideas y valores asociados a ese otro contexto, por parte de aquellos que lo importan. • La idea de ‘Procedencia’ está muy relacionada con las ideas de ‘mito’ y ‘connotación’, como fueron introducidas a la semiótica por Roland Barthes.

EJEMPLO • En los años ’60 los Beatles introdujeron el sonido de la cítara en su música para significar valores que, en la cultura joven ‘psicodélica’ de ese tiempo, estaban asociados con el país de origen del instrumento: meditación, drogas como medio de expansión de la conciencia, etc.

POTENCIAL DE SIGNIFICACIÓN EXPERIMENTAL: • Se refiere a la idea de que los significantes materiales tienen un significado potencial que se deriva de aquello que hacemos cuando los articulamos, y de nuestra habilidad para extender nuestra experiencia práctica metafóricamente y convertir acción en conocimiento. • Cada realización de un mismo diseño puede ser interpretada de diferentes maneras.

DISTRIBUCIÓN • Tiende a ser vista como no semiótica, como no sumando sentido. • Se refiere a la potencial ‘re-codificación’ de los productos o eventos semióticos, con propósitos de registro, preservación y/o distribución. • La tecnologías de distribución generalmente no están pensadas para la producción, sino como tecnologías de re-producción.

¿A QUÉ LE LLAMAMOS DISCURSO EN UNA PERSPECTIVA MULTIMODAL? LOS DESAFÍOS DE UNA NUEVA SEMIÓTICA. WILLIAMSON, Rodney

ALED 6, Santiago, Chile, septiembre de 2005, p.1

Resalta del trabajo de Kress y Van Leeuwen: • Todos los textos son multimodales • Plantean nuevas perspectivas sobre texto, lectura y competencia comunicativa, estableciendo los fundamentos de una nueva semiótica que pone en tela de juicio la primacía de la expresión verbal. • Hay un cambio teórico que va desde «una teoría que sólo dio cuenta del lenguaje hacia una teoría que pueda dar cuenta de la gestualidad, el habla, las imágenes, la escritura, objetos tridimensionales, colores, música, entre otros modos de expresión».

Corrientes de teoría multimodal • Harry Bunt, Robert Beun, Granström y Allwood en el norte de Europa. • El proyecto de Anthony Baldry con el apoyo de Paul Thibault, en 4 Universidades italianas. • En Australia, en relación, sobre todo, con la lingüística sistémica funcional de Halliday). • Las investigaciones multimodales de la conversación en Estados Unidos por Charles Goodwin y Sigrid Norris. • La corriente británica con Gunther Kress, Theo van Leeuwen, Carey Jewitt.

Estratos analíticos de Kress & van Leeuwen • DISCURSO ( formas de conocimiento socialmente “situadas”(¿quién, qué, dónde, cuándo, cómo?) + evaluaciones, propósitos, interpretaciones, legitimaciones. • DISEÑO (conceptualización de la forma del producto semiótico Se diseña: 1) una configuración de discursos 2) una determinada (inter)acción 3) una determinada combinación de modos • PRODUCCIÓN (articulación material del diseño sea como prototipo, sea como producto final)

• DISTRIBUCIÓN (‘recodificación’ técnica del producto para fines de grabación o difusión)

• La teoría multimodal nos propone un enfoque sobre el discurso en el que éste no se ve como un objeto de estudio aislado, sino como parte de un proceso. • La teoría multimodal nos habla de discursos en plural porque su única existencia real es a través de actos de comunicación, en los que cada discurso entra en combinación con otros.

• Foucault nos enseña que el discurso es una construcción social, pero la significación social del discurso sólo se puede apreciar enfocando todo el proceso comunicativo, desde su concepción hasta las condiciones materiales y técnicas de su distribución. • La naturaleza histórica y evolutiva de los discursos se aprecia viéndolos como parte de un proceso de difusión a partir de un emisor o emisores hacia uno o varios públicos, a través de determinadas situaciones comunicativas, es decir, determinados sitios y tiempos.

• La monomodalidad delata una tendencia hacia la especialización, la ejecución de un género por profesionales. Un ejemplo es el paso de la Edad Media tardía (notablemente multimodal) hacia el Renacimiento (monomodal) fig. 1 y 2 • El arte eclesiástico o monástico emplea elementos tanto pictóricos como verbales, con fines didácticos. • Más tarde, las escuelas de arte, arquitectura y escultura del Renacimiento van dando lugar a una práctica artística más profesional. El pintor de carrera debe ahora poder expresarlo todo por modos pictóricos (formas, cromatismo). Representación natural y valor icónico se funden en una sola categoría; los elementos verbales desaparecen. Fig. 3

Anunciación, Simone Martini, 1333

Anunciación, Fra Angelico, 1432

Anunciación, Francesco Salviati, 1534

• Con la aparición de la imprenta se observa un proceso similar. • En los siglos XIV y XV, aparecen libros suntuosamente ilustrados, siguiendo la tradición de los manuscritos iluminados de la Edad Media (Fig. 4, 5 y 6) • La re-organización de la página en términos de una coherencia puramente verbal comienza a aflorar desde el siglo 16 (Fig. 7). • Y el proceso llega a su apogeo en los siglos XVIII y XIX (Fig.8).

Libro de horas, Flandes, s. XV

Ilustraciones de la primera edición de Los cuentos de Canterbury de Chaucer

Dos portadas de ediciones del siglo XVI, de Gabrieli y Galileo

Portadas de ediciones de Newton (1730) y de Jane Austen (1811)

• El grado de integración de otros modos de comunicación al arte verbal, el predominio y el poder de la escritura alcanzan su culmen en la literatura. • Los tonos de la voz, las posturas del cuerpo, las expresiones de la cara, se representan a través del yo poético, quien actúa como observador, audiencia real de la escena. De esta manera, una serie de modos de expresión pertenecientes a la situación comunicativa material se subsumen en la expresión escrita: el yo “ve” (modo visual) y “oye” (modo sonoro).

• El proceso inverso, el paso de la monomodalidad a la multimodalidad, se ha producido lentamente en el paso del siglo XIX al XX, y atropelladamente en el XXI. • Así como la invención de la imprenta resaltó la importancia de la letra impresa, las nuevas tecnologías electrónicas, con las que los contenidos y formatos visuales se pueden manejar y difundir con enorme facilidad, vuelven a dar prominencia a la imagen. Vuelven a aparecer los íconos, esta vez no con significado filosófico o sagrado, sino comercial: se trata de logotipos, textos-imágenes de marcas registradas, etc.

• El discurso revela su carácter histórico, no sólo a través de la serie de modos que en determinado momento sirven para expresarlo, sino también a través de su combinación con otros discursos. Por ejemplos: • El discurso amoroso y el religioso en la tradición de la balada romántica del s. XIX. • La intersección del discurso científico con el comercial es una técnica establecida para vendernos productos apelando a la autoridad de «expertos».

CASOS DISCURSIVOS MÁS PROBLEMÁTICOS • Cuando la combinación de discursos se realiza en el contexto de una fusión de géneros discursivos, se produce un caso de verdadera hibridación discursiva, que puede dar lugar a un mensaje bifurcado, diferente para cada tipo distinto de audiencia contemplado. • Las hibridaciones en nuestros medios contemporáneos, se caracterizan por propagar mensajes dobles, combinaciones discursivas disparejas, que parecen coherentes debido a un hábil manejo de recursos multimodales.

• De la misma manera que en los medios se ven casos de fusiones discursivas particularmente modernas, también se producen casos de fusión de distintos modos de expresión. • En los mensajes publicitarios, por ejemplo, las letras del lenguaje escrito se explotan en su plena potencialidad visual. De esta manera, una letra o morfema se puede convertir en icono, objeto visual, objeto tridimensional con cara delantera y trasera, en una especie de ventana para visualizar otros objetos y referentes, un espacio cromático, etcétera

Anuncio de la marca X

Anuncio de la marca OXOXO

• La superposición de modos, formas, estructuras en el espacio virtual, creando efectos de aparente instantaneidad o simultaneidad en el tiempo, es un rasgo de los nuevos contextos de comunicación electrónica en el mundo moderno. • Los medios contemporáneos también transforman las estructuras discursivas. Un caso es la narración, que acostumbramos concebir en términos verbales, pero que tiene un evidente potencial multimodal (videoclip comercial Doritos rólalas)

Conclusiones - La teoría multimodal plantea el discurso como una realidad cambiante, evolutiva, histórica, que sólo se puede captar a través de un diseño y un contexto comunicativo. En esto, los ejemplos de la historia pasada son útiles para comprender la historia de actos comunicativos “actuales” o recientes. - Los detalles materiales y técnicos de la producción y distribución de discursos cobran una nueva y especial importancia. - Para comprender la naturaleza de los discursos, hay que examinar las audiencias que los reciben. El papel creativo del receptor es cada vez más importante en el sofisticado manejo de múltiples modos en la comunicación contemporánea. - Los aportes de la teoría multimodal son esenciales para un análisis verdaderamente crítico del discurso.