Discurso multimodal. Los modos y los medios de la comunicacin

contempornea (2001)

Gunther KRESS & Theo VAN LEEUWEN

GUA PARA EL ANLISIS MULTIMODAL Y/O UNA TEORA DEL LENGUAJE DE LOS

MLTIPLES MEDIOS

DIFERENTES MODOS O SISTEMAS SEMITICOS DE CODIFICACIN :

1. Lengua 2. Imagen visual 3. Msica 4. Sonido 5. Gestualidad 6. Color

Circuito de la comunicacin (VERBAL Y NO-VERBAL)

EMISOR

RETROALIMENTACIN

RECEPTOR MENSAJE

CANAL / MEDIO

CDIGO /SISTEMA SEMITICO

ARTICULACIN DEL SENTIDO EN TEXTOS MULTIMODALES

La lingstica tradicional tena un lenguaje definido como un sistema que funciona a travs de la doble articulacin, donde un mensaje era una articulacin entre significante y significado.

Los textos multimodales son constructores de sentido en mltiples articulaciones, llamadas ESTRATOS: discurso, diseo, produccin y distribucin.

DISCURSO

Los discursos son conocimientos socialmente construidos de (algn aspecto de) la realidad. Por socialmente construido queremos decir que han sido desarrollados en contextos sociales especficos y en formas que son apropiadas a los intereses de los actores sociales en esos contextos, sean contextos muy amplios o particulares; contextos explcitamente institucionalizados o informales.

Los discursos no slo proveen versiones sobre quin hace qu, cundo y dnde, sino que tambin suman evaluaciones, interpretaciones y argumentos a estas versiones.

DISEO Est a la mitad del camino entre el contenido y la

expresin. Es el lado conceptual de la expresin, y es el lado expresivo de la concepcin. Los diseos son (usos de los) recursos semiticos en todos los modos semiticos y combinaciones de modos semiticos.

Los diseos son medios para entender los discursos en el contexto de una situacin comunicativa dada. Pero los diseos tambin suman algo nuevo: permiten y dan lugar a la situacin comunicativa que cambia el conocimiento socialmente construido en la (inter) accin social.

el diseo todava est separado de la produccin material real del producto semitico y de la articulacin material real del acontecimiento semitico.

Los recursos sobre los que el diseo trabaja, los modos semiticos, son an abstractos, capaces de ser llevados a cabo a travs de diferentes materialidades.

Modo

Los modos son recursos semiticos (CDIGOS) que permiten la realizacin simultnea de discursos y tipos de (inter)accin.

Los diseos usan entonces estos recursos, combinando modos semiticos y seleccionando dentro de las opciones disponibles de acuerdo a los intereses de una situacin comunicativa particular.

PRODUCCIN

Se refiere a la organizacin de la expresin, a la articulacin material real del evento semitico o a la produccin material real del artefacto semitico.

Aqu competen un conjunto de habilidades diferentes: habilidades tcnicas, habilidades de la mano y del ojo, habilidades no relacionadas a modos semiticos sino a medios semiticos.

MEDIO

Es la forma de ejecucin (la sustancia material elaborada en la cultura y trabajada en un tiempo cultural), el sentido en que lo usan los artistas cuando hablan del medio leo o tmpera sobre papel, bronce sobre base de mrmol; y tambin se aplica a los medios que no producen huellas que perduren ms all del momento de la articulacin, como el habla o la msica.

A veces, el diseo y la produccin, modo y medio, son difciles de separar

PROCEDENCIA Se refiere a la idea de que los signos pueden

ser importados desde un contexto (otra era, grupo social, cultura) a otro, para dar a entender ideas y valores asociados a ese otro contexto, por parte de aquellos que lo importan.

La idea de Procedencia est muy relacionada con las ideas de mito y connotacin, como fueron introducidas a la semitica por Roland Barthes.

EJEMPLO

En los aos 60 los Beatles introdujeron el sonido de la ctara en su msica para significar valores que, en la cultura joven psicodlica de ese tiempo, estaban asociados con el pas de origen del instrumento: meditacin, drogas como medio de expansin de la conciencia, etc.

POTENCIAL DE SIGNIFICACIN EXPERIMENTAL:

Se refiere a la idea de que los significantes materiales tienen un significado potencial que se deriva de aquello que hacemos cuando los articulamos, y de nuestra habilidad para extender nuestra experiencia prctica metafricamente y convertir accin en conocimiento.

Cada realizacin de un mismo diseo puede ser interpretada de diferentes maneras.

DISTRIBUCIN

Tiende a ser vista como no semitica, como no sumando sentido.

Se refiere a la potencial re-codificacin de los productos o eventos semiticos, con propsitos de registro, preservacin y/o distribucin.

La tecnologas de distribucin generalmente no estn pensadas para la produccin, sino como tecnologas de re-produccin.

A QU LE LLAMAMOS DISCURSO EN UNA PERSPECTIVA MULTIMODAL? LOS

DESAFOS DE UNA NUEVA SEMITICA.

WILLIAMSON, Rodney

ALED 6, Santiago, Chile, septiembre de 2005, p.1

Resalta del trabajo de Kress y Van Leeuwen:

Todos los textos son multimodales Plantean nuevas perspectivas sobre texto, lectura

y competencia comunicativa, estableciendo los fundamentos de una nueva semitica que pone en tela de juicio la primaca de la expresin verbal.

Hay un cambio terico que va desde una teora que slo dio cuenta del lenguaje hacia una teora que pueda dar cuenta de la gestualidad, el habla, las imgenes, la escritura, objetos tridimensionales, colores, msica, entre otros modos de expresin.

Corrientes de teora multimodal

Harry Bunt, Robert Beun, Granstrm y Allwood en el norte de Europa.

El proyecto de Anthony Baldry con el apoyo de Paul Thibault, en 4 Universidades italianas.

En Australia, en relacin, sobre todo, con la lingstica sistmica funcional de Halliday).

Las investigaciones multimodales de la conversacin en Estados Unidos por Charles Goodwin y Sigrid Norris.

La corriente britnica con Gunther Kress, Theo van Leeuwen, Carey Jewitt.

Estratos analticos de Kress & van Leeuwen DISCURSO ( formas de conocimiento socialmente

situadas(quin, qu, dnde, cundo, cmo?) + evaluaciones, propsitos, interpretaciones, legitimaciones.

DISEO (conceptualizacin de la forma del producto semitico Se disea: 1) una configuracin de discursos 2) una determinada (inter)accin 3) una determinada combinacin de modos PRODUCCIN (articulacin material del diseo sea como

prototipo, sea como producto final)

DISTRIBUCIN (recodificacin tcnica del producto para fines de grabacin o difusin)

La teora multimodal nos propone un enfoque sobre el discurso en el que ste no se ve como un objeto de estudio aislado, sino como parte de un proceso.

La teora multimodal nos habla de discursos en plural porque su nica existencia real es a travs de actos de comunicacin, en los que cada discurso entra en combinacin con otros.

Foucault nos ensea que el discurso es una construccin social, pero la significacin social del discurso slo se puede apreciar enfocando todo el proceso comunicativo, desde su concepcin hasta las condiciones materiales y tcnicas de su distribucin.

La naturaleza histrica y evolutiva de los discursos se aprecia vindolos como parte de un proceso de difusin a partir de un emisor o emisores hacia uno o varios pblicos, a travs de determinadas situaciones comunicativas, es decir, determinados sitios y tiempos.

La monomodalidad delata una tendencia hacia la especializacin, la ejecucin de un gnero por profesionales. Un ejemplo es el paso de la Edad Media tarda (notablemente multimodal) hacia el Renacimiento (monomodal) fig. 1 y 2

El arte eclesistico o monstico emplea elementos tanto pictricos como verbales, con fines didcticos.

Ms tarde, las escuelas de arte, arquitectura y escultura del Renacimiento van dando lugar a una prctica artstica ms profesional. El pintor de carrera debe ahora poder expresarlo todo por modos pictricos (formas, cromatismo). Representacin natural y valor icnico se funden en una sola categora; los elementos verbales desaparecen. Fig. 3

Anunciacin, Simone Martini, 1333

Anunciacin, Fra Angelico, 1432

Anunciacin, Francesco Salviati, 1534

Con la aparicin de la imprenta se observa un proceso similar.

En los siglos XIV y XV, aparecen libros suntuosamente ilustrados, siguiendo la tradicin de los manuscritos iluminados de la Edad Media (Fig. 4, 5 y 6)

La re-organizacin de la pgina en trminos de una coherencia puramente verbal comienza a aflorar desde el siglo 16 (Fig. 7).

Y el proceso llega a su apogeo en los siglos XVIII y XIX (Fig.8).

Libro de horas, Flandes, s. XV

Ilustraciones de la primera edicin de Los cuentos de Canterbury de Chaucer

Dos portadas de ediciones del siglo XVI, de Gabrieli y Galileo

Portadas de ediciones de Newton (1730) y de Jane Austen (1811)

El grado de integracin de otros modos de comunicacin al arte verbal, el predominio y el poder de la escritura alcanzan su culmen en la literatura.

Los tonos de la voz, las posturas del cuerpo, las expresiones de la cara, se representan a travs del yo potico, quien acta como observador, audiencia real de la escena. De esta manera, una serie de modos de expresin pertenecientes a la situacin comunicativa material se subsumen en la expresin escrita: el yo ve (modo visual) y oye (modo sonoro).

El proceso inverso, el paso de la monomodalidad a la multimodalidad, se ha producido lentamente en el paso del siglo XIX al XX, y atropelladamente en el XXI.

As como la invencin de la imprenta resalt la importancia de la letra impresa, las nuevas tecnologas electrnicas, con las que los contenidos y formatos visuales se pueden manejar y difundir con enorme facilidad, vuelven a dar prominencia a la imagen. Vuelven a aparecer los conos, esta vez no con significado filosfico o sagrado, sino comercial: se trata de logotipos, textos-imgenes de marcas registradas, etc.

El discurso revela su carcter histrico, no slo a travs de la serie de modos que en determinado momento sirven para expresarlo, sino tambin a travs de su combinacin con otros discursos.

Por ejemplos:

El discurso amoroso y el religioso en la tradicin de la balada romntica del s. XIX.

La interseccin del discurso cientfico con el comercial es una tcnica establecida para vendernos productos apelando a la autoridad de expertos.

CASOS DISCURSIVOS MS PROBLEMTICOS

Cuando la combinacin de discursos se realiza en el contexto de una fusin de gneros discursivos, se produce un caso de verdadera hibridacin discursiva, que puede dar lugar a un mensaje bifurcado, diferente para cada tipo distinto de audiencia contemplado.

Las hibridaciones en nuestros medios contemporneos, se caracterizan por propagar mensajes dobles, combinaciones discursivas disparejas, que parecen coherentes debido a un hbil manejo de recursos multimodales.

De la misma manera que en los medios se ven casos de fusiones discursivas particularmente modernas, tambin se producen casos de fusin de distintos modos de expresin.

En los mensajes publicitarios, por ejemplo, las letras del lenguaje escrito se explotan en su plena potencialidad visual. De esta manera, una letra o morfema se puede convertir en icono, objeto visual, objeto tridimensional con cara delantera y trasera, en una especie de ventana para visualizar otros objetos y referentes, un espacio cromtico, etctera

Anuncio de la marca X

Anuncio de la marca OXOXO

La superposicin de modos, formas, estructuras en el espacio virtual, creando efectos de aparente instantaneidad o simultaneidad en el tiempo, es un rasgo de los nuevos contextos de comunicacin electrnica en el mundo moderno.

Los medios contemporneos tambin transforman las estructuras discursivas. Un caso es la narracin, que acostumbramos concebir en trminos verbales, pero que tiene un evidente potencial multimodal (videoclip comercial Doritos rlalas)

Conclusiones - La teora multimodal plantea el discurso como una realidad cambiante, evolutiva, histrica, que slo se puede captar a travs de un diseo y un contexto comunicativo. En esto, los ejemplos de la historia pasada son tiles para comprender la historia de actos comunicativos actuales o recientes.

- Los detalles materiales y tcnicos de la produccin y distribucin de discursos cobran una nueva y especial importancia.

- Para comprender la naturaleza de los discursos, hay que examinar las audiencias que los reciben. El papel creativo del receptor es cada vez ms importante en el sofisticado manejo de mltiples modos en la comunicacin contempornea.

- Los aportes de la teora multimodal son esenciales para un anlisis verdaderamente crtico del discurso.