Revista Lationamericana de Estudios del DiscursoRevista Latinoamericana de Estudos do Discurso

editoras

Adriana BolívarMartha ShiroUniversidad Central de Venezuela

editores de reseñas

Sírio Possenti, Universidade Estadual de Campinas, BrasilIrene Fonte, Universidad Autónoma Metropolitana, México

comité editorial

Paola Bentivoglio, Universidad Central de Venezuela

Francisco José Bolet, Universidad Central de Venezuela

Julio Escamilla Morales, Universidad del Atlántico, Colombia

Irene Fonte, Universidad Autónoma Metropolitana, México

María Laura Pardo, Conicet, Ciafic, Argentina

Ingedore Villaça Koch, Universidad de Campinas, Brasil

Marianne Peronard, Universidad Católica de Valparaíso, Chile

Doris Martínez, Universidad de Puerto Rico, Río Piedras, Puerto Rico

Irene Madfes, Universidad de la República, Uruguay

asesores invitados

Carmen Rosa Caldas-Coulthard, Universidade de Florianapolis, Brasil

Teun van Dijk, Universidad de Ámsterdam, Holanda y Universidad Pompeu Fabra, España

Teresa Espar, Universidad de Los Andes, Venezuela

Lars Fant, Universidad de Estocolmo, Suecia

Luisa Martín Rojo, Universidad Autónoma de Madrid, España

Jacob Mey, Universidad de Odense, Dinamarca

Wulf Oesterreicher, Universidad de Munich, Alemania

Sírio Possenti, Universidade Estadual de Campinas, Brasil

Irayda Sánchez, Universidad Pedagógica Experimental Libertador, Venezuela

diseño gráfico

Grafiweb Impresores y Publicistas

diagramacion

Odalis C. Vargas B.

Asociación Latinoamericana de Estudios del DiscursoAssociação Latinoamericana de Estudos do DiscursoALED es arbitrada y está indizada en Revencyt y Latindex. Se publica semestralmente bajo los auspicios de la Asociación Latinoamericana de Estudios del Discurso

comité directivo

Neyla Graciela Pardo Abrilpresidenta

Denize Elena Garcia da Silvavicepresidenta

Teresa Oteízasecretaria general

María Cristina Azquetatesorera

Sara Pérezargentina

Wander Emediato de Souzabrasil

Sandra Solercolombia

Lésmer Montecinochile

Eva Salgado Andrademéxico

Doris Martínezpuerto rico

Irene Madfesuruguay

Vanessa Courleandervenezuela

socios honorarios Teun van Dijk Patrick Charaudeau Lars Fant

expresidentas de la aled

Adriana Bolívar (1995-2003)Teresa Carbó (2003-2005)Anamaría Harvey (2005-2009)

ilustración de portada

Claudio Capellini. Acuarelas Barcelona 10, 2010. Acuarela, 35 X 45 cms.

Versión electrónica en: http://www.aledportal.comDirección electrónica: revistaaled2004@yahoo.esDepósito legal: 200102CS1090ISSN 1317-7389 Volumen 12, nº 1Tiraje: 500 ejemplares

Impresión editorial: Grafiweb Impresores y Publicistas

Impreso en Colombia

Re vis ta La ti noa me ri ca na de Es tu dios del Dis cur so

vo lu men 12 nú me ro 1 2012

NÚMERO MONOGRÁFICO

Su ma riointroducción: Multimodalidad: de la teoría a la práctica

Claudia Gabriela D’Angelo 3

artículos

Discurso, imagem e texto verbal: uma perspectiva crítica da multimodalidadeDenize Elena Garcia da Silva y Viviane Ramalho 7

Metodologia para elaboração de audiodescrições para museus baseada na semiótica social e multimodalidade: introdução teórica e práticaCélia M. Magalhâes y Vera Lúcia Santiago Araújo 31

Multimodalidad y estrategias discursivas: un abordaje metodológicoSalvio Martín Menéndez 57

Análisis del discurso multimodal Kay L. O’Halloran. Traducido por Claudia Gabriela D’Angelo 75

Exploraciones sobre la pobreza y el racismo en Colombia. Estudio multimodalNeyla Graciela Pardo Abril 99

reseñas

Monika Bednarek y J.R. Martin (eds.). New Discourse on Language. Functional Perspectives on Multimodality, Identity, and AffiliationReseñado por Damián Alvarado 119Gunther R. Kress. Multimodality: A Social Semiotic Approach to Contemporary CommunicationReseñado por Julián Ezquerra 124

Índice Acumulado 131

3

introducción

Multimodalidad: de la teoría a la práctica

Este número monográfico agrupa trabajos de investigadores latinoamerica-nos que, movidos por sus propias búsquedas teórico-metodológicas e inspirados por los recientes desarrollos en el área del análisis del discurso multimodal, comenzaron a profundizar sus reflexiones, a vincular teorías, a adoptar y readaptar criterios y perspectivas para realizar sus propios análisis. A partir del número 7(1) de la Revista ALED, el comité editorial decidió incorporar a esta publicación traducciones seleccionadas luego de una cuidadora evaluación editorial. En esa oportunidad, se publicó la versión en español de un capítulo de Shi-Xu, miembro del Centro Contemporáneo de Estudios del Discurso de la Universidad de Zhejiang, que nos invitaba, literalmente, a tomar contacto con el paradigma de los estudios del discurso en China pero que, además, podía ser el punto de partida para reflexionar sobre las posiciones relativas de esos paradigmas, sobre la circulación de conocimientos, sobre lejanías geográficas y cercanías experienciales. En ese mismo volumen, se incluyó la versión en español del capítulo de Kaltenbacher que formaba parte de un libro pionero en el área de los estudios multimodales Perspectives in Multimodality editado por Ventola, Charles & Kaltenbacher (2004).

Los artículos que conforman este volumen monográfico dan cuenta del proceso de apertura de los estudios del discurso canalizado en la investigación de diversos corpus de discursos multimodales. A modo de punto de articulación con nuestros pares internacionales, hemos incorporado la versión en español de un capítulo de O’Halloran (2011) que sintetiza su posición teórica para luego desarrollar el análisis de un segmento televisivo1. Este trabajo entra en diálogo con la pequeña muestra de las muchas investigaciones que se vienen realizando en el área del análisis del discurso multimodal en América Latina. Si bien es cierto que la mayoría de los estudios comparten los postulados de la perspectiva sistémico-funcional, los trabajos aportan reflexiones teóricas pro-pias fruto del fluido intercambio académico regional y del estudio de nuestros propios corpora, fenómenos multimodales que han surgido, que han ingresado, circulan, se reproducen, participan y construyen la cognición social en nuestros contextos socio culturales inmediatos.

1 En todos los casos, las imágenes se reproducirán en blanco y negro en la versión impresa de la revista, pero se podrán apreciar en sus formatos originales, en colores, en la versión digital disponible en el portal de la ALED: http://www.aledportal.com/

4

12 (1)

En su trabajo, Garcia da Silva y Ramalho abordan el análisis multimodal desde la perspectiva del análisis crítico del discurso (ACD). Tomando como punto de partida la propuesta metodológica de Kress & van Leeuwen (1996) y las discusiones teóricas de Marcuschi (2005, 2008) analizan tres textos mul-timodales que involucran a mujeres como participantes: un afiche publicitario de correos, el cartel de un evento contra la violencia familiar y una fotografía publicada en un periódico. Las autoras proponen, en un primer momento de su trabajo, un vínculo triangular entre discurso, imagen y texto verbal para, en un segundo momento, profundizar la discusión, pasar al análisis del corpus y las conclusiones finales. Consideran que su propuesta permite problematizar potenciales efectos ideológicos de (sentidos de) textos sobre las relaciones so-ciales, las acciones e interacciones, el conocimiento, las creencias y actitudes así como también valores e identidades.

Magalhães y Santiago Araújo exploran los puntos de contacto y posibili-dades de trabajo interdisciplinario entre el análisis del discurso multimodal y los estudios en el área de la traducción audiovisual, específicamente aplicada a la accesibilidad comunicacional. En su trabajo, parten de una lectura de los museos como espacios multimodales de producción de significados y proponen utilizar los resultados de su análisis para redactar audio-guías que integren lo verbal con lo visual y se constituyan en discursos que hagan que estos espacios sean accesibles para personas con discapacidad visual. A partir de reconocer la necesidad de desarrollar una interfase entre la semiótica social, la traducción audiovisual y el análisis multimodal trabajan con el objetivo de proponer una metodología para la elaboración de audio-guías para museos, que se integren a los criterios que se utilizan para las audiodescripciones propuestas desde la perspectiva de la traducción audiovisual así como también desde los modelos de análisis de las imágenes de O’Toole (1994) y de Kress & van Leeuwen (1996).

Atendiendo a la necesidad de contar con teorías, descripciones y meto-dologías específicas para el analizar los discursos multimodales, Menéndez realiza una profunda reflexión metodológica y señala que el análisis multimo-dal del discurso permite relevar la forma en que los sistemas se conforman y, también, su finalidad. En su trabajo, de base sistémico-funcional (Halliday, 1978), analiza una imagen fija, un afiche cinematográfico, y propone estudiar las estrategias discursivas para mostrar que es la combinación estratégica de modos lo que pone de manifiesto las preponderancias y que las interpretaciones se realizan, jerarquizan, complementan y orientan a partir, precisamente, de esas combinaciones.

Finalmente, Pardo Abril integra categorías sobre la pobreza y los grupos étnicos provenientes de distintas disciplinas para caracterizar los discursos con-temporáneos y señalar su papel en el reforzamiento del racismo, la desigualdad y la exclusión social. Pardo Abril parte del supuesto de que los problemas es-tructurales de las sociedades se representan, debaten y reflexionan en los medios

5

de comunicación y propone un Estudio Crítico del Discurso Multimodal (ECDM) con el objetivo de relevar e interpretar los recursos simbólicos y tecnológicos que utilizan los discursos que circulan en YouTube en relación a la pobreza y el racismo en la sociedad colombiana. Su propuesta metodológica incluye la utilización de los programas ELAN 3.6.0 y Toolbox para el proceso descriptivo que le permitirá desentrañar el carácter híbrido y multimodal del discurso, explorar las estrategias y recursos utilizados en la producción de sig-nificados en el video documental “Los niños de Hollywood”, que circula por YouTube y forma parte del corpus del proyecto “Análisis crítico del discurso: representaciones mediáticas de la pobreza”.

En todos estos textos, se pone de manifiesto el reconocimiento a los trabajos pioneros y, también, la búsqueda de repensarlos y, si es necesario, replantearlos, reformularlos o realizar nuevas propuestas para contribuir al desarrollo de he-rramientas analíticas que faciliten el pasaje de la teoría a la práctica en el área del análisis de los discursos multimodales.

RefeRencias bibliogRáficas

KRess, g. & van leeuwen, T. (1996). Reading Images: The Grammar of Visual Design. London: New York: Routledge.

Halliday, M.A.K. (1978). El lenguaje como semiótica social. México: FCE.MaRcuschi, L. A. (2005). ‘O papel da atividade discursiva no exercício do controle

social’, Cadernos de Linguagem e Sociedade (Papers on language and society) 7, 7-34.

MaRcuschi, L. A. (2008). Produção textual, análise de gêneros e compreensão. São Paulo: Parábola Editorial.

o’halloRan, K. L. (2011). ‘Multimodal Discourse Analysis’, en K. K. Hyland y B. Paltridge (eds). Companion to Discourse, pp. 120-137. London and New York: Continuum.

o’Toole, M. (1994). The language of displayed art. Rutherford, Madison, Teaneck: Fairleigh Dickinson University Press.

venTola, e., chaRles, c. & KalTenbacheR, M. (eds.) (2004). Perspectives on Multimodality. Amsterdam: Benjamins.

Claudia Gabriela D’AngeloCoordinadora del monográfico

7ALED 12 (1), pp. 7-29

ARTÍCULO

DENIZE ELENA GARCIA DA SILVA

VIVIANE RAMALHO

Universidade de Brasília

Resumen. Discutimos la multimodalidad desde la perspectiva de los estudios críticos del discurso desarrollados por Chouliaraki & Fairclough (1999) y Fairclough (2001, 2003a), dado que consideramos dicho fenómeno como un rasgo importante del dis-curso moderno. Con el apoyo de los marcos teóricos y metodológicos de la gramática visual de Kress y van Leeuwen (1996) y también las discusiones teóricas de Marcuschi (2005, 2008), hemos analizado tres textos multimodales (una publicidad de los correos de Australia, el cartel de un evento en Portugal en contra de la violencia familiar y la noticia con foto en un periódico brasileño) que involucran mujeres como participantes representadas junto a otros actores sociales. Las categorías visuales como la perspectiva, la modalidad, la estructura visual y el valor de la información, juntamente con las categorías analíticas de textos verbales, es decir, procesos de transitividad, estructuras lingüístico-discursivas y selección del léxico, condujeron nuestras reflexiones respecto de la función de la semiosis y sus modalidades, tanto en cuanto apoyo o rechazo de hegemonías como en el complejo de luchas de poder que involucran, a la vez, rela-ciones de género.

PalabRas clave: discurso, imagen, texto verbal, interdiscursividad, multimodalidad, intergenericidad.

Resumo. Discutimos a multimodalidade com base nos estudos críticos do discurso, desenvolvidos por Chouliaraki & Fairclough (1999) e Fairclough (2001, 2003a), visto que também consideramos o fenômeno como um traço relevante do discurso moderno. Apoiadas em pressupostos teórico-metodológicos da Gramática visual de Kress e van Leeuwen (1996), assim como nas discussões teóricas de Marcuschi (2005, 2008), analisamos três textos multimodais (uma publicidade dos Correios australianos; um cartaz de Portugal contra a violência doméstica; e uma manchete brasileira com foto jornalística), que configuram mulheres como participantes representadas junto a outros atores sociais. Categorias visuais como perspectiva, modalidade, estrutura visual e valor da informação, juntamente com categorias de análise de textos verbais, tais como processos de transitividade, estruturas linguístico-discursivas e seleção lexical, conduziram reflexões sobre a função da semiose e suas modalidades, seja na sustenta-ção ou contestação de hegemonias, seja no complexo de lutas de poder, o que inclui relações de gênero social.

PalavRas-chave: discurso, imagem, texto verbal, interdiscursividade, intergenericidade, multimodalidade.

Discurso, imagem e texto verbal: uma perspectiva crítica da multimodalidade

Recibido: 15 de marzo de 2012 • Aceptado: 20 de julio de 2012.

8

12 (1)

AbstRact. We discuss multimodality following the perspective of critical discourse studies developed by Chouliaraki & Fairclough (1999) and Fairclough (2001, 2003a) as we regard it as an important feature of modern discourses. Within the theoretical and methodological framework provided by visual grammar (Kress & van Leeuwen, 1996) and also the theories developed by Marcuschi (2005, 2008), we analyze three multimodal texts: an advertisement of an Australian postal service, a poster of an event against family violence in Portugal, and a journalistic text with photos in a Brazilian journal. These texts involved women as participants presented next to other social ac-tors. Visual categories such as perspective, modality, visual structure, and information value, together with the analytic categories of verbal texts, that is, transitive processes, linguistic-discursive structure, and lexical choices, lead our considerations regarding the role of semiosis and its modes in supporting / rejecting hegemonies as well as in the complex struggle for power which involves, at the same time, gender relationships.

Key woRds: discourse, image, verbal text, interdiscursivity, multimodality, intergenre.

Introdução

Entre as telas das práticas semiótico-discursivas que se entrecruzam no tecido heterogêneo da vida social, objetivamos destacar, no contexto do pre-sente estudo, três fios que tecem o fenômeno da multimodalidade: discurso, imagem e texto verbal. Como ocorre na linguagem verbal, imagens podem atuar como forma de representação, como troca de experiência e como mensagem, o que nos desafia a distinguir uma multimodalidade discursiva, sobretudo, pela necessidade que temos de considerar, junto à palavra escrita, outras formas de semiose, que constituem uma constante nas instâncias dos meios de comuni-cação do mundo atual.

Consideramos como multimodalidade discursiva a coexistência de sistemas de signos imagéticos e recursos linguísticos gráficos que integram um mesmo espaço textual, de modo a demandar operações cognitivas complexas no corpo da mensagem. O termo multimodalidade encontra-se associado a um construto teórico de base hallidayana, bastante produtivo nos estudos semióticos de Kress & van Leeuwen (1996), direcionados para a gramática do design visual, bem como na proposta de análise textual voltada para a pesquisa social, sugerida por Fairclough (2003a) no âmbito da Análise de Discurso Crítica (ADC)1. Trata-se de contribuições que nos incentivam a refletir sobre a integração das várias formas simbólicas de semiose, entre as quais destacamos o discurso. Isso, porque a dimensão discursiva corresponde a um conceito mais amplo, uma vez que abarca as duas modalidades da linguagem (oral e escrita) em combinação com outras formas de semiose, tais como as imagens visuais, bem como a comunicação não-verbal, conforme sugerem Chouliaraki e Fairclough (1999).

Podemos afirmar que, no mundo contemporâneo, a maioria dos meios de comunicação costuma-se valer da combinação de texto e imagem para persuadir e até mesmo convencer o público em geral, sobretudo, no que concerne às propagandas cotidianas, destinadas ao incentivo direcionado para a aquisição de

9

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

bens de consumo. Mas resulta que, em situações específicas, deparamo-nos com a força crescente da mídia quanto a ações de consolidar formas de representa-ção e ideologias, de modo a imprimir um caráter de veracidade, ou mesmo de validade (seja de fatos, notícias ou de propagandas de produtos entre outros), ao mesmo tempo em que costuma instaurar uma ordem simbólica, mediante “ações retóricas tipificadas” na produção de sentidos (Silva e Ramalho, 2008).

Como registra Mozdzenski (2008: 22), com base nos estudos de Braga (2004), “em produções multimodais as possibilidades de construção de sen-tidos se ampliam”, o que costuma repercutir em gêneros como uma espécie de “sistemas de coerção social”, de acordo com Marcuschi (2005). Em poucas palavras, consideramos que as ações retóricas tipificadas podem ser reconhecidas como modos recorrentes de “atuar e de se relacionar com os outros” e, o que mais cabe destacar, “sobre os outros”, o que pode favorecer a projetos de ordem social e de poder, como adverte Fairclough (2003a: 33).

Para conduzir essas reflexões, organizamos o artigo em quatro partes. Na primeira, apresentamos uma verticalização teórica sobre a triangulação proposta: discurso, imagem e texto verbal. Na segunda parte, tratamos de aprofundar uma discussão sobre o tema da multimodalidade. E na terceira, dedicamo-nos à análise dos dados selecionados para este estudo. Na última parte, tecemos as considerações finais.

1. Economia baseada em conhecimento e hibridismo semiótico

Na esteira dos ensinamentos de Marcuschi (2005), bem como nos princí-pios teórico-metodológicos da Análise de Discurso Crítica (ADC) e da Linguís-tica Sistêmico-Funcional (LSF), comungamos a ideia de que o funcionamento da língua falada, ouvida e escrita, além de constituir o âmbito apropriado para se estudar a interioridade da linguagem (gramática), permite analisar, de maneira crítica, a sua exterioridade (discurso). Nessa perspectiva, buscamos sondar o funcionamento de operações linguístico-discursivas no processo comunicativo e, sobretudo, sua conexão com outros sistemas semióticos vigentes, historica-mente situados (Silva, 2005, 2009).

Buscamos mostrar, neste estudo, que a mídia, enquanto instituição social, não é uma entidade que existe fora do discurso, uma vez que tanto as palavras quanto as imagens veiculadas em vários suportes posicionam os sujeitos en-volvidos no processo de produção publicitária, além de projetar representações sociais (Fairclough, 2003a; Halliday e Matthiessen, 2004). Um dos nossos objetivos operacionais é apontar a “interdiscursividade” e a “intergenericidade” no contexto midiático como forma de controle social.

Na “sociedade da informação” (Castells, 2001; Chouliaraki & Fairclough, 1999; Hardt & Negri, 2004), a linguagem passou a ocupar papel central nas produções econômicas e culturais. Para Fairclough (2003b: 188), a semiose contribuiu para a reestruturação do capitalismo e sua organização em nova

10

12 (1)

escala, facultada pelos avanços nas tecnologias da informação. Uma “economia baseada em conhecimento”, conforme sugere o autor, implica “uma economia baseada no discurso: o conhecimento se produz, circula e é consumido como os discursos”. Dessa forma, o discurso tem servido não só para organizar e controlar práticas de produção internas (por exemplo, relações interpessoais em empresas), mas também para sustentar e legitimar globalmente o próprio capitalismo tardio.

A concepção de linguagem como prática social situa o foco da ADC nas ordens do discurso. Explica Fairclough (2003a: 220) que “uma ordem do discur-so é uma combinação ou configuração particular de gêneros, discursos e estilos, que constituem o aspecto discursivo da rede de práticas sociais”.2 Conforme o autor, a relação linguagem-sociedade é dialética, sendo que o discurso –lingua-gem como prática social– é tanto constitutivo de outros momentos do social quanto constituído por esses outros momentos, quais sejam: ação/interação, mundo material, relações sociais e pessoas (com suas crenças, valores, histórias). Isso implica que discurso (em todos seus modos semióticos) é um modo de agir/interagir, uma prática material, um modo de se relacionar socialmente e um modo de formação de crenças, valores, desejos. Da mesma forma, ação/interação, mundo material, relações sociais e pessoas são partes constitutivas do discurso (Ramalho, 2010a; Resende & Ramalho, 2006; Resende, 2009).

Exemplificamos essa questão com o caso do “discurso da flexibilidade” apontado por Chouliaraki e Fairclough (1999), para os quais os meios de co-municação propagam uma representação particular da “flexibilização” (inovação tecnológica, diversificação da produção, ‘flexibilização’ de funções e horário de trabalho etc.), como algo positivo, desejável, ou seja, como uma espécie de solução para problemas econômicos. No entanto, essa é apenas uma repre-sentação particular, que favorece um grupo particular e seu discurso, utilizado como recurso simbólico para sustentar hegemonias.

Como destacam Chouliaraki e Fairclough (1999: 4), “uma importante característica das mudanças econômicas e culturais da modernidade tardia é que elas existem como discursos e também como processos que estão acon-tecendo fora do discurso, sendo que tais processos que estão acontecendo fora do discurso são substantivamente formados por esses discursos”.3 Nesse cenário, a ampla disponibilidade de informação no espaço e no tempo im-plica maior alcance de discursos orientados para o “controle” de condutas e práticas sociais (Fairclough, 2003a). As tecnologias de comunicação são a base das transformações econômicas e culturais, pois possibilitam a “re--estruturação” das relações entre diferentes campos da vida social (mudanças nas relações entre política, educação, mundo da vida e economia) assim como o “re-escalonamento” nas relações entre diferentes escalas (local, globais) da vida social. Tais mudanças sociais têm efeitos sobre mudanças discursivas e vice-versa.

11

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

Uma primeira mudança sociodiscursiva é a multimodalidade. Textos que conjugam diferentes modalidades semióticas (fotografias, diagramas, cores, desenhos, músicas, efeitos sonoros, vídeos) tornaram-se característicos da mo-dernidade tardia, como sugerem Chouliaraki & Fairclough (1999: 12). Para uma abordagem crítica, a multimodalidade também constitui potencial recurso simbólico para instauração, sustentação de hegemonias, o que nos remete a outro aspecto relevante das mudanças discursivas em curso: a mercantilização da linguagem.4 Como impacto da reorganização espacial e temporal das relações sociais, mas, sobretudo, da fluidez de fronteiras entre o sistema instrumental econômico e outros campos sociais não instrumentais, a semiose (linguagem em sentido amplo, abarcando os diversos modos semióticos supracitados) vem sofrendo um processo de “mercantilização”. Isso diz respeito ao reconhecimento da importância da linguagem para a sustentação de hegemonias e seu uso “ra-cionalizado”, ou seja, estrategicamente aplicado para “maximizar” os efeitos da semiose segundo a lógica da mercadoria. Ainda de acordo com as explicações dos dois autores, o conceito de design, que é amplamente aplicado a mercadorias contemporâneas, também se aplica à semiose, que se torna a matéria-prima de “produtos culturais semióticos”, como as publicidades. Em poucas palavras, sempre de acordo com os dois lingüistas, publicidades anunciam mercadorias, mas elas também podem ser consideradas como tipos de mercadoria que, por sua vez, são produzidos pelas indústrias (sem chaminés) do novo capitalismo.

A consciência da centralidade da linguagem nas relações de produção e consumo no novo capitalismo tem impulsionado a mercantilização da pró-pria semiose. E é nesse contexto que encontramos a origem dos denominados “produtos culturais semióticos” – como as publicidades – cada vez mais espe-cializados e eficientes do ponto de vista dos efeitos almejados (Marshall, 2003; Figueiredo 2009; Ramalho, 2009a, 2010b). A mercantilização da linguagem implica a difusão e a primazia da “estética”, facultadas pelos diversos recursos multimodais que circulam em nossas práticas sociais. Essas mudanças sociais e discursivas configuram hibridismos semióticos característicos da moderni-dade tardia. Embora reconheça que o hibridismo seja inerente a todos os usos sociais da linguagem, Fairclough (2003a) identifica o hibridismo como uma característica irredutível do complexo discurso moderno.

2. Bases teóricas da multimodalidade

De acordo com Kress e van Leeuwen (2001), todo discurso é multímodal. Como bem observa Pardo Abril (2008: 195), “tal afirmação implica o reco-nhecimento do entrelace dos diversos formatos e sistemas de signos envolvidos e atualizados (modos), recursos e mecanismos que tomam lugar no processo comunicativo, de cuja articulação procede a comunicação.”

Uma abordagem semiótica social para a multimodalidade, baseada em Halliday (1994), assume que todos os modos semióticos possuem recursos

12

12 (1)

específicos para realizar três funções comunicativas básicas: construir represen-tações da realidade (função ideacional); estabelecer relações sociais e interações (função interpessoal); organizar combinações de representações e interações em tipos de conjuntos chamados textos ou eventos comunicativos (função textual). Na “Gramática do Design Visual”, as metafunções ideacional, inter-pessoal e textual passam a ser denominadas por Kress & van Leeuwen (1996) de significados representacionais, interativos e composicionais, respectivamente. Trata-se de uma proposta que descreve modos culturalmente definidos de como imagens se articulam em composições visuais. O design visual como re-presentação, ligado à função ideacional, pode ser analisado segundo dois tipos de estrutura: narrativa e conceitual. Estruturas visuais que representam ações, eventos, processos de mudança, arranjos espaciais transitórios são narrativas.

O que caracteriza uma estrutura como narrativa é a presença de um vetor, uma linha imaginária, formada por corpos, braços, linha do olhar, instrumentos em ação, dentre outros, que sugere ações, eventos. O tipo de vetor, a quan-tidade e os tipos de participantes envolvidos definem os processos narrativos como: processos de ação, processos reacionais, processos verbais, processos mentais e processos de conversão. Nas estruturas conceituais, participantes não desempenham ações, mas são representados em termos de classe, significação, estrutura, ou seja, de seus traços e características essenciais. O modo como os participantes se articulam no texto visual dá origem a três tipos de estruturas conceituais: classificatórias, analíticas e simbólicas.

O design visual como troca de experiência, ligado a função interpessoal da linguagem, pode ser analisado com base nos tipos de contato visual, en-quadramento, perspectiva e modalidade, por exemplo. Associadas a textos verbais, ou mesmo sozinhas, imagens podem sugerir demandas em trocas de atividade, ou ofertas em trocas de conhecimento/informação. Como explicam os autores, na comunicação visual o tipo de interação depende da natureza do contato visual estabelecido entre os participantes representados, isto é, pessoas, lugares, e coisas, que são o assunto da comunicação, e os participantes intera-tivos, que participam da comunicação , ou seja, quem fala e ouve ou escreve e lê, produz as imagens ou as vê, o que inclui os leitores ou viewers. Nos casos em que participantes representados olham diretamente para o leitor, vetores formados pela linha dos olhos conectam os primeiros ao segundo, ou seja, com o leitor/viewer, enquanto participante interativo. Nessa configuração visual, o participante representado, de quem o vetor (linha do olhar) emana, dirige-se ao participante interativo e demanda algo dele.

Nos termos de Kress & van Leeuwen (1996: 122), ao usar a imagem para realizar alguma coisa com o leitor/viewer, “a mirada fixa do participante representado (bem como seu gesto, se for o caso) demanda alguma coisa do viewer, demanda que este entre em algum tipo de relação imaginária com ele ou ela”. 5 A troca estabelecida, nesse caso, é de atividade. Por outro lado, nas

13

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

configurações visuais em que o objeto do olhar não é o leitor, mas, sim, o participante representado, que é observado pelo viewer, não há contato direto entre os participantes representados e interativos. A troca é de conhecimento, por meio de ofertas, em que os participantes representados figuram como itens de informação, objetos de contemplação, como veremos mais adiante.

O enquadramento também estabelece relações específicas entre partici-pantes representados (em fotos, por exemplo) e interativos, no caso, leitores. Quanto menor a distância entre os participantes, maior a aproximação entre eles, ou seja, fechamento da diferença; quanto maior a distância, menor a proximidade entre os participantes, o que acentua diferenças entre um e outro. A perspectiva, por sua vez, pode ser mais objetiva, mostrando tudo o que existe na imagem, ou mais subjetiva, focalizando uma parte apenas da imagem como, por exemplo, só o rosto em fotos. Desse modo, também são estabelecidas diferentes relações de poder entre participantes: a perspectiva vertical acentua as diferenças, enquanto a perspectiva horizontal diminui as diferenças, criando simetria, empatia entre os participantes representados e os participantes interativos.

A modalidade também é um indicador de alta ou baixa afinidade entre os participantes representados e interativos. Nas imagens, podemos analisar marcadores de modalidade –como cores (saturação, diferenciação), detalha-mento–, bem como tipos de contextualização: modalidade abstrata, comum em textos científicos; modalidade naturalística, mais próxima do “real”; mo-dalidade tecnológica, como dos gráficos, e modalidade sensorial, em imagens que causam efeito de prazer ou desprazer no leitor.

Do ponto de vista da imagem como troca de experiência, temos a oferta de informação, ou seja, o/a leitor/a interativo/a não recebe uma demanda explícita, no entanto pode elaborá-la. A troca de informação constitui um traço discursivo que pode ser associado ao mundo da vida, em que, em prin-cípio, predomina a ação comunicativa, orientada mais para a compreensão do que para fins estratégicos (Habermas, 2002). Outro traço associado à vida privada pode ser apontado na modalidade sensorial, utilizada para construir o contexto de aconchego, potencialmente capaz de gerar sensação de prazer no/a leitor/a da publicidade. Esse tipo de modalidade estabelece alta afinidade e aproximação entre participantes representados e participantes interativos – os/as leitores, neste caso.

Por fim, o design visual como mensagem, ligado à função textual, pode ser analisado segundo o valor da informação, saliência e moldura. O valor da informação refere-se à localização dos elementos visuais nas diversas zonas da composição imagética – esquerda e direita, superior e inferior, centro e margem –, que lhes confere valores de informação específicos. A localização da informação à direita ou à esquerda, na leitura ocidental, tem valores distintos de significação. Os elementos posicionados à esquerda são representados como

14

12 (1)

“dado”, isto é, como informação já conhecida pelo leitor. Equivale ao “rema” da linguagem verbal. Os elementos posicionados à direita, por seu turno, são representados como “novo”, o que não é conhecido pelo leitor e para o qual se deve dar mais atenção. Corresponde ao “tema” da linguagem verbal.

Da mesma forma, a localização na parte superior da composição visual confere o valor de informação “ideal”, aquilo a que se aspira. Por outro lado, a localização na parte inferior confere o valor de informação “real”, aquilo que há de mais concreto, realista. Por fim, a disposição dos elementos visuais no “centro” confere a eles a condição de “núcleo da informação”, ao que os demais elementos, posicionados à “margem”, estão sujeitados. A saliência refere-se à diferenciação de um elemento participante com os demais (tamanho, cores, contrastes, etc). A moldura, por sua vez, separa elementos da composição e indica se eles pertencem ou não a um núcleo informativo, e isso é feito por meio de margens, linhas divisórias.

Na perspectiva crítica da ADC, todos esses aspectos semióticos devem ser estudados à luz de questões sociais, tendo em vista o hibridismo entre ordens de discurso (a faceta discursiva de redes de práticas sociais) em disputas mais amplas de poder. Por isso, a análise discursiva contempla as complexas interseções de diferentes formas e tipos de discurso, e inclui análise inter-discursiva, isto é, análise das maneiras como diferentes ordens do discurso são articuladas, combinadas, excluídas, no complexo de lutas hegemônicas. Esse tipo de análise permite problematizar potenciais efeitos ideológicos de (sentidos de) textos sobre relações sociais, ações e interações, conhecimentos, crenças, atitudes, bem como valores e identidades.

3. Momentos analíticos

O fenômeno da multimodalidade resulta da integração funcional de recursos linguístico-discursivos e recursos visuais com vistas ao alcance de sentido(s) entre participantes representados e interativos. Sempre voltado para situações de interação, esse entrelaçamento de palavra e imagem costuma gerar novas formas de representação e, o que mais cabe destacar, permite-nos identificar a interseção de gêneros textuais, bem como discursos impregnados de sentidos múltiplos.

Nesta seção, procuramos colocar em prática as bases teóricas discutidas anteriormente. Para tanto, utilizaremos três imagens (todas com participantes mulheres em diferentes representações imagéticas) para exemplificar possíveis abordagens críticas da multimodalidade, o que implica buscarmos ultrapassar a mera descrição da composição das imagens e avançarmos rumo à reflexão crítica sobre o papel das imagens combinadas com palavras na constituição de nossas relações sociais, de nossas identidades e representações sociais (Silva & Pardo Abril, 2010).

15

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

3.1. leituRa integRada de mateRial visual e texto veRbal: uma estRutuRa de suPeRfície iconicamente motivada

A primeira imagem combinada com texto verbal, selecionada para aná-lise, constitui uma peça publicitária criada por M&C Saatchi, Melbourne para o Australia Post.6

Texto 1 – Publicidade dos Correios australianos

Fonte: (http://www.adpunch.org/entry/australia-post-if-you-really-want-to-touch-some-one-send-them-a-letter/)

Observemos, no caso acima, a plasticidade e dinamicidade com que o gênero carta pessoal é trabalhado de maneira icônica aguçando a modalidade sensorial, com o propósito de evocar efeito de prazer, bem como despertar sensação de aconchego, no/a leitor/a. Trata-se de uma peça publicitária que integra um texto que, além de ativar os sentidos do/da leitor/a, por meio de uma modalidade sensorial, configura um evento comunicativo que constitui o próprio lugar da interação, conforme Koch (2006: 22).

16

12 (1)

Podemos afirmar que estamos diante de uma construção “inter-modal de sentidos”, o que é muito recorrente na publicidade.7 A propósito, Marcuschi (2008: 167) comenta que “a publicidade opera de maneira particularmente produtiva na subversão da ordem instituida para chamar a atenção do produto”. O texto em análise opera nesse sentido, uma vez que praticamente ‘encobre’ ou ‘dissimula’ (Thompson, 2002) a finalidade comercial, bem como o que é feito por meio da articulação de elementos semióticos que remetem à vida privada.

Entre os caminhos para uma reflexão analítica, destaca-se na atualidade uma variedade de ofertas de produtos no contexto da propaganda, cujas imagens verbais e não-verbais costumam ser deslocadas de seus padrões, tanto formais quanto funcionais, assim como dos tipos e dos gêneros tex-tuais esperados. Trata-se, aqui, do que Marcuschi (2008: 167) sugere como “intergenericidade”, ou seja, um gênero com a função de outro.

Os especializados processos estéticos de hibridização semiótica abar-cam não só a mescla de modos semióticos, mas também a articulação de diferentes ordens de discurso, isto é, de gêneros, discursos e estilos asso-ciados, em princípio, a distintos campos sociais, tais como o gênero carta pessoal –essencialmente característico da ordem do discurso interpessoal, do mundo da vida– e o gênero publicidade –associado à ordem do discurso publicitário, do sistema da economia. A aproximação e o rompimento de fronteiras entre esses dois campos e suas respectivas ordens do discurso não só sinalizam o uso especializado da semiose para obter fins estratégicos como também revelam a materialização textual desse hibridismo presente em outros momentos das práticas sociais: nas relações sociais, nas identida-des, nas representações sociais, nas formas de ação/interação, organizadas segundo a lógica da mercadoria.

No que diz respeito à composição visual, ao design como representação, identificamos uma estrutura visual narrativa, em que predomina a repre-sentação de um processo de ação bidirecional. A carta (o fundo com apelo sensorial) é metaforicamente personificada na imagem de um homem jovem que abraça suavemente a jovem mulher, potencial usuária/consumidora dos serviços dos Correios (Lakoff & Johnson, 2002).

Na imagem em questão, a bidirecionalidade da ação reveste-se de valor ideológico, na medida em que reforça o conceito de “carta” como uma troca íntima e pessoal. Tal significação é transferida para a própria entidade “Correios da Austrália”, conferindo-lhe qualidades associadas ao campo simbólico da proximidade, da afetividade e, inclusive, da compe-tência, entre outros.

No que diz respeito à imagem como mensagem, temos, acima, o “ide-o que diz respeito à imagem como mensagem, temos, acima, o “ide-al”, ou seja, aquilo a que se aspira – a aproximação física entre a mulher (potencial usuária dos serviços dos Correios) e o destinatário da carta –,

17

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

bem como o “real”, aquilo que há de mais concreto e realista, na ordem explícita direcionada ao/à leitor/a. Em termos de recursos interativos, podemos apontar também o que se denomina modalidade “boulética” ou “boulemaica”, uma vez que a imagem do abraço, reforçada pela mensagem escrita, sugere “o que é necessário ou possível com relação aos desejos de alguém” (Palmer, 1986; Lunguinho, 2010: 122). Trata-se, na realidade, de um recurso linguístico-discursivo enfatizando o sentido da imagem visual que, ao mesmo tempo reforça o sentido da mensagem como um todo.

Em português, como no inglês, uma dos recursos linguísticos de mo-dalidade pode aparecer configurado em uma oração condicional, tal como a mensagem da propaganda acima: “Se você realmente quer tocar alguém, envie-lhe uma carta” (If you really want to touch someone, send them a let-ter). Destacamos, nesse caso, uma modalidade epistêmica, voltada para o domínio das possibilidades e necessidades. Ainda em termos de categoria linguística, podemos identificar também uma modalidade telealógica, visto que o complexo oracional está orientado para um alvo (usuários/as do correio).

Observe-se que, nessa pequena mensagem escrita, a forma verbal [tocar] é revestida de duplo sentido: funciona tanto como processo material, voltado para o mundo físico (do fazer), quanto como processo mental, pertinente ao mundo da consciência (do sentir). De acordo com Marcuschi (2008: 30), um texto constitui “o resultado de operações comunicativas”. Trata-se de operações comunicativas que permitem inferir essa dualidade entre o mundo físico “real”, e a consciência, o “ideal”, como também entre a vida privada idealizada e as relações de consumo de mercadorias e serviços que hoje parecem ser a base da felicidade (Bauman, 2001; Canclini, 2006).

Com base nos estudos de Silva (2001), podemos identificar no Texto 1, em termos de relação entre imagem e palavra, uma espécie de “repetição complexa” de natureza parafrástica. Uma paráfrase envolve sempre variação na forma, mas com manutenção ou equivalência de sentido. Observe-se que a peça em análise estampa uma estrutura de superfície iconicamente motivada, que funciona como uma espécie de martiz (M), enquanto a oração condicional funciona como elemento repetido (R), o que imprime ênfase à mensagem transmitida. Isso reforça o propósito da propaganda que, no caso, é envolver e, sobretudo, persuadir o/a leitor/a a utilizar os serviços dos correios da Austrália.

Ainda sobre a organização da imagem como mensagem, é preciso obser-var a saliência conferida à consumidora (em potencial) por meio de cores e pelo contraste com a carta em preto e branco. Em termos acionais e repre-sentacionais, destaca-se, nessa peça publicitária, a interdiscursividade entre o discurso do mundo da vida e do sistema econômico, o que inclui a “inter-genericidade” entre carta pessoal e publicidade. Tal hibridização discursiva

18

12 (1)

obscurece relações assimétricas de poder entre leitor/a e consumidor/a, por dissimular a troca de atividades, ou seja, ocultar, mascarar a demanda para comprar/utilizar um serviço. Pesquisas do campo publicitário têm apontado a necessidade de alcançar o/a consumidor/a potencial cada vez mais “alfabetizado em publicidade” (Sampaio, 2003). Se a “ordem” tende a ser rejeitada, a oferta de informações pode receber menos rejeição do público-alvo.

Em termos identificacionais, é possível observar a construção de uma determinada identidade para o gênero mulher, cuja felicidade e plenitude se associariam à existência de um parceiro masculino e da qual deveria partir a iniciativa da aproximação física, muito embora o jovem seja representado na imagem como ator da ação de abraçar, e a jovem, como meta, quem recebe o abraço. Conforme Lakoff & Johnson (2002) e Eco (1997), temos na publicidade uma representação metafórica típica de anúncios: a relação metonímica de “parte pelo todo”.

Nessa perspectiva, a jovem (parte) é apresentada como representante de sua classe ou categoria, isto é, de “todas as jovens que podem/devem enviar cartas aos namorados” (todo). O sentido que se constrói é o de que se a jovem do anúncio, um modelo a se copiar, é feliz porque usa os serviços dos Correios, a leitora potencial, assim como todas mulheres representadas pela jovem, também pode alcançar a felicidade pelo consumo dos serviços dos Correios. Tais sentidos podem ser vistos como estratégia ideológica de unificação, por construírem simbolicamente uma forma de unidade que interliga indivíduos numa identidade coletiva, qual seja, a da mulher cuja felicidade está associada à existência de um parceiro e ao consumo de bens e serviços (Thompson, 2002; Ramalho, 2009b).

3.2. RePResentação naRRativa com PRocesso Reacional

Além dos processos acionais, Kress e van Leeuwen (1996) sugerem, na análise com base na gramática visual, alguns componentes específicos que envolvem outros tipos de processos e participantes. Os processos reacionais são constituídos por vetores formados pela linha do olhar. Nesse caso, ao invés de ator, existe um reator (aquele/a que olha) e, em lugar de uma meta, ocorre um fenômeno (aquele/a que é olhado/a). O texto multimodal apresentado a seguir permite-nos uma análise nesses termos.

19

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

Texto 2 – Cartaz de evento contra a violência

Fonte: Anúncio de um evento/campanha em Portugal (2008)

Cabe, aqui, ressaltar que o reator configura o participante que concretiza a ação de mirar (algo ou alguém), enquanto o/a participante figura como alguém que reage ao olhar, mais do que aquele/a que executa uma ação. Uma observação a mais se faz necessária. Parece que a potencialidade ideológica desse tipo de processo reside na forma como, a partir dele, relações de poder simbólico podem ser estabelecidas.

De início, a imagem nos permite abrir mais uma discussão analítica mes-clando as ideias de Marcuschi, com as trilhas metodológicas de análise nos parâmetros da gramática visual de Kress e van Leeuwen. Sugere Marcuschi (2005: 17) que “sanção e recompensa são dois aspectos que mostram como os gêneros são socialmente legitimados”. No texto como representação, temos uma estrutura visual narrativa em que predomina a representação de um processo reacional bidirecional. A imagem representa um desafio bidirecional, o que pode ser identificado pelos vetores, que marcamos com uma seta (amarela) para destacar a direção do olhar recíproco dos atores.

A imagem associada à palavra remete-nos a um esquema cognitivo com-plexo, uma vez que se tem um gênero textual (anúncio de um evento) ilustrado com um cena doméstica que, embora apresentada fora do enquadre comum,

20

12 (1)

traz uma intertextualidade com um ditado popular – “Em briga de marido e mulher ninguém mete a colher”. Trata-se de uma lexia memorizada, colhida no berço da oralidade, que nos remete a uma categoria culturalmente reco-nhecida em qualquer tempo e em qualquer lugar, característica do complexo discurso moderno, conforme Fairclough (2003a). Mas, resulta que, de acordo com Marcuschi (2005: 18), nosso conhecimento de gênero não se atrela tão somente a formas linguísticas, pois quando aprendemos um gênero, na reali-dade, aprendemos o que Miller (1984) denomina “uma forma de ação social”, como também o que, no dizer de Wittgenstein, pode ser apontado como “uma forma de vida”. A “ação social” privada, bem como sua ordem do discurso, são articuladas em um texto publicitário, como ocorre no Texto 1, mas, aqui, em um anúncio de apelo contra a violência doméstica.

Podemos aproximar o efeito legitimador dos ditados populares com o efeito de piadas, por exemplo. Conforme Thompson (2002), uma das estra-estra-tégicas típicas de construção simbólica, voltadas para legitimar relações de dominação, é a narrativização, ou seja, a reprodução de histórias, no curso de nossas vidas cotidianas, que legitimam relações de dominação com base no apelo a tradições e costumes, por exemplo. Podemos ver o ditado popular “Em briga de marido e mulher ninguém mete a colher” como uma dessas representações sociais que legitimam e autorizam a violência doméstica, atribuindo-lhe a condição de um problema particular, pertencente à esfera privada da vida social.

O texto verbal do cartaz subverte, portanto, essa legitimação. Aqui, o efeito de sentido é criativo e transformador, voltado para questionar consensos e apontar mudanças possíveis em relações assimétricas de gênero social. Na imagem, a mulher reage à imposição do homem, representado como mais alto e saliente. Ao contrário da imagem reconfortante anterior, o Texto 2 representa um cenário conflituoso, construído com base na representação reacional bidirecional, mas também em outros aspectos.

No que concerne à imagem como troca de experiência, temos novamente oferta de informação, em que os participantes são representados como itens de informação ao/à leitor/a, que sinalizam para uma realidade possível nas questões de gênero social. A perspectiva, por sua vez, é mais subjetiva do que objetiva, pois focaliza apenas uma parte da imagem, enfatizando o olhar desafiador entre os participantes, representados a uma distância média do/a leitor/a, o que cria distância e acentua diferenças de poder.

Por fim, no cartaz como mensagem, temos a pergunta inquietadora –Meto a colher!?– no espaço do “ideal”, a qual, conjugada com a imagem, contribui para criar o contexto de conflito e instabilidade. A representação da “colher” no centro da imagem –núcleo da informação– também corrobora o efeito de sentido de ruptura de práticas naturalizadas. Em termos acionais e representa-cionais, o cartaz, a exemplo do Texto 1, também articula elementos do privado e

21

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

do público, mas, ao contrário do primeiro texto, problematiza consensos sociais relacionados a questões de gênero social. Assim, em termos identificacionais, constrói uma identidade desafiadora para a mulher, que enfrenta preconcei-tos e busca mudanças. Este tipo de discurso contestatório também está em consonância com as preocupações críticas da ADC, que concebe discursos de resistência como recursos para superar relações assimétricas de poder, criando novas hegemonias. Tal qual a jovem do Texto 1, a mulher do Texto 2 também é identificada metonimicamente, mas como a parte representante de todas as mulheres que podem/devem reagir à violência doméstica.

3.3. RePResentação naRRativa: nem sansão, nem RecomPensa, aPenas disPuta

A foto apresentada a seguir sugere, em princípio, a existência de proxi-xistência de proxi-midade no contato, apesar da distância evidenciada pelos lugares ocupados, então, por cada um dos atores no cenário político brasileiro. A posição de ambos mostra um processo acional que pode ser interpretado como um desafio bidirecional. Vejamos.

Texto 3 – Candidatos Dilma e Serra

Em horário eleitoral, Dilma terá dez minutos e Serra sete

A candidata do Lula terá três minutos de vantagem no horário eleitoral

Fonte: Tribuna dos Municípios, Ed. 718, p.3 – Estado do Rio de Janeiro, 13 de agosto de 2010

A imagem remete-nos a uma associação de ideias que se coaduna com um contexto de situação recente no cenário brasileiro (disputa política en-tre dois presidenciáveis). A posição corporal e a linha dos olhares cruzados marcam um paralelismo por contraste, o que pode ser identificado entre o plano inferior da foto e o superior: nas mãos relaxadas e nos semblantes em alerta dos dois atores políticos, no caso, Dilma Roussef (eleita Presidenta do Brasil) e José Serra.

22

12 (1)

Quanto ao significado representacional (metafunção ideacional), pode--se apontar o predomínio de uma estrutura narrativa marcada pela reação transacional explicitada na foto, tanto na mirada cruzada, evidenciada na linha vetorial dos olhos (processo bidirecional), quanto na aproximação física. A imagem em questão permite interpretar nos olhares cruzados dos dois atores (em plena campanha em agosto de 2010) uma atitude de demanda no âmbito do significado interpessoal (metafunção interpesso-al), evocando pendores atitudinais de alerta e de desconfiança por parte de Dilma e Serra, embora a curvatura corporal de ambos implique uma espécie de mitigação de atitudes. Quanto à contextualização, podemos apontar uma modalidade naturalística, mais próxima do “real”, mas em perspectiva subjetiva, focalizando apenas uma parte da imagem, e não o cenário como um todo.

No nível do significado composicional (metafunção textual), no que concerne ao valor de informação, tem-se o dado –a disputa de dois candi-datos e o novo– a imagem de uma aparente polidez recíporoca. Em termos de enquadramento, pode-se apontar o modo de informalidade com que os atores sociais foram flagrados fora dos holofotes.

Por outro lado, a foto jornalística dos candidatos destaca uma pers-pectiva horizontal, o que diminuiria a diferença entre os dois (até então presidenciáveis) e favoreceria a ideia de simetria entre ambos, como também entre os candidatos e o/a leitor/a. Mas se levamos em conta o momento histórico-político, bem como o conteúdo das frases próximas à fotografia, podemos afirmar que o texto multimodal sugere interpretações ao leitor (viewer), ao mesmo tempo em que chama a atenção para uma cena que sugere um contraste do tipo: próximo x distante.

Entre os elementos mais salientes que definem o caminho dessa leitura analítica, destacam-se o olhar e a curvatura do corpo. Pode-se apontar um tipo de troca – oferta, ainda que o objeto do olhar não seja um leitor, mas, sim, o participante representado, que é observado pelo viewer. Deve-se ressaltar que não há contato direto entre os participantes representados e interativos. Trata-se de uma troca de conhecimento, por meio de ofertas, em que os participantes representados figuram como itens de informação direcionados a leitores/ras.

Eis, aqui, o poder do jornalismo de “construir realidades”, bem como as identidades dos candidatos e, o que mais caberia observar, o relativo poder de “controlar” decisões de caráter público, por meio de processos de “sugerência psíquica”. No caso da manchete –Em horário eleitoral, Dilma terá dez minutos e Serra sete– que encabeça a página do jornal, bem como do lide –A candidata do Lula terá três minutos de vantagem no horário elei-toral– disposto abaixo da foto dos dois candidatos, tem-se dois segmentos lingüísticos que, constituindo duas orações identificativas, sugerem uma

23

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

relação de simbolização entre identificados (Dilma, Serra e a candidata do Lula) e os respectivos identificadores depois do processo relacional (terá), dos componentes do próprio processo (Dilma e Serra), bem dos elementos circunstanciais de tempo (sete e dez minutos). Por outro lado, devemos chamar a atenção para o segmento linguístico “no horário eleitoral”. Mais que funcionar como um circunstancial temporal, a locução adverbial aparece repetida em posições estratégicas nos dois enunciados que acompanham a foto estampada na primeira página do suporte (Tribuna da Imprensa). Em estudos anteriores sobre o fenômeno da repetição em textos orais e escritos, Silva (2001) aponta o enquadramento como um dos traços funcionais da repetição de formas linguísticas que atuam no domínio da conexão. Resulta que esse fenômeno pode ser identificado também no texto multimodal em análise, uma vez que a locução adverbial de tempo, que aparece duas vezes (em horário eleitoral/ no horário eleitoral), funciona como uma espécie de moldura que, além de delimitar a foto, configura um comentário jornalístico de “pendor atitudinal”, sobretudo, somado a uma expressão nominal (a candidata de Lula), que funciona como um índice avaliativo.

A construção “inter-modal de sentidos” sugere que no Texto 3, di-ferentemente do Texto 2 –apesar da mesma estrutura narrativa reacional bidirecional–, a posição desafiadora atribuída à mulher não é avaliada positivamente pelo jornal. A representação dos participantes como itens de informação, a perspectiva subjetiva da foto na horizontal, fechando di-ferenças entre o que é noticiado e o/a leitor/a do jornal são elementos que ajudam a construir uma “realidade” parcial para o/a leitor/a. Uma repre-sentação em que o conflito tem como figura central a mulher, não aquela representada positivamente como quem rompe com preconceitos, mas, ao que tudo indica, aquela, representada negativamente, que tenta ocupar posições e desempenhar funções “inerentes ao homem”. O texto verbal fomenta essa construção de sentidos: o candidato homem é representado pelo sobrenome “Serra”, associado a tradição, ao passo que a candidata é representada apenas pelo primeiro nome “Dilma”, o que, de alguma forma, não a distingue das demais Dilmas do Brasil. A seleção lexical na designação A candidata do Lula também obscurece sua particularidade e capacidade de governar o Brasil, associando a identidade de Dilma Roussef à do Presidente da República à época, Luiz Inácio Lula da Silva.

Essa análise converge com algumas leituras da cobertura jornalística das eleições 2010 no Brasil, não só no que toca à cobertura do jornalismo impresso, mas também à cobertura televisiva dos debates, por exemplo. A “transparência das imagens”, defendida pela grande mídia, foi questionada no flagrante close-up no candidato José Serra no último debate transmitido pela Rede Globo (Ramalho, 2010c). Ilustramos com as seguintes imagens (quadro 1) captadas dos últimos segundos do debate, ocorrido em 29 de out. 2010:

24

12 (1)

Quadro 1

Candidata Dilma Roussef Candidato José Serra

1’30’’

1’50’’

2’00’’

Fonte: Youtube

O/a telespectador/a assistiu, nos últimos segundos do debate, a uma Dilma Roussef longínqua, distante, em perspectiva vertical, numa imagem de distanciamento e assimetria de poder com o telespectador. Ressalte-se, ainda, com a “sombra” do opositor ao fundo. Em outro extremo, “naquele momento em que os eleitores brasileiros já não teriam mais oportunidade de ouvir o que pensam os candidatos que pleiteiam a presidência da República”, nas palavras de William Bonner, Serra é enquadrado, durante todos os 30 segundos finais, em close-up, com fundo azul, em ângulo frontal, favorecendo uma imagem de proximidade, simetria, igualdade com o telespectador. Assim, não só oferecendo informações sobre sua proposta de programa de governo, como a candidata Dilma Roussef fora representada, mas demandando, olho-no-olho, o voto do/a telespectador/a (cf. Ramalho, 2010c).

25

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

Em termos acionais e representacionais, o Texto 3 constrói uma realidade de confronto entre a tradição e o rompimento, este avaliado mais negativa do que positivamente. Em termos identificacionais, constrói uma identidade desa-fiadora para a mulher, no entanto, mais como uma espécie de força “inimiga”, cuja existência está associada a um homem, seja o adversário José Serra ou até mesmo o Presidente Lula, à época, seu companheiro de luta (Woodward, 2000).

Considerações finais

Neste artigo, abordamos a multimodalidade –coexistência de diferentes modos semióticos em textos– desde uma perspectiva linguística crítica, conju-gada com estudos sociais críticos que concebem o hibridismo semiótico como uma característica significativa do complexo discurso moderno. Na primeira parte, apresentamos uma verticalização teórica sobre a triangulação discurso, imagem e texto verbal, com base, sobretudo, em Marcuschi (2008), Chouliaraki e Fairclough (1999), e Fairclough (2003a). Na segunda parte, aprofundamos a discussão sobre o tema da multimodalidade apresentando princípios da Gramática visual, de Kress & van Leeuwen (1996), fundamentada na LSF. Na terceira parte, analisamos, com base nos pressupostos teóricos discutidos, três “produtos culturais semióticos”: uma publicidade dos Correios australianos, de 2006 (Texto 1); um cartaz publicitário de um evento contra a violência doméstica, de Portugal, de 2008 (Texto 2), e uma foto, acompanhada de res-pectivos lide e manchete, do jornal brasileiro Tribuna dos Municípios, de 2010 (Texto 3). Também nos apoiamos em algumas imagens de um debate eleitoral, captadas da TV brasileira, para discutir aspectos da “interdiscursividade” e da “intergenericidade” no contexto midiático como forma de controle social.

Partindo do preceito dialético de que o social é materializado no discurso e que o discurso tem efeitos ideológicos sobre o social, ou seja, sobre relações sociais, ações/interações, conhecimentos, crenças, atitudes, valores, identidades, exploramos nos textos multimodais analisados sua potencialidade para construir representações sociais, sustentar ou desconstruir consensos, estabelecer relações mais ou menos assimétricas de poder e construir identidades femininas. A aná-lise do Texto 1 aponta para a interdiscursividade entre o discurso do mundo da vida/privado e do sistema econômico/público, incluindo a intergenericidade, como recurso “estético” que pode obscurecer relações assimétricas de poder entre leitor/a-consumidor/a, por dissimular a troca de atividades, ou seja, ocultar, mascarar a demanda para comprar/utilizar um serviço. Ao mesmo tempo, aponta a unificação de uma determinada identidade para a mulher, cuja felicidade e plenitude se associariam necessariamente à existência de um parceiro masculino que lhe dê conforto. O Texto 2, por sua vez, apresenta uma estética menos conservadora. Também articula elementos do privado e do público, mas, ao contrário do primeiro texto, problematiza consensos sociais relacionados a questões de gênero social. Assim, em termos identificacionais,

26

12 (1)

constrói, positivamente, uma identidade desafiadora para a mulher, que en-frenta preconceitos e busca mudanças. A mulher do Texto 2 é identificada metonimicamente como a parte representante de todas as mulheres que podem/devem reagir à violência doméstica. No Texto 3, destaca-se a representação multimodal de uma realidade de confronto entre a tradição e o novo cenário político brasileiro com uma potencial Presidenta da República. O “novo” aqui, a ruptura com o tradicional, parece ser avaliado negativamente, haja vista o esforço da construção de uma identidade fragilizada para a candidata, seja como “inimiga” da tradição política masculina, patriarcal, ou como submissa ao Lula, Presidente à época.

À guisa de conclusão, gostaríamos de destacar o seguinte: as análises interdiscursiva e interacional dos textos multimodais, realizadas desde uma perspectiva crítica, indicam a possibilidade tanto de sentidos sustentarem ações, representações e identidades problemáticas, ao gosto das instituições do capitalismo tardio, quanto de questionarem criativamente tais problemas sociodiscursivos. Trata-se, pois, de um dos objetivos da ADC: tecer explanações sobre efeitos causais, potenciais de sentidos de textos, no complexo de lutas hegemônicas da modernidade tardia.

notas

1 Mais que uma disciplina, a sigla ADC constitui a logomarca do Grupo de Estudos de Análise de Discurso Crítica, do qual formam parte as duas autoras em Brasília (DF).

2 Trad. livre de: “An order of discourse is a particular combination of genres, discourses and styles which constitutes the discoursal aspect of a network of social practices”.

3 Trad. livre de: “an important characteristic of the economic, social and cultural changes of late moderniy that they exist as discourse as well as processes that are taking place outside discourse are substantively shaped by these discourses”.

4 Trad. livre de: “commodification of language” . 5 Trad. livre de: “ the participant’s gaze (and gesture, if present) demands something

from the viewer, demands that the viewer enter into some kind of imaginary relation with him or her”.

6 As duas primeiras imagens aqui analisadas constituem parte do curso ministrado por Denize Elena G. da Silva, Flaviane Carvalho e Inês Conde, dentro da 7� Ofi -Denize Elena G. da Silva, Flaviane Carvalho e Inês Conde, dentro da 7� Ofi -, dentro da 7� Ofi -7� Ofi-cina de Trabalho sobre Linguística Sistémico-Funcional, na Faculdade de Letras da Universidade de Lisboa (PT), em junho de 2009.

7 Ao discutir a noção de multimodalidade com base em Lemke (2002:305), registra Mozdzenski (2008:81) que, “em semioses multimodais, os leitores constroem um sentido ‘inter-modal’, resultante da integração das contribuições que o significado (...) de cada uma das modalidades contribuintes traz para a rede ou para o conjunto total de significados”.

27

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

RefeRências bibliogRáficas

bauman, Z. (2001). Modernidade líquida. Trad. Plínio Dentzien. Rio de Janeiro: Jorge Zahar.

bRaga, d.b. (2004). ‘A comunicação interativa em ambiente hipermídia as van-tagens da hipermodalidade para o aprendizado no meio digital´, in L. A. Marcuschi e A. C. Xavier (orgs.) Hipertexto e gêneros digitais: novas formas de construção do sentido, pp. 144-162. Rio de Janeiro: Lucerna.

canclini, N.G. (2006). Consumidores e cidadãos: conflitos multiculturais da globa-lização. Trad. Maurício Santana Dias. Rio de Janeiro: UFRJ.

castells, M. (2001). O poder da identidade. Trad. Klauss B. Gerhardt. São Paulo: Paz e Terra.

chouliaRaKi, l. & faiRclough, n. (1999). Discourse in late modernity: rethinking Critical Discourse Analysis. Edingburgh: Edinburgh University.

eco, u. (1997). A estrutura ausente: introdução à pesquisa semiológica. Trad. Pérola de Carvalho. São Paulo: Perspectiva.

faiRclough, n. (2001). Discurso e mudança social. Trad. (Org.) Izabel Magalhães. Brasília: Universidade de Brasília.

faiRclough, N. (2003a). Analysing discourse: textual analysis for social research. London; New York: Routledge.

faiRclough, n. (2003b). ‘El análisis crítico del discurso como método para la investigación en ciencias sociales’, in R. Wodak e M. Meyer (Comps.) Métodos de Análisis Crítico del Discurso, pp. 179-203. Barcelona: Gedisa.

figueiRedo, d. (2009). ‘Linguagem e gênero social: contribuições da Análise Críti-ca do Discurso e da Linguística Sistêmico-Funcional’, DELTA, 25, 732-753.

habeRmas, J. (2002 [1985]). O discurso filosófico da modernidade. Trad. Luiz Sérgio Repa e Rodnei Nascimento. São Paulo: Martins Fontes.

halliday, M. A. K. (1994). Introduction to Functional Grammar. London: Edward Arnold.

halliday, m. a. K. & matthiessen, c. m. i. m. (2004). An Introduction to Functional Grammar. London: Hodder Arnold.

haRdt, m. & negRi, A. (2004). Império. Trad. Berilo Vargas. Rio de Janeiro: Record.

KRess, g. & van leeuwen, T. (1996). Reading Images: The grammar of Visual Design. London; New York: Routledge.

KRess, g. & van leeuwen, t. (2001). Multimodal Discourse. The Modes and Media of Contemporary Communication. Londres: Arnold.

Koch, i.v.g. (2006). ‘Linguística textual hoje: questões e perspectivas’, in D.E.G da Silva (org.) Língua, gramática e discurso, pp. 21-42. Goiânia: Cânone Editorial/ Grupo de Estudos de Linguagem do Centro-Oeste.

laKoff, g. & Johnson, m. (2002). Metáforas da vida cotidiana. Trad. (Coord.) Mara Sophia Zanotto. Campinas: Mercado de Letras; São Paulo: Educ.

lemKe, J. L. (2002). ‘Travels in hypermodality’, Visual Communication, SAGE Publications, 3, 299-325.

28

12 (1)

lunguinho, m. v. (2010). ‘Sobre a concordância modal em português’, Cadernos de Linguagem e Sociedade (Papers on language and society) 11(2): 117-141.

maRcuschi, l. A. (2005). ‘O papel da atividade discursiva no exercício do controle social’, Cadernos de Linguagem e Sociedade (Papers on language and society) 7, 7-34.

maRcuschi, l. A. (2008). Produção textual, análise de gêneros e compreensão. São Paulo: Parábola Editorial.

maRshall, l. (2003). O jornalismo na era da publicidade. São Paulo: Summus.milleR, c. (1984). ‘Genre as social action’, Quarterly Journal of Speech, 70,151-167.moZdZensKi, L. (2008). Multimodalidade e gênero textual: analisando criticamente

as cartilhas jurídicas. Apres. Angela Paiva Dionisio. Recife: Ed. Universitária da UFPE.

PalmeR, f. (1986). Mood and Modality. Cambridge: Cambridge University Press.PaRdo abRil, N. G. (2008). ¿Qué nos dicen? ¿Qué vemos? ¿Qué es ... pobreza? Análisis

crítico de los medios. Bogotá: IECO/ Antiquus Editores.Ramalho,v. (2009a). ‘Magra sem pesar no bolso: discurso e ideologia na pro-

paganda de medicamentos’, in D.E.G., M.C.D. Leal e M.C.N. Pacheco (Orgs.) Discurso em questão: representação, gênero, identidade, discriminação, pp. 189-200. Goiânia: Cânone.

Ramalho, v. (2009b). Análise crítica da publicidade: um estudo sobre anúncios de medicamento. Cadernos de Linguagem e Sociedade, 10 ( 2): 152-182.

Ramalho, V. (2010a). Análise de discurso crítica da publicidade: um estudo sobre a promoção de medicamentos no Brasil. Portugal/Covilhã: LabCom. Disponível em: http://www.livroslabcom.ubi.pt/sinopse/ramalho-analise-2010.html.

Ramalho, v. (2010b). ‘Tecnologias discursivas na propaganda de medicamentos’, Discurso & Sociedad, 4, 507-537. Disponível em: http://www.dissoc.org/ediciones/v04n03/DS4%283%29Ramalho.pdf.

Ramalho, v. (2010c). ‘Uma eleição construída por imagens’, Observatório da Imprensa, 614, 02 nov. Disponível em: http://www.observatoriodaimprensa.com.br/artigos.asp?cod=614FDS003.

Resende, v. M. (2009). Análise de discurso crítica e realismo crítico. Implicações interdisciplinares. Campinas: Pontes.

Resende, v. M. & Ramalho,V. (2006). Análise de Discurso Crítica. São Paulo: Contexto.

samPaio, R. (2003). Propaganda de A a Z. Rio de Janeiro: Elsevier.silva, d.E.G. (2001). A repetição em narrativas de adolescentes: do oral ao escrito.

Brasília: Universidade de Brasília/Plano Editora/Oficina Editorial/ Instituto de Letras-UnB.

silva, D.E.G. (org.) (2005). Nas instâncias do discurso: uma permeabilidade de fronteiras. Brasília: Editora Universidade de Brasília/Oficina Editorial do Instituto de Letras.

silva, D.E.G. (2009). ‘Representações discursivas da pobreza e gramática’, DEL-TA. Documentação de Estudos em Linguística Teórica e Aplicada (PUC/SP), v. 25, p. 721-731.

29

Elena Garcia Da Silva y Viviane Ramalho: Discurso, imagem e texto verbal: uma perspectiva crítica ...

silva, d.e.g. & PaRdo abRil, n. g. (2010). ‘Miradas cruzadas hacia la pobreza desde una perspectiva crítica transdisciplinaria’, Cadernos de Linguagem e Sociedade, 11 (1): 66-90.

silva, d.e.g. & Ramalho, V. (2008). ‘Reflexões para uma abordagem crítica dos gêneros discursivos’, ALED/Revista Latinoamericana de Estudios del Discurso, 8 (1): 19-40. Disponível em: http://www.portalaled.com/es/reflex%C3%B5es-para-uma-abordagem-r%C3%ADtica-dos-g%C3%AAneros-discursivos.

thomPson, J. B. (2002). Ideologia‘e cultura moderna: teoria social crítica na era dos meios de comunicação de massa. Trad. (coord.) P. A. Guareschi. Petrópolis: Vozes.

woodwaRd, K. (2000). ‘Identidade e diferença: uma introdução teórica e con-ceitual’, in T. T. da SILVA, (Org.). Identidade e diferença: a perspectiva dos estudos culturais, pp. 7-72. Petrópolis: Vozes.

deniZe elena gaRcia da silva é Professora e Pesquisadora Colaboradora na Universidade de Brasília, onde atua na área da Linguística, com pesquisas volta-das para ADC e LSF. Mestra em Linguística pela Universidade de Brasília (1991) e Doutora em Linguística Hispânica pela Universidad Nacional Autónoma de México (1996), realizou estágio pós-Doutoral (2009) na Faculdade de Letras da Universidade de Lisboa (FLUL), com atividades de pesquisa junto ao Instituto de Linguística Teórica e Computacional (ILTEC) de Portugal (2009). É fundadora do Grupo de Estudos de Linguagem do Centro-Oeste (GELCO) e líder do Grupo Brasileiro de Estudos de Discurso, Pobreza e Identidades. É membro da Associação Latinoamericana de Estudos do Discurso/ALED. Entre suas publicações, destacam-se o livro, Percursos filológicos: nas trilhas das línguas românicas (2008) e a coletânea Discurso em questão: representação, gênero, identidade e discriminação (2009), organizada em parceria com Leal e Pacheco, com o apoio da FAPDF.

Correo electrónico: denizelena@gmail.com

viviane Ramalho é Doutora em Linguística/Linguagem e Sociedade. Professora adjunta da Universidade de Brasília (Instituto de Letras/Depto. de Linguística, Português e Línguas Clássicas/Programa de Pós-Graduação em Linguística) e vice-coordenadora do Núcleo de Estudos de Linguagem e Sociedade da UnB (CEAM/NELiS). Desenvolve pesquisas sobre educação e saúde, com base na Análise de Discurso Crítica. É membro da Associação Latinoamericana de Estudos do Discurso/ALED. Publicou recentemente os livros Análise de Discurso Crítica (Resende, V. M. & Ramalho, V. São Paulo: Contexto, 2006); Análise de discurso crítica da publicidade: um estudo sobre a promoção de medicamentos no Brasil (Covilhã: LabCom, 2010) e Análise de discurso (para a) crítica: o texto como material de pesquisa (Ramalho, V. & Resende, V. M. Campinas: Pontes, 2011).

Correo electrónico: vivi@unb.br

31ALED 12 (1), pp. 31-55

ARTÍCULO

CÉLIA M. MAGALHÃESUniversidade Federal de Minas Gerais

VERA LÚCIA SANTIAGO ARAÚJOUniversidade Estadual do Ceará

Resumen. Las recientes investigaciones en el área de la traducción audiovisual y la accesibilidad se han concentrado en la necesidad de contar con audiodescripciones (AD) en museos, especialmente para que las personas ciegas y con disminución visual puedan disfrutar de las exhibiciones de obras de arte tales como las pinturas (De Coster & Mühleis, 2007; Holland, 2009). Los estudios multimodales han propuesto leer los museos como espacios multimodales y producir textos que integren signos visuales y verbales a fin de estimular la sensibilidad del público (Hofinger & Ventola, 2004; Ravelli, 2006). Lo primero no proporciona una metodología sistemática para la lectura y escritura de obras de arte mientras que lo secundo no incluye a las personas ciegas o con disminución visual que visitan los museos. Este trabajo es parte de una investigación en curso que considera que la AD es una forma de traducción inter-semiótica y que el audiodescriptor es un mediador en el proceso de transformar lo visual al lenguaje verbal para que sea escuchado por una audiencia de personas ciegas. Su objetivo es proporcionar una metodología para la escritura de audiodescripciones para redactar las audio guías de los museos apoyadas en la lectura multimodal de las imágenes. Se basa, por un lado, en investigaciones previas sobre audiodescripciones para museos y, por el otro, en estudios multimodales dirigidos a museos. El primer paso de la metodología propuesta combina una lectura basada en los recursos semió-ticos de la función modal (O’Toole, 1994) y el significado interaccional (Kress & van Leeuwen, 1996) con criterio para la escritura de la AD (De Coster & Mühleis, 2007). Este trabajo presenta el procedimiento metodológico diseñado a través de la AD de Las Meninas, de Diego Velázquez.

Palabras clave: traducción audiovisual, audiodescripción, multimodalidad en museos.

Resumo. A pesquisa recente em tradução audiovisual e acessibilidade tem enfocado a necessidade de audiodescrição (AD) em museus, para que deficientes visuais apreciem obras de artes tais como as pinturas (De Coster & Mühleis, 2007; Holland, 2009). Os estudos em multimodalidade, por sua vez, têm proposto leituras de museus como espaços multimodais e textos escritos em museus que integram signos verbais e visuais para estimular a sensibilidade do público (Hofinger & Ventola, 2004; Ravelli, 2006). Os trabalhos sobre AD não fornecem uma metodologia sistematizada para a leitura e escrita de obras de arte, enquanto os estudos da multimodalidade não incluem os deficientes visuais como parte do seu público. Este artigo reporta um trabalho em an-damento que tem como objetivo preencher as lacunas apontadas. Toma-se a AD como forma de tradução e o audiodescritor como mediador no processo de transformação da

Metodologia para elaboração de audiodescrições para museus baseada na semiótica social e

multimodalidade: introdução teórica e prática1

Recibido: 15 de marzo de 2012 • Aceptado: 22 de junio de 2012.

32

12 (1)

linguagem das obras de arte em texto a ser ouvido por deficientes visuais. O objetivo é criar uma metodologia para a elaboração de roteiros de AD para deficientes visuais com subsídios de leituras multimodais de pinturas, a serem usados em áudio-guias de museus. Tem-se como base pesquisas prévias em tradução audiovisual e audiodescri-ção em museus, por um lado, e estudos de multimodalidade em museus, por outro. O primeiro passo da metodologia é a combinação de critérios para a elaboração de roteiros de AD com recursos semióticos da função multimodal (O’Toole, 1994) e do significado interativo (Kress & van Leeuwen, 1996). O artigo apresenta o primeiro procedimento metodológico proposto por meio da audiodescrição de “Las Meninas”, de Diego Velazquez.

Palavras-chave: tradução audiovisual, audiodescrição, multimodalidade em museus.

Abstract. Recent research in audiovisual translation and accessibility has focused on the need of audiodescriptions (AD) in museums, especially for the appreciation of displayed art such as paintings by the blind and the visually impaired (De Coster & Mühleis, 2007; Holland, 2009). Studies in multimodality have proposed readings of museums as multimodal spaces and the writing of museum texts which integrate verbal and visual signs in order to stimulate the audience’s sensibility (Höfinger & Ventola, 2004; Ravelli, 2006). The former does not provide a systematic methodology for the reading and writing of art works whilst the latter does not include the blind and the visually impaired in museum audiences. This paper reports on an ongoing work which takes AD as a form of intersemiotic translation and the audiodescriber as a mediator in the process of transforming visual into verbal language to be listened to by a blind audience. It aims at a methodology for the writing of audiodescriptions to be used in museum audio guides with the support of multimodal readings of images in museums. It is based on previous research on audiodescription for museums, on the one hand, and on previous research on multimodality studies addressed to museums, on the other. The first steps in the methodology proposed combine a reading based on the semiotic resources of the modal function (O’Toole, 1994) and the interactive meaning (Kress & van Leeuwen, 1996) with criteria for AD writing (De Coster & Mühleis, 2007). The paper will present the methodological procedure designed through an AD of Las Meninas, by Diego Velazquez.

Key words: audiovisual translation, audiodescription, multimodality in museums.

Introdução

A acessibilidade de deficientes visuais a produtos culturais tem sido preocu-pação no âmbito da tradução audiovisual na última década. Uma série de pesquisas focaliza a legendagem para surdos e ensurdecidos e a audiodescrição para deficientes visuais de filmes e programas de TV. No âmbito dos trabalhos sobre audiodescrição, o interesse pelo acesso de deficientes visuais a museus está apenas iniciando. De Coster & Mühleis (2007) e Holland (2009) podem ser considerados pioneiros ao abordarem o tema. Por outro lado, a preocu-pação com a sensibilização de audiências para uma apreciação adequada das obras de artes em museus tem sido tema de pesquisas no âmbito dos estudos da multimodalidade.

33

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

Hofinger & Ventola (2004), dentre outros, dedicam-se a uma leitura de museus como espaços multimodais de produção de significados, estendendo suas considerações para a elaboração de textos de áudio-guias que integrem a linguagem verbal com a visual. Tendo em mente a contribuição que esses trabalhos oferecem à comunidade acadêmica, observa-se, no entanto, que os primeiros não fazem uso de parâmetros sistematizados de leitura de imagens em sua proposta, enquanto os últimos não incluem deficientes visuais nas audiências que, argumentam, podem ser sensibilizadas para a apreciação das obras de arte com o uso de textos mais adequados nos áudio-guias.

Tais limitações podem ser superadas com o estabelecimento de uma metodologia para elaboração de audiodescrições na interface da tradução audiovisual com os estudos da multimodalidade. Neste artigo, o objetivo é introduzir tal metodologia. Para tanto, o artigo está dividido em quatro seções, além desta introdução. Na segunda, abordam-se estudos sobre acessibilidade e audiodescrição no escopo da tradução audiovisual. Na terceira, levam-se em consideração estudos da semiótica social e da multimodalidade responsáveis por modelos de leitura de imagens, além de pesquisas recentes de abordagem a museus como espaços multimodais. Na quarta, introduzem-se procedimentos iniciais de uma metodologia baseada numa interface da tradução audiovisual e da multimodalidade. Na quinta e última seção, fazem-se considerações sobre as contribuições da proposta e aponta-se para possíveis temas de pesquisas futuras.

Acessibilidade e audiodescrição (AD)

Existe atualmente uma tendência mundial em promover ações que facilitem o acesso de pessoas com deficiência sensorial, física ou cognitiva a produtos culturais e esportivos. No Brasil, até agora, existe legislação governamental para a implantação da audiodescrição, definida a seguir, nos canais de televisão. Existem, ainda, iniciativas das universidades e de alguns setores da sociedade que tentam garantir esse acesso também ao teatro, ao cinema, aos DVDs e aos museus.

De Coster e Mülheis (2007: 189) definem a AD como a tradução em palavras das impressões visuais de um objeto, seja ele um filme, uma obra de arte, uma peça de teatro, um espetáculo de dança ou um evento esportivo. O recurso tem o objetivo de tornar esses produtos acessíveis a pessoas com deficiência visual. A pesquisa em AD está inserida no campo dos estudos de tradução porque se enquadra na classificação de Jakobson (1995) que recon-hece três tipos de tradução: a interlinguística ou tradução propriamente dita (texto de partida e chegada em línguas diferentes); a intralinguística ou refor-mulação (texto de partida e chegada na mesma língua); e a intersemiótica ou transmutação (texto de partida e chegada em meios semióticos diferentes, do visual para o verbal ou vice-versa). Então, mais especificamente, a AD é uma tradução intersemiótica porque transmuta as imagens em palavras. A inclusão

34

12 (1)

da AD como tradução é importante para o seu reconhecimento como trabalho intelectual. O governo brasileiro, no entanto, não reconhece esse status quando define a AD como “locução” na Portaria 3102, lei que regulamenta a acessibi-lidade audiovisual do país:

Audiodescrição: corresponde a uma locução, em língua portuguesa, sobreposta ao som original do programa, destinada a descrever imagens, sons, textos e demais informações que não poderiam ser percebidos ou compreendidos por pessoas com deficiência visual. [grifo nosso]

Até onde se sabe, a modalidade de AD mais pesquisada é aquela usada em tradução de filmes e programas de TV. Neste sentido, podem-se citar os relatos de experiência de audiodescritores sobre sua prática profissional, tais como Benecke (2004), Snyder (2005), Orero (2007) e Matamala (2007). Além disso, há os trabalhos de Franco (2007) e Silva (2009), no Brasil, e Ballester (2007), Payá (2007) e Jiménez Hurtado (2007), na Espanha.

Franco (2007: 171) demonstrou, por meio de pesquisa exploratória3, que a presença do recurso facilitou a recepção de deficientes visuais (DVs) de um filme de curta metragem. O filme foi exibido para 20 DVs, 10 assistiram ao curta com AD e 10 assistiram ao mesmo curta sem AD. Os resultados indicaram que o primeiro grupo teve melhor desempenho nas respostas a um questionário sobre o conteúdo do curta, com 90% de acertos, contra 40% do segundo grupo. Silva (2009) realizou outra pesquisa exploratória, enfocando a recepção de crianças a desenhos animados da Turma da Mônica com o intuito de delinear parâmetros para a elaboração de roteiros de filmes infantis. Os resultados obtidos demonstraram que o uso da audiodescrição não só facilitou o entendimento dos desenhos, como tornou a experiência dos espectadores mais prazerosa e educativa. Os resultados sugeriram também a preferência das crianças por um estilo de narração com uma maior inflexão de voz, em oposição à narração mais monocórdia ou neutra, preconizada por alguns audiodescritores (Benecke, 2004). A participação do narrador, por meio de uma narração mais interpretativa, foi considerada fundamental pelas crianças.

Um grupo de pesquisadoras espanholas (Jiménez Hurtado, 2007; Ballester, 2007; e Payá, 2007) analisou um corpus de mais 210 filmes audiodescritos em espanhol. Cada uma delas examinou aspectos diferentes relacionados à AD. Payá (2007: 88-89) comparou dois tipos de roteiro: o do filme e o da AD. A autora fez uma análise do filme Pulp Fiction de Quentin Tarantino (1994). Ela demonstrou que os dois roteiros eram diferentes, porque ambos possuíam objetivos distintos mesmo quando focalizavam a mesma cena. Ballester (2007: 137) apontou estratégias para caracterizar os personagens de uma AD. Segundo a autora, os personagens deveriam ser descritos à medida que apareciam na tela. Ela frisou também que essa descrição deveria ser feita ao longo do filme, já que, muitas vezes, os tempos sem fala que poderiam ser preenchidos com a AD

35

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

seriam pequenos. Jiménez Hurtado (2007) investigou as palavras e a estrutura oracional mais frequentes, além de propor parâmetros para a análise de roteiros de AD de filmes e programas de TV. Segundo a autora, a AD de filme deveria ter inserções, prioritariamente, entre as falas de uma produção audiovisual, observando a descrição de elementos visuais verbais (créditos iniciais e finais, legendas e letreiros) e não verbais (personagens, ambientação, localização temporal e espacial e ações). Por meio dos resultados da análise textual de um corpus de ADs usando o Wordsmith Tools, a autora derrubou dois mitos dentro da prática da audiodescrição. O primeiro foi o do uso das palavras “olhe” e “veja” (Jiménez Hurtado, 2007: 74), consideradas politicamente incorretas em muitas diretrizes de AD. Ao procurar pelas palavras mais frequentes, deparou-se justamente com essas duas. Depois das preposições e dos artigos, elas foram as mais utilizadas pelos audiodescritores. O segundo mito derrubado foi o de que não se deve colocar sua interpretação na AD (Benecke, 2004). A estrutura oracional que mais apareceu (30% dos casos) foi SUJEITO – PREDICADO – PREDICATIVO: ALGUÉM SORRI EMOCIONADO. O predicativo nesse tipo de construção implicava em interpretação. A descrição era feita a partir de uma visão subjetiva (emocionado) da representação oferecida pelo verbo principal (sorri) (Jiménez Hurtado, 2007: 77).

Os resultados apresentados por Jiménez Hurtado são corroborados por Holland (2009), que em 2002 realizou três estudos de caso, no âmbito do projeto Talking Images (Imagens que falam), envolvendo a audiodescrição de obras de arte. O objetivo foi examinar se a audiodescrição de uma obra de arte deveria adotar ou não a diretriz da não interpretação. Para isso foram feitas duas versões de AD para o quadro do artista abstracionista Ben Nicholson intitulado Ramparts, um óleo sobre placa entalhada de 1968. A primeira se concentrava nas formas do quadro, tentando ser o máximo possível não interpretativa. A segunda permitia certo grau de interpretação. Por exemplo, as cores eram descritas pelas qualidades táteis, as quais refletiam o processo usado pelo artista para produzir a peça. Então “acima e abaixo, estão áreas brancas”, transformava-se em “áreas brancas prateadas, arranhadas e polidas criam uma superfície desigual, como a neve caindo no gelo sujo” (Holland, 2009: 180-181).

A segunda descrição produziu uma narrativa que fazia referência ao mundo exterior à obra de arte, na tentativa de capturar a dinâmica do trabalho artístico (Holland, 2009: 182). Segundo Holland, o grupo de DVs que participou do experimento com a segunda AD se beneficiou muito mais da descrição do que o primeiro, porque se sentiu conectado com a obra. Para o autor, toda descrição deveria trabalhar bastante os valores táteis na audiodescrição de uma obra de arte, porque, segundo psicólogos, os sentidos são interdependentes. Por exemplo, as experiências das pessoas com o tato são afetadas pela visão e pela audição. A interpretação é fundamental para que o deficiente visual tenha a experiência de apreciar uma obra de arte. Para isso, é preciso muito mais do que descrição dos elementos que podem ser capturados pela visão.

36

12 (1)

De Coster e Mülheis (2007: 191-192) também concordam com Holland, já que no seu relato sobre a experiência de realizarem audiodescrição em museu professam que uma obra de arte deve ser audiodescrita levando em conta dois tipos de perspectivas, uma que descreve os sinais claros, e a outra, os sinais ambivalentes. Os sinais claros são as informações relacionadas à descrição dependente do canal visual. Os sinais ambivalentes são aqueles semelhantes aos descritos por Holland, podendo se referir a sensações que vão além das impressões visuais, incorporando experiências que envolvem outros campos sensoriais como o tato e a audição. Para exemplificar o seu modo de audio-descrever, os autores deram exemplos de audiodescrições de algumas obras de arte. Para o quadro The Region of Arnheim (1962), de René Magritte, eles propuseram, em primeiro lugar, uma abordagem sobre os sinais claros. Nesta fase, o audiodescritor daria informações sobre as dimensões da obra, juntando suas mãos às do DV, para que ele tivesse ideia, tanto da altura, quanto da largura do quadro. Em seguida, começou a descrição:

O quadro de Magritte está baseado em uma forma geométrica extremamente clara: na parte de baixo, uma parede de pedras perfeitamente horizontal é mos-trada. Nessa parede, exatamente no meio, há um ninho contendo três ovos. Se você imaginar uma linha vertical no meio do quadro e subir em direção ao topo a partir do ninho, pode-se ver a cabeça de um pássaro, o que na verdade é parte de uma cadeia de montanhas. Acima da cabeça do pássaro, temos uma meia lua, que se assemelha à forma meio arredondada que podemos fazer com nossa mão direita. (De Coster e Mülheis, 2007: 195)

O principal sinal ambivalente seria a cabeça do pássaro. A maioria dos videntes4 associaria o pássaro a uma águia ou um falcão, porque, para eles, seriam pássaros que vivem nas montanhas. Se os mesmos tivessem levado em conta somente a questão visual, teriam percebido que se trata de um pombo. O que acontece é que os visitantes seguem uma ideia e começam a acreditar que realmente viram essa ideia. Ao criar tal realidade, Magritte proporcionaria uma reflexão especial sobre pensamento e visão. Outras questões ambivalentes seriam o título absurdo, a relação do pássaro de pedra com o ninho e o impacto surrealista do quadro.

O modelo de De Coster e Mülheis (2007), que servirá de base para a construção da presente proposta de AD de obras de arte, está calcado, princi-palmente, nos seguintes parâmetros: 1) descrição das dimensões, da estrutura espacial e dos sinais claros; 2) descrição da experiência intersensorial do DV, ou seja, narração das impressões visuais que podem ser comparadas às impressões táteis e auditivas; 3) descrição dos significados dos sinais ambivalentes, os quais não podem ser obtidos nem pelas impressões visuais, nem pelas intersensoriais.

Cabe ressaltar que certo grau de avaliação ou de ponto de vista do(a) audiodescritor(a) como narrador(a) também será levado em consideração na referida proposta. Os conceitos de gêneros textuais descritivos e narrativos5

37

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

estão presentes, explicitamente ou não, nos textos dos autores investigados, e envolvem avaliação e ponto de vista. Por exemplo, Jiménez-Hurtado (2007: 59) adota o conceito de Bordwell, teórico dos estudos fílmicos, de narrativa como “história que incorpora a ação como uma cadeia cronológica de causa e efeito dos acontecimentos que ocorrem em um determinado tempo e espaço” (Bordwell, 1996: 49). Salway (2007: 152) considera a narrativa como cadeias de eventos, interrelacionados segundo a ideia de causa e efeito, em um deter-minado período de tempo. Já De Coster & Mühleis (2007: 192) definem a narrativa de modo mais frouxo, como todos os aspectos da obra de arte que podem ser traduzidos em palavras. Como se pode ver, a questão de avaliação, interpretação e ponto de vista na narrativa é um aspecto que demanda inves-tigação detalhada, ao qual será dedicada atenção em futuras pesquisas.

Na seção seguinte, aborda-se a contribuição da semiótica social e dos estu-dos da multimodalidade para a leitura de museus como espaços multimodais de construção de significados.

Semiótica social e multimodalidade

Na revisão dos trabalhos sobre AD, em especial aqueles que abordaram o uso de AD para acesso de DVs à apreciação de obras de arte em museus, constatou-se que, por mais que sejam pioneiros na pesquisa sobre o tema, apresentam parâmetros que não oferecem uma orientação sistematizada a ser seguida por audiodescritores na elaboração de roteiros de AD. Para esta orien-tação, argumenta-se neste trabalho que uma interface da tradução audiovisual com a abordagem da semiótica social aos textos multimodais é crucial. Para a construção dessa interface, faz-se necessária uma revisão de trabalhos nesta perspectiva.

A semiótica social é entendida como o estudo dos processos e efeitos da produção, recepção e circulação dos significados em todas as suas formas, utilizados por todos os tipos de agentes em situações de comunicação diversas (Hodge e Kress, 1988). A multimodalidade é, segundo Kress & van Leeuwen (2001: 20) “o uso de vários modos semióticos no design de um produto ou evento semiótico, junto com a maneira particular em que esses modos são combinados”.

Os princípios básicos da abordagem da semiótica social à multimodalidade podem ser assim descritos: os modos semióticos têm recursos específicos para que se possam atingir as três funções comunicativas básicas, a ideacional, a interpessoal e a textual (Halliday, 1978); o foco deve ser o estudo sistemático dos recursos semióticos e a representação desses recursos como redes de siste-mas. A Figura 1 representa as funções hallidayanas da linguagem verbal e os sistemas elaborados a partir das três funções intergradas por O’Toole (1994) e Kress & van Leeuwen (1996) para a linguagem visual:

38

12 (1)

Figura 1. As funções da linguagem verbal e visual

Nesta perspectiva de semiótica social, O’Toole (1994) pode ser conside-rado como uma das propostas pioneiras de sistemas da linguagem da arte em exibição, mais especificamente de pinturas e esculturas. A proposta é de uma linguagem que busca relacionar o impacto da obra de arte com o mundo so-cial em que ela foi produzida e o mundo social em que é vista, dentre outros aspectos. O trabalho sugere um roteiro de leitura de obras de arte a partir do uso da linguagem referente aos recursos semióticos envolvidos na produção artística. Buscam-se, para este fim, os significados representacional, modal e composicional das imagens.

O’Toole identifica uma escala de cinco unidades que compõem uma ima-gem: Escola/Gênero, Obra, Episódio, Figura e Membro, oferecendo um mapa da linguagem artística em que os sistemas destas unidades podem ser usados em conjunto ou separadamente para se elaborar uma interpretação consubs-tanciada da obra. Para cada uma dessas unidades, são apresentados os recursos e significados semióticos que poderiam ser ativados. Cada sistema relacionado a cada uma das funções tem entradas que representam instanciações prováveis dentro do potencial de significado da linguagem visual. Dessa forma, todas ou algumas das unidades da escala podem ser usadas para a análise, e a sugestão é que esta se inicie pela função modal para se entender como uma obra atrai o interesse do espectador. Em seguida, a função representacional das imagens, ou seja, o que estas representam por meio de cenas e de narrativas, pode ser abordada e, finalmente, a organização e relação das funções modal e represen-tacional podem ser vistas como um todo textual coerente por meio da função composicional. O’Toole (1994) aponta que o que se exibe no texto visual da pintura controla consideravelmente as análises, descrições e avaliações, acres-centando que o tipo de análise proposta por ele requer, ainda, o engajamento com o conhecimento da obra em si. O Quadro 1, abaixo, reproduz o mapa da linguagem artística de O’Toole (1994):

39

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

Quadro 1 – Funções e sistemas da linguagem visual. Tradução de O’Toole 1994: 24

FUNÇÕESUNIDADES

REPRESENTACIONAL MODAL COMPOSICIONAL

Escola/Gênero

Temas típicos Orientação para realidade e estilo

Por ex., barroco, cubismo, instalação

Impressionismo – Expressionismo – Surrealismo – Arte Op – Arte Pop – Arte performática

Obra/Pintura

Ações, eventos Agentes, pacientes, metas Cenas, cenário, características Retratos, modelos

Foco: Perspectiva Claridade Luz Cor Escala Olhar: Sua função Caminhos Ritmos Intermediários

EnquadreModalidade: Fantasia/ Ironia Autenticidade Simbolismo OmissãoIntertextuali-dade

Gestalt: Enquadre Horizontais Verticais Diagonais Proporção Linha Ritmo GeométricoCoesão de cor

Episódio Grupos e sub-ações, cenas e retratos Sequências de lados Interação de ações

Da escala para o todo Da centralidade para o todo Proeminência relativa Interação de modalidades

Posição relativa na Gestalt, no episódio e relação das duas Alinhamento Coerência Interação de formas relacionadas

Figura Personagem Objeto Ato Posição Postura Gesto

Caracterização Relação com o observador Olhar Gesto Contraste e conflito: Cor, Escala, Luz, Linha

Posição relativa na Gestalt, no episódio e relação das duas Paralelismo Oposição Subenquadre

Membro Formas físicas básicas: Partes do corpo Objetos Formas naturais Componentes

Estilização Atenuação Claro-escuro Sinédoque Ironia

Coesão: Referência Paralelismo Contraste Ritmo

Kress e van Leeuwen (1996, publicado pela primeira vez em 1992), assim como O’Toole (1994), são pioneiros ao apresentar uma proposta de gramática do design visual, orientada para o estudo da comunicação visual nas culturas ocidentais, com enfoque na imagem como modo semiótico cada vez mais

40

12 (1)

preponderante nos textos. Como transformação das metafunções hallidayanas da linguagem, são apresentadas como funções do design visual os significados representacionais, os interativos e os composicionais. Os significados repre-sentacionais podem ser Narrativos ou Conceituais e pretendem construir a experiência do mundo exterior e interior, por meio da representação da ação social (sistema de significados narrativos) e dos construtos sociais (sistema de significados conceituais) nas imagens. Os significados interativos se realizam por meio dos sistemas de Atitude, Distância Social e Contato; para compreender sua realização faz-se necessário lançar mão do sistema do olhar e da noção de perspectiva. Os significados composicionais se realizam por meio do Valor Informacional, da Saliência e do Enquadre. Para cada um dos significados são apresentadas as redes de sistemas com as categorias pertinentes de análise.

Vale aqui uma digressão para observar que as estruturas narrativas cons-tituem um ponto de entrada nos sistemas do significado representacional de Kress & van Leeuwen (1996). Narrativa, no contexto dos estudos multimodais, é definida, por exemplo, por Jewitt & Oyama (2001: 141), como a caracteri-zação de cenas pela presença de um vetor, ou seja, uma linha, frequentemente diagonal, que conecta participantes nas imagens. A narrativa é, portanto, um conceito crucial para a leitura e descrição de imagens, como é para a elaboração de ADs.

Em conformidade com a sugestão de O’Toole (1994) de que o ponto ideal de partida para a análise da imagem é a função modal, a Figura 2, a seguir, apresenta os sistemas do significado interativo, conforme Kress & van Leeuwen (1996):

Figura 2. Os significados interativos. Tradução de Kress & van Leeuwen (1996: 154)

41

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

A Figura 2, acima, representa os três sistemas dos significados interativos: o sistema do contato, estabelecido pelo sistema do olhar, que permite duas realizações, Demanda, quando há interação entre os participantes representa-do e interativo por meio do olhar e Oferta quando não há essa demanda. O sistema da Distância Social, baseado representação conforme o plano usado na fotografia, plano fechado (close up), plano médio (da cabeça até a cintura) e plano aberto (tomada de corpo inteiro), permite representar uma distância íntima (plano fechado), social (plano médio) e impessoal (plano aberto). O sistema de Atitude leva em conta a perspectiva e pode representar subjetivi-dade e objetividade. No primeiro caso, na perspectiva horizontal o ângulo de representação dos participantes representados pode ser frontal, construindo envolvimento entre esses participantes e os interativos, ou pode ser oblíquo, construindo distanciamento entre os participantes.

Já na perspectiva vertical, as construções são de poder. Se o participante representado está no nível do olhar do participante interativo, há igualdade de poder entre eles; se seu ângulo de representação é alto, o participante re-presentado tem poder sobre o interativo e se o ângulo é baixo, o participante interativo tem poder sobre o representado. O Quadro 2, abaixo, apresenta de forma resumida essas prováveis realizações dos significados dos sistemas:

Quadro 2. Realizações dos significados interativos, baseado em Kress & van Leeuwen (1996: 154)

Realizações

Demanda Olhar para o observador

Oferta Ausência de olhar para o observador

Íntimo/pessoal Plano fechado (cabeça e ombros ou menos)

Social Plano médio (entre plano fechado e plano aberto)

Impessoal/formal Plano aberto (corpo inteiro ou mais)

Envolvimento Ângulo frontal

Distancianciamento Ângulo oblíquo

Poder do observador Ângulo alto

Igualdade Nível do olhar

Poder de representação Ângulo baixo

Além das três funções, o modelo de gramática do design visual utiliza a modalidade, relativa ao grau de veracidade da mensagem, como categoria adicional de análise, adaptada para a análise de imagens. Para a análise da mo-

42

12 (1)

dalidade, Kress & van Leeuwen (1996) propõem seis parâmetros: cor, contex-tualização, representação, profundidade, iluminação e brilho. Tais parâmetros são detalhados a seguir:

Cor: um compósito de traços com valores diferentes em escalas, tais como, valor, saturação, pureza, modulação, diferenciação, luminosidade e matiz (Kress & Van Leeuwen, 2002).

Contextualização: traço numa escala que varia da completa ausência de segundo plano a um segundo plano mais detalhado e articulado.

Representação: traço numa escala que vai desde o máximo de abstração até o máximo de representação de detalhes pictóricos.

Profundidade: traço numa escala que varia desde a ausência de pro-fundidade a uma perspectiva de profundidade máxima.

Iluminação: traço numa escala que contempla desde a representação máxima do jogo de luz e sombra até a sua ausência.

Brilho: traço numa escala que varia da representação máxima de graus diferentes de brilho até apenas dois graus.

A partir de O’Toole (1994) e Kress e van Leeuwen (1996), que focalizam a imagem estática, como a pintura e a escultura o primeiro, e a fotografia e as imagens de páginas impressas os segundos, é desenvolvida uma série de trabalhos, seja refletindo sobre esses estudos da multimodalidade, seja ade-quando as metodologias a cada texto multimodal: a página impressa, a página da Web, os filmes e programas de televisão, dentre outras mídias. Kress e van Leeuwen (2001), por exemplo, buscam entender os princípios que movem a comunicação multimodal. O trabalho entende os textos multimodais como construtores de significado em articulações múltiplas. Para tanto, desenha quatro domínios de prática, denominados de estratos, em que os significados são predominantemente construídos: discurso, design, produção e distribuição. A Figura 3 representa os estratos/domínios de práticas:

Figura 3. Os estratos da comunicação multimodal, cf. Kress & van Leeuwen (2001)

ProduçãoDesignDiscurso

43

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

Os discursos são representações de algum aspecto da realidade, construídos socialmente. Os designs são usos dos recursos semióticos em todos os modos semióticos e combinações destes; eles realizam discursos no contexto de uma situação de comunicação determinada. A produção é a articulação concreta do evento semiótico ou a real produção material do artefato semiótico e envolve um conjunto de habilidades relacionadas com as mídias semióticas. A distri-buição, geralmente vista apenas como facilitadora das funções pragmáticas de preservação, é entendida na proposta como semiótica, produtora de signifi-cado, por envolver um conjunto de aspectos sociais pertinentes às funções de preservação e distribuição.

Baseados nestes trabalhos, pode-se citar van Leeuwen e Jewitt (2001), coletânea que reúne vários trabalhos no escopo da análise semiótica do visual, e O’Halloran (2004), que integra trabalhos cujo objeto de estudo são objetos tridimensionais, filmes e mídia eletrônica, e mídia impressa. Destaca-se, dentre os primeiros o trabalho de Meng (2004), o estudo de um museu como espaço multimodal de produção de significados. Van Leeuwen (2005) apresenta-se como introdução à semiótica social. O texto discorre sobre recursos, mudança, regras e funções semióticas, além de apresentar como dimensões de análise o dis-curso, gênero, estilo e modalidade. Adicionalmente, o trabalho aborda a questão da coesão multimodal, focalizando temas como o ritmo, a composição, a ligação de informações e o diálogo. Já Mackin (2007) apresenta-se como introdução à análise multimodal, abordando o significado das associações metafóricas na gramática visual; a iconografia e os significados ocultos das imagens; a relação da modalidade com a dissimulação e o exagero nas imagens; o significado da cor e da tipografia no design visual, tema refinado anteriormente por Kress & van Leeuwen (2002) e por van Leewen (2006); a representação de atores sociais na imagem, cujos sistemas são criados por van Leeuwen (2008); a composição e o layout de páginas e, finalmente, as diferenças entre a linguagem verbal e a visual.

Outros trabalhos ancorados nas teorias de multimodalidade têm como foco de análise os museus como espaços multimodais de produção de significados, dentre eles Ravelli (2006), Meng (2004), acima citado, e Hofinger & Ventola (2004). Neste estudo, será destacado este último trabalho, uma vez que um de seus focos é uma proposta de texto a ser usado em áudio-guias de um museu na Áustria, feita a partir de análise sistêmico-funcional de texto disponível nos áudio-guias e da análise multimodal de uma pintura do referido museu.

Hofinger & Ventola (2004) apresentam uma análise das três metafunções (ideacional, interpessoal e textual) do texto já usado nos áudio-guias do citado museu, bem como uma interpretação de uma pintura baseada nas teorias da multimodalidade, com o objetivo de comparar e contrastar os significados criados pelos dois modos semióticos, o verbal do texto e o visual da pintura. Sua análise revela que enquanto o texto oferece informações básicas e mais intuitivas sobre a família de Mozart e o período em que o retrato foi pintado,

44

12 (1)

a análise multimodal da obra revela significados nela representados em desta-que. Tal análise não só apóia o texto do áudio, mas também o complementa. Desta forma, Hofinger e Ventola (2004) propõem um texto para ser usado no áudio-guia, criado com base na análise multimodal da obra, com o objetivo de guiar o visitante em uma experiência semiótica em que se integram texto verbal e visual (no caso específico desta seção do museu, a análise multimodal compreende não só a pintura, mas também os elementos que estão fora da tela e se relacionam à obra: os instrumentos musicais em exibição). Hofinger & Ventola (2004) apontam que entender a multimodalidade em operação pode permitir que curadores de museus ofereçam aos visitantes perspectivas que estimulem um processo dinâmico de sensibilização de como os modos semióticos operam em conjunto.

O trabalho de Hofinger & Ventola (2004) foi aqui revisado mais exten-sivamente, em virtude da contribuição que oferece aos estudos de multimo-dalidade em museu, em especial com relação à importância da integração dos modos semióticos verbal e visual no processo de sensibilização de espectadores e de uma nova perspectiva de apreciação da arte em exibição. Entretanto, esse estudo, bem como os outros anteriormente citados, limita-se em seu escopo à sensibilização de espectadores videntes, sem menção à acessibilidade de DVs, o que abordaremos neste trabalho, não sem antes fazer uma revisão dos tra-balhos publicados no contexto nacional, resultados de pesquisa com o tema da multimodalidade.

Aplicações das teorias de multimodalidade no Brasil incluem, entre outros, no escopo do Grupo de Pesquisa Estilo de Tradutores Professionais e Literários – ESTRAPOLI – vinculado ao LETRA/FALE/UFMG, trabalhos afiliados à semiótica social e à multimodalidade que desenvolveram análises de imagens em propagandas de revista de interesse geral (Magalhães & Biavati, 2003), capas da revista Raça Brasil (Pinheiro, 2007), primeiras páginas de jornal impresso (Carvalho, 2007; Carvalho & Magalhães, 2009), capas de livros de literatura infantil (Magalhães & Novodvorski, 2010), pôsteres so-bre o multiculturalismo britânico comparados a capas da revista Raça Brasil (Magalhães & Caetano, no prelo). Magalhães & Biavati (2003) observaram o encobrimento e a quase exclusão de trabalhadores representados em pro-pagandas de empresas ao longo de um período de 10 anos, em que as regras do trabalho passam a ser flexibilizadas. Pinheiro (2007) analisou capas da revista Raça Brasil de um período de 10 anos, entre 1996 e 2006, concluindo que os significados de imagens e manchetes das capas parecem ainda privi-legiar o modelo hegemônico de branqueamento no Brasil. Carvalho (2007) e Carvalho & Magalhães (2009) analisaram as primeiras páginas de jornais de formato padrão e tablóide, concluindo que parece haver uma tendência geral de construção mais dinâmica destas páginas, utilizando-se o modo se-miótico visual em larga escala. Magalhães & Novodvorski (2010) concluem que o comprometimento com o contexto social em que os escritores das

45

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

obras de literatura infantil trabalham, o da procura por mudanças sociais e de formação de pensamento crítico mediante a literatura, pode ser um fator determinante na elaboração das imagens das capas dos livros, as quais representam a realização de significados situados culturalmente e impetrados por ideologias. Finalmente, Magalhães & Caetano (no prelo), baseados nos sistemas de representação visual de atores sociais de van Leeuwen (2008), têm como resultado da análise e discussão comparativa de imagens de pôsteres britânicos e capas de revistas brasileiras perspectivas semelhantes e diferentes na representação do racismo relativo aos negros, com a tendência a uma representação negativa em ambos os conjuntos de textos.

As pesquisas aqui revisadas, realizadas no âmbito nacional, também não tiveram como foco a interface com a tradução audiovisual. Na proposta ora em pauta, o desafio é propor essa interface, especificamente entre a linha de pesquisa em AD para museus e os estudos de multimodalidade em museus, visando a inclusão de DVs no processo de sensibilização a obras de arte em exposição. Em outras palavras, o desafio é propor uma metodologia para a elaboração de ADs para museus em que se integrem os critérios de audio-descrição propostos na perspectiva da tradução audiovisual com os modelos de análise de imagens de O’Toole (1994) e Kress & van Leeuwen (1996), complementando-se com reflexões e sugestões de descrições para textos de áudio-guias de museus, tomados como espaços multimodais de construção de significados semióticos.

Na próxima seção será abordada a citada proposta de metodologia para a elaboração de ADs para museus, focalizando-se os requisitos principais propostos por estudiosos de AD (ver seção anterior) e, por questão de es-paço, a função modal (O’Toole, 1994) e o significado interativo (Kress & Van Leewen, 1996).

Procedimentos metodológicos iniciais para a elaboração de AD baseada na multimodalidade

Os procedimentos metodológicos para a elaboração de roteiros de ADs a serem usados em áudio-guias de museus devem levar em conta uma combi-nação da análise de cada função/significado (representacional, modal/interativo, composicional) com as características de ADs descritas no escopo da tradução audiovisual TAV. Neste trabalho, tendo em vista o escopo da publicação, detalham-se procedimentos iniciais relativos à análise da função modal/signi-ficado interativo que resultarão em parte do roteiro de uma AD. Para este fim, reproduzem-se os sistemas da função modal de O’Toole (1994) e do significado interativo de Kress & van Leeuwen (1996), incluindo a modalidade, com os traços que podem ser realizados no âmbito destes sistemas, nos Quadros 3 e 4, respectivamente:

46

12 (1)

Quadro 3 – Sistemas da função modal (O’Toole 1994: 24)

UNIDADES REALIZAÇÕES

Escola/Gênero

Orientação para realidade e estilo

Por ex., barroco, cubismo, instalação

Obra/Pintura Foco: Perspectiva Claridade Luz Cor Escala Olhar: Função Caminhos Ritmos Intermediários

Enquadre Modalidade: Fantasia/ Ironia Autenticidade Simbolismo Omissão Intertextualidade

Episódio Da escala para o todo Da centralidade para o todo Proeminência relativa Interação de modalidades

Figura Caracterização Relação com o observador Olhar Gesto Contraste e conflito: Cor, Escala, Luz, Linha

Membro Estilização Atenuação Claro-escuro Sinédoque Ironia

O Quadro 3 apresenta as unidades de análise tal como propostas por O’Toole e os prováveis sistemas de análise com suas prováveis representações. Não cabe aqui explicar todos os sistemas e prováveis realizações, assim focaliza-se apenas uma das unidades a título de ilustração. Se a Figura for uma unidade em destaque na pintura, podemos analisar traços de sua realização, como sua caracterização, a relação que estabelece com o observador, talvez por meio do olhar e gestos. Pode-se, ainda, observar se há contrastes e conflitos de cor, escala, luz ou linha como realizações na representação da Figura.

47

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

Quadro 4. Sistemas do significado interativo, cf. Kress & van Leeuwen 1996: 154

PONTOS DE ENTRADA REALIZAÇÕES

Contato:

Demanda Oferta

Olhar para o observador Ausência de olhar

Distância social:

Íntimo/PessoalSocialFormal/Impessoal

Plano fechadoPlano médioPlano aberto

Atitude:

Envolvimento, DistanciamentoPoder do observador, Igualdade de poder, Poder do representado

Ângulo frontal, ângulo oblíquoÂngulo alto, nível do olhar, ângulo baixo

Modalidade Cor, Contextualização Representação Profundidade Luminosidade Brilho

Para a proposta de procedimentos metodológicos baseados nos sistemas acima, faz-se necessário, inicialmente, compararem-se os referidos sistemas, uma tarefa um tanto complexa. Em conferência plenária no VI Congresso da Associação de Linguística Sistêmico Funcional da América Latina, em 2010, Kay O’Halloran mencionou que o modelo de O’Toole é de base puramente sistêmico-funcional, enquanto o modelo de Kress & van Leeuwen, além de basear-se na linguística sistêmico-funcional, dialoga com outras teorias como é o caso dos estudos de Roland Barthes sobre imagens. Sem entrar na questão da afiliação dos dois modelos, faz-se a seguir uma tentativa de comparação dos modelos para tentar mostrar sua complementaridade.

Enquanto as unidades do sistema de O’Toole parecem iniciar o processo de leitura da imagem por elementos concretos, do mundo físico da pintura (membro, figura, episódio, obra e escola) os quais podem ter traços semân-ticos de realização (ironia, por exemplo), os pontos de entrada do sistema de Kress & van Leeuwen parecem iniciar o processo por elementos abstratos, por assim dizer, semânticos (contato, distância, atitude) que se realizam por meio de elementos concretos do mundo físico da pintura (planos, olhar, etc.). Para

48

12 (1)

detalhar mais este ponto, vale observar que a atitude, realizada por elementos concretos (os ângulos), envolve também um elemento abstrato (o poder); a distância, realizada por elementos físicos, congrega também um elemento abstrato, nomeado como social, se for levado em conta que o conceito de sociedade ou do que é social é abstrato.

A modalidade, um tema à parte no modelo de Kress & van Leeuwen, tem seus traços espalhados ao longo da escala de unidades de O’Toole, com potencial de realização em cada uma. O olhar também é um traço de realização nesse modelo, que pode se aplicar a mais de uma unidade na escala, a figura e a obra. Em relação à figura, o olhar parece ter a função mais localizada de engajamento com o observador, enquanto em relação à obra essa função parece deslocar-se, tendo em vista outras direções e caminhos do olhar. A propósito de caminhos e ritmos, dois traços potenciais de realização da obra como um todo, o modelo de O’Toole parece prever mais claramente certo movimento entre os episódios da obra como traços de realização da função modal, enquanto o modelo de Kress & van Leeuwen, talvez por focalizar prioritariamente uni-dades semânticas no significado interativo, parece prever movimento apenas no âmbito do significado representacional, em relação às estruturas narrativas.

São modelos, enfim, que não se chocam e podem ser complementares na análise de imagens. Se a decisão for iniciar com o modelo de O’Toole (1994), por ter sido este elaborado prioritariamente para a interpretação de pinturas, ao se buscar os elementos que realizam as unidades passíveis de análise em cada obra, pode-se complementar sua leitura com insights do modelo de Kress & van Leeuwen (1996). Da mesma forma, se a decisão for usar o modelo de Kress & van Leeuwen (1996) como ponto de partida, insights do modelo de O’Toole (1994) podem ser utilizados, especialmente no que concerne à relação entre as unidades, por meio dos caminhos, ritmos e movimentos estabelecidos pelo olhar.

Supondo que se vá usar o resultado obtido por meio da análise da função modal como parte de um roteiro de AD da pintura “Las meninas” de Velazquez, reproduzida em várias páginas da internet, dentre elas http://www.artchive.com/meninas.htm, mas não reproduzida aqui por questões de direitos autorais, argumenta-se que a AD a ser elaborada se beneficiará de uma leitura feita a partir das unidades de O’Toole (1994). Trata-se de quadro com várias figuras, proeminentes ou não, com episódios distintos e membros que, se analisados detalhadamente conforme previsto no modelo, contribuem para uma pers-pectiva da obra como um todo, e desta como gênero. Em diálogo com as noções semânticas do modelo de Kress & van Leeuwen (1996), esta leitura provavelmente se constituiria numa AD abrangente, realizada com o suporte de duas gramáticas da linguagem visual.

Algumas dessas unidades serão tomadas como foco dos procedimentos metodológicos iniciais para a elaboração de um roteiro de AD a ser ouvido por DVs em um museu em que uma reprodução de “Las meninas” estivesse

49

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

em exibição. Em primeiro lugar, conforme recomendado em De Coster & Mühleis (2007), faz-se necessário a referência às dimensões e especificações do quadro, que pode se tornar concreta a partir da sugestão dos autores de se usar o tato, na medida do possível:

1) Você está diante de uma reprodução da tela pintada a óleo por Diego Velazquez, em 1656, cujo original se encontra no Museu do Prado em Madrid e cujas dimensões são 318 centímetros de altura por 276 centímetros de largura.

Em seguida, a unidade Figura pode ser tomada como ponto de partida para o próximo passo metodológico e, por meio de seus traços de realização – caracterização, relação com o observador, olhar, gesto, contraste e conflito: cor, luz, linha – construirem-se as próximas sentenças da áudio descrição:

2) São retratadas neste quadro várias pessoas, incluindo o pintor, em um salão amplo em altura e profundidade. Algumas dessas pessoas, como a menina que se destaca em primeiro plano, vestidas com trajes mais luxuosos; outras, com trajes mais simples. O pintor, duas das meninas, uma anã, uma senhora vestida de negro e um homem, todos em planos ligeiramente diferentes da tela, em primeiro lugar a anã seguida das meninas, do pintor, da senhora e do homem, dirigem o olhar para fora da tela e parecem interagir com o observador. Os demais participantes retratados, um anão, outra menina e outra senhora dirigem seu olhar para outros participantes do quadro. Dentre os retratados, o pintor se inclina para trás enquanto segura um pincel; o anão faz um gesto com a perna sobre um cachorro deitado no chão; duas das meninas parecem fazer gestos de reverência para a menina que ocupa a posição central da tela; os gestos que esta faz com as mãos indicam que ela posa para o retrato. O homem ao fundo parece parar à porta e, defronte de umas escadas, volta-se para fitar algo que está à sua frente. As cores escuras, preta e tons de marrom, predominam nas vestimentas da maioria dos retratados; contrasta com esta cor o branco do vestido da menina que parece posar e de partes dos vestidos das outras duas meninas ao seu lado e da senhora no plano posterior. O branco do vestido brilha a luz do sol que penetra por uma janela à esquerda e pela porta aberta ao fundo. Todos os participantes são retratados de corpo inteiro e em plano ligeiramente oblíquo e pertencem a um mundo distante e diferente do observador.

Deve-se observar que no passo (2), acima, já se trata de uma combinação dos dois modelos, uma vez que a unidade Figura, do modelo de O’Toole (1994), é detalhada e complementada com as unidades Contato, Distância Social e Atitude, além dos parâmetros de modalidade (cor, contextualização,

50

12 (1)

representação, profundidade, luminosidade e brilho) do modelo de Kress & van Leeuwen (1996). Também se tenta explorar a experiência intersensorial na descrição ao se relacionar a cor branca com o brilho e a luz. Além disso, os sinais mais claros são abordados em primeiro lugar, deixando-se aqueles mais ambivalentes para um segundo momento – o pintor retratado com o pincel e o homem que se volta, ambos olhando para fora do quadro, como se a mirar o que ou quem estava sendo retratado. Outro sinal ambivalente que poderia ser detalhado diz respeito a outras figuras, os quadros da parede do fundo. Dois quadros estão ao alto e não podem ser bem distinguidos, dada a falta de luz, e um, abaixo de um desses quadros, pode ser interpretado simultaneamente como um espelho, dada a luz que incide sobre ele. Este quadro ou espelho reproduz a imagem de um casal, possivelmente o casal real espanhol que, numa leitura de Foucault apresentada em Hall (2000: 56-61), poderia ser o modelo para o quadro, em lugar da menina, a Infanta.

Também poderia ser abordada a unidade Episódio. Como podem ser desenhadas linhas entre as figuras nos diferentes planos, é possível se pensar a realização de traços do Episódio, unidade que parece também destacar-se em “Las meninas”. E assim por diante, dependendo de cada pintura. O roteiro da AD, integrando o resultado da análise dos dois passos metodológicos aqui detalhados é reproduzido abaixo:

Você está diante de uma reprodução da tela pintada a óleo por Diego Velazquez, em 1656, cujo original se encontrado no Museu do Prado em Madrid e cujas dimensões são 318 x 276 cm. São retratadas neste quadro várias pessoas, incluindo o pintor, em um salão amplo em altura e profundidade. Algumas delas, como a menina que se destaca em primeiro plano, vestidas com trajes mais luxuosos; outras, com trajes mais simples. O pintor, duas das meninas, uma anã, uma senhora vestida de negro e um homem, todos em planos ligeiramente diferentes da tela, em primeiro lugar a anã seguida das meninas, do pintor, da senhora e do homem, dirigem o olhar para fora da tela e parecem interagir com o observador. Os demais participantes retratados, um anão, outra menina e outra senhora dirigem seu olhar para outros participantes do quadro. Dentre os retratados, o pintor se inclina para trás enquanto segura um pincel; o anão faz um gesto com a perna sobre um cachorro deitado no chão; duas das meninas parecem fazer gestos de reverência para a menina que ocupa a posição central da tela; os gestos que esta faz com as mãos indicam que ela posa para o retrato. O homem ao fundo parece estar à porta e, defronte de umas escadas, volta-se para fitar algo que está à sua frente. As cores escuras, preta e tons de marrom, predominam nas vestimentas da maioria dos retratados; contrasta com esta cor o branco do vestido da menina que parece posar e de partes dos vestidos das outras duas meninas ao seu lado e da senhora no plano posterior. O branco do vestido brilha a luz do sol que penetra por uma janela à esquerda e pela porta aberta ao fundo. Todos os participantes são retratados de corpo inteiro e em plano ligeiramente oblíquo e pertencem a um mundo distante e diferente do observador.

51

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

Cabe, ainda, reiterar que o exercício realizado nesta seção foi de análise somente da função modal ou significado interativo da imagem como proposta de procedimentos metodológicos para a elaboração da AD. Um outro proce-dimento seria integrado pela leitura da função ou significado representacional, para a qual noções sobre avaliação (Martin & White, 2005) e ponto de vista narrativo (Simpson, 2000; Toolan, 2001) parecem fundamentais, uma vez que a referida função ou significado integra estruturas narrativas e conceituais, em outras palavras, narração e descrição. Neste procedimento, pode ser incorpo-rado o conhecimento extra sobre o design, a produção e a distribuição da obra de arte, conforme recomenda O’Toole (1994). O procedimento calcado nas funções/significados representacional e modal/interativo seriam integrados, finalmente, por meio do procedimento metodológico subsidiado pela leitura da função ou significado composicional da imagem, visando à articulação das demais funções e significados. Ressalta-se que as leituras busquem o diálogo com as reflexões de De Coster & Mühleis (2007) e Holland (2009), em espe-cial a inevitabilidade de certo grau de interpretação na AD. Em um modelo de comunicação multimodal, conforme descrito por Kress & van Leeuwen (2001), não se pode perder de vista que o estrato do discurso, em especial, implica conhecimentos sobre aspectos da realidade construídos socialmente e, fatalmente, perspectivas e pontos de vistas diferentes sobre esses aspectos.

Considerações finais

Este artigo iniciou por apontar uma necessidade de se articularem pes-quisas realizadas no âmbito da tradução audiovisual com trabalhos ancorados nas teorias de multimodalidade para que seja possível a sensibilização de DVs para obras de arte em exibição em museus. Para tanto, buscou revisar trabalhos publicados nas duas áreas no âmbito nacional e internacional. Essa revisão permitiu concluir que, na área de tradução audiovisual, os trabalhos pioneiros de De Coster & Mühleis (2007) e Holland (2009), especificamente focalizados no tema de ADs para museus, não apresentam uma orientação sistematizada de leitura de obras de arte que possibilite a elaboração de roteiros de AD; permitiu, ainda, concluir que, no âmbito dos estudos da multimodalidade, os trabalhos cujo interesse são os museus como espaços multimodais de produção de significado têm modelos sistematizados para análise de obras de arte, entretanto, não incluem os DVs na audiência con-sumidora dos textos resultantes.

Partiu-se, então, para o detalhamento dos modelos de O’Toole (1994) e Kress & van Leeuwen (1996), mais especificamente dos sistemas da função modal, no primeiro, e dos sistemas do significado interativo, no segundo. Foram propostos procedimentos metodológicos iniciais, integrando as unidades ou pontos de entradas desses sistemas com as observações feitas sobre a audiodes-crição de obras de artes no âmbito das pesquisas em tradução audiovisual, para

52

12 (1)

a elaboração de roteiros de ADs adequados ao propósito de inclusão de DVs num processo dinâmico de sensibilização para a multimodalidade.

Não foi possível, entretanto, detalhar todos os procedimentos metodoló-gicos cujos subsídios seriam a função/significado representacional e a função/significado composicional. Tais procedimentos, no entanto, vêm sendo des-envolvidos em pesquisas de doutorado em andamento no escopo do LETRA, as quais buscam, ademais, estabelecer diálogos com as teorias sobre avaliação e ponto de vista narrativo. De qualquer forma, os procedimentos aqui delineados estão baseados em modelos sistematizados e podem ser replicados, cumprindo seu propósito de contribuir para a elaboração de roteiros de ADs adequados a uma integração dos significados multimodais em construção nos espaços museológicos.

notas:

1 Trabalho realizado com auxílio financeiro do Projeto de Cooperação Acadêmica PROCAD/CAPES 008/2007.

2 A Portaria 310 (http://www.mc.gov.br/o-ministerio/legislacao/portarias/portaria-310.pdf ) regula a acessibilidade audiovisual na televisão brasileira, complementando a lei 5296 de 02 de dezembro de 2004 (www.planalto.gov.br/ccivil_03/_Ato2004-2006/2004/Decreto/D5296.htm) que rege sobre os direitos das pessoas com defi-ciência física, auditiva, visual ou cognitiva.

3 Uma pesquisa pode ser considerada de natureza exploratória, quando esta envolver levantamento bibliográfico, entrevistas com pessoas que tiveram, ou têm, experiên-cias práticas com o problema pesquisado e análise de exemplos que estimulem a compreensão. As pesquisas exploratórias visam proporcionar uma visão geral de um determinado fato.

4 Vidente é aquele que enxerga em oposição ao deficiente visual.5 As autoras devem a revisão do conceito de narrativa à Karina S. Szpak, mestranda

do Programa de Pós-Graduação em Estudos Linguísticos da UFMG, que fez um trabalho de síntese dos conceitos usados em textos de tradução audiovisual e aces-sibilidade e de multimodalidade.

referências bibliográficas

Ballester casado, A. (2007). ‘Directores en la sombra: personajes y su caracte-rización en el guión audiodescrito de Todo sobre mi madre’, in C. Jimenez Hurtado (Ed.) Traducción y acessibilidad. Subtitulación para sordos y audio-descripción para ciegos: nuevas modalidades de traducción audiovisual, pp. 133-152. Frankfurt: Peter Lang.

BenecKe, B. (2004). ‘Audio-description’, Meta 49 (1): 78-80.Bordwell, D. (1996). La narración en el cine de ficción. Trad. Pilar Vázquez Mota.

Barcelona: Paidós.Carvalho, F. F. (2007). Os significados composicionais e a formação de subjetividades

na primeira página de jornais mineiros: um estudo de caso à luz da gramática

53

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

do design visual. Belo Horizonte: UFMG. (Dissertação de mestrado).Carvalho, f. f. & magalhães, C. (2009). ‘Mídia impressa e multimodalidade: os

significados composicionais na primeira página de jornais mineiros’, Revista da ANPOLL, 27, 45-74.

De coster, K. & mühleis, V. (2007). ‘Intersensorial translation: visual art made up by words’, in J. Díaz-Cintas, P. Orero & A. Remael (Eds.) Media for all: subtitling for the deaf, audio description, and sign language, pp. 189-201. Amsterdam/ New York: Rodopi.

Franco, e.P.c. (2007). ‘Em busca de um modelo de acessibilidade audiovisual para cegos no Brasil: um projeto piloto’, in V.L.S. Araújo e E.P.C. Franco (Eds) TRADTERM 13, pp. 171-186.

hall, s. (Ed.) (2000). Representation: cultural representations and signifying practices. London: Sage Publications Ltd.

Halliday, m.a.K. (1978). Language as social semiotic: the social interpretation of language and meaning. London/ Baltimore: Edward Arnold & University Park Press.

Hodge, r. & Kress, g. (1988). Social Semiotics. Ithaca, New York: Cornell University Press.

Hofinger, a. & ventola, E. (2004). ‘Multimodality in operation: language and picture in a museum’, in E. Ventola, C. Charles & M. Kaltenbacher (Eds.). Perspectives on Multimodality, pp. 193-209. Amsterdam / Philadelphia: John Benjamins.

Holland, a. (2009). ‘Audio description in the theatre and the visual arts: images into words’, in G. Anderman & J. Díaz-Cintas (Eds.) Audiovisual translation: language transfer on screen, pp. 170-185. Basingstoke/ New York: Palgrave MacMillan.

JaKobson, r. (1995). ‘Aspectos lingüísticos da tradução’ Trad. Izidoro Blikstein. Lingüística e Comunicação, pp. 63-86. São Paulo: Cultrix.

Jewitt, c. & oyama, R. (2001). ‘Visual meaning: A social semiotic approach’, in T. van Leeuwen & C. Jewitt (Eds.) Handbook of visual analysis, pp. 134-156. London: Sage.

Jimenez hurtado, C. (2007). ‘Una gramática local del guión audiodescrito. Desde la semántica a la pragmática de un nuevo tipo de traducción’, in C. Jímenez-Hurtado (Ed.) Traducción y acessibilidad. Subtitulación para sordos y audiodescripción para ciegos: nuevas modalidades de traducción audiovisual, pp. 55-80. Frankfurt: Peter Lang.

Kress, g. & van leeuwen, T. (1996). Reading images: the grammar of visual design. London/New York: Routledge.

Kress, g. & van leeuwen, T. (2001). Multimodal discourse: the modes and media of contemporary communication. London: Arnold.

Kress, G. & van leeuwen, T. (2002). ‘Colour as a semiotic mode: notes towards a grammar of colour’, Visual Communication, 1(3): 343-369.

macKin, D. (2007). Introduction to multimodal analysis. London: Hodder Arnold.Magalhães, C. & biavati, N. (2003). ‘De operários, técnicos e executivos: repre-‘De operários, técnicos e executivos: repre-

sentações do trabalhador em gênero do discurso midiático,’ CROP, 9:55-84.

54

12 (1)

magalhães, c. & novodvorsKi, a. (2010). ‘A semiótica visual e a questão da identidade racial: uma leitura sistêmico-funcional em duas capas de literatura infanto-juvenil brasileira’, in E. Ghio & M. A. Fernandez (Eds.) El discurso en español y portugués. Estudios desde una perspectiva sistémico-funcional, pp. 287-310. Colección Ciencia y Tecnología. Santa Fé - Argentina: Universidad Nacional del Litoral.

magalhães, c. & caetano, P. (no prelo). ‘A comparative study of visual racism on Brazilian and British images of the black body’, in W. L. Bowcher (Ed.) Multimodal texts from around the world: cultural and linguistic insights. Lon-don/ New York: Palgrave MacMillan.

martin, J.r. & white, P.R.R. (2005). The language of evaluation: appraisal in English. Hampshire/ New York: Palgrave Macmillan.

matamala, a. (2007). ‘La audiodescripción en directo’, in C. Jímenez-Hurtado (Ed.) Traducción y accesibilidad. Subtitulación para sordos y audiodescripción para ciegos: nuevas modalidades de traducción audiovisual, pp. 121-132. Frankfurt: Peter Lang.

meng, A. P. K. (2004). ‘Making history in From Colony to Nation: a multimodal analysis of a museum exhibition in Singapore’, in K. L. O’Halloran (Ed.), Multimodal discourse analysis: systemic functional perspectives, pp.28-54. London/ New York: Continuum.

O’halloran, K. L. (2004). Multimodal discourse analysis: systemic functional per-spectives. London/ New York: Continuum.

Orero, P. (2007). ‘Audiosubtitling: a possible solution for opera accessibility in Catalonia’, in V.L.S Araújo e E.P.C. Franco (Eds) TRADTERM 13, pp. 35-150.

O’toole, m. (1994). The language of displayed art. Rutherford, Madison, Teaneck: Fairleigh Dickinson University Press.

Payá, m. P. (2007). ‘La audiodescripción: traduciendo el lenguaje de las cámaras’, in C. Jimenez Hurtado (Ed.) Traducción y accesibilidad. Subtitulación para sordos y audiodescripción para ciegos: nuevas modalidades de traducción audio-visual, pp. 81-92. Frankfurt: Peter Lang.

Pinheiro, V. S. (2007). Analisando significados de capas da Revista Raça Brasil: um estudo de caso à luz da semiótica social. Belo Horizonte: UFMG. (Dissertação de mestrado).

Ravelli, l. (2006). Museum texts: communication frameworks. London; New York: Routledge.

Salway, a. (2007). ‘A corpus-based analysis of audio description’, in J. Díaz Cin-tas, P. Orero & A. Remael (Eds.) Media for All. Subtitling for the deaf, audio description, and sign language, pp.151-174. Amsterdan; New York: Rodopi.

silva, m. C. (2009). Com os olhos do coração: estudo acerca da audiodescrição de desenhos animados para o público infantil. Salvador: UFBA. (Dissertação de Mestrado)

SimPson, P. (2000). Language, ideology and point of view. London/New York: Routledge.

55

Célia M. Magalhães y Vera L. Santiago A.: Metodologia para elaboração de audiodescrições para museus...

snyder, J. (2005). ‘Audio Description: the visual made verbal across arts discipline’, Translating Today Magazine, 4, 15-17.

Toolan, m. (2001). Narrative: a critical linguistic introduction. London; New York: Routledge.

Van leeuwen, T. (2005). Introducing social semiotics. London/ New York: Rout-ledge.

van leeuwen, t. (2006). ‘Towards a semiotics of typography’, Information Design Journal, 14 (2): 139-155.

Van leeuwen, T. (2008). Discourse and practice: New tools for critical discourse analysis. Oxford: Oxford University Press.

van leeuwen, t. & c. Jewitt (2001). Handbook of visual analysis. London, Thousand Oaks, New Delhi: Sage Publications.

célia m. magalhães é professora titular do Programa de Pós-Graduação em Estudos Linguísticos da Universidade Federal de Minas Gerais e pesquisa-dora nível 2 do CNPq. Possui mestrado em linguística (1985) e doutorado em literatura comparada (1997) pela Universidade Federal de Minas Gerais. Tem experiência na área de Linguística Aplicada, com ênfase em estudos da tradução e estudos da multimodalidade, tendo como foco de interesse o estilo de tradutores e a produção multimodal de textos.

Correos electrónicos: celiamag@gmail.com / celia.magalhaes@pq.cnpq.br

vera lúcia santiago araúJo é professora do Programa de Pós-Graduação em Linguística Aplicada da Universidade Estadual do Ceará e pesquisadora nível 2 do CNPq. . Possui mestrado em Mestrado em Letras Língua Inglesa pela Universidade Estadual do Ceará (1994) e doutorado em Letras pela Universidade de São Paulo (2000). Tem experiência na área de Linguística Aplicada, com ênfase em Tradução Audiovisual (TAV), atuando principalmente nos seguintes temas: legendagem para surdos e ensurdecidos (LSE), audiodes-crição (AD) e TAV e ensino.

Correos electrónicos: verainnerlight@uol.com.br / vera.santiago@pq.cnpq.br

57ALED 12 (1), pp. 57-73

ARTÍCULO

SALVIO MARTÍN MENÉNDEZUniversidad Nacional de Mar del PlataUniversidad de Buenos Aires - CONICET

Resumen. Las estrategias discursivas son, desde nuestro punto de vista, el modo de dar cuenta del Análisis del Discurso (Menéndez, 2000, 2005). Las definimos como un plan del sujeto discursivo que el analista reconstruye a partir de la combinación de recursos que proveen los diferentes modos (Kress, 2009) con el objetivo de obtener un fin interaccional. En este trabajo nos interesa mostrar cómo analizar estratégicamente y desde una perspectiva multimodal (Kress, 2009) un afiche cinematográfico. Desde una perspectiva de base sistémico-funcional (Halliday, 1978) mostraremos que no hay privilegio a priori de un modo sobre otro sino que su combinación estratégica permite establecer relaciones de preponderancia entre ellos. Es la dinámica genérica la que permitirá ver la manera en que las combinaciones se llevan a cabo, se jerar-quizan, se complementan y orientan determinadas interpretaciones.

Palabras clave: multimodalidad, estrategia, recursos, registro, género.

Resumo. Estratégias discursivas são, do nosso ponto de vista, o modo de dar conta da Análise do Discurso (Menéndez, 2000, 2005). Na nossa definição, são um plano do sujeito discursivo reconstruído pelo analista a partir da combinação de recursos que os diferentes códigos fornecem com o objetivo de obter um fim interacional. Neste trabalho nos interessa mostrar como analizar um cartaz cinematográfico estrategica-mente e de uma perspectiva multimodal (Kress, 2009). A partir de uma perspectiva de base sistêmico-funcional (Halliday, 1978), mostraremos que não há privilégio a priori de um modo sobre outro, mas sim que a sua combinação estratégica permite estabelecer relações de preponderância entre eles. É a dinâmica genérica que permi-tirá entender a maneira pela qual as combinações se constroem, hierarquizam-se, complementam-se e orientam determinadas interpretações.

Palavras-chave: multimodalidade, estratégia, recursos, registro, gênero.

Abstract. Discourse strategies are, from our point of view, the way to give account of Discourse Analysis (Menéndez, 2000, 2005). We define them as a plan analysts reconstruct from the combination of different resources that fulfill an interactional goal. In this paper, we will present a multimodal analysis of a film poster in order to explain how the different resources of various modes work. From the analyti-cal framework of a functional-systemic perspective (Halliday, 1978) we will try to show that no mode is privileged over another but that the key element is rather their strategic combination, that is, their organization in order to meet its purpose. Thus, the generic dynamics allows us to see the way combinations are realized, how

Multimodalidad y estrategias discursivas:un abordaje metodológico

Recibido: 10 de abril de 2012 • Aceptado: 25 de agosto de 2012.

58

12 (1)

they are provided with a given hierarchy, and how they complement each other and trigger certain interpretations.

Keywords: multimodality, strategy, resource, register, genre.

Introducción

El presente trabajo pretende mostrar: a) las ventajas que supone adoptar la perspectiva multimodal para el Análisis del Discurso (AD de aquí en más) y b) la pertinencia de que esa perspectiva se lleve a cabo a partir del análisis de estrategias discursivas.

En función de que la perspectiva multimodal supone un enfoque dis-cursivo inscripto dentro de un planteo semiótico más amplio, entendemos que la lingüística sistémico-funcional es una teoría de base adecuada para llevarla a cabo. La razón es simple: la lingüística sistémico-funcional en-tiende que el lenguaje verbal está inscripto dentro de una semiótica social (Halliday, 1978; van Leeuwen, 2005). Esta concepción de semiótica va más allá de la descripción estática de un conjunto sistemático de regularidades formales y se propone dar cuenta de los sistemas de significación que se conforman a partir de su inscripción contextual.

Entendemos que el discurso, objeto evidente y específico de la disci-plina, es una simultaneidad de modos (Jewitt, 2009; Kress, 2009) que se representan a partir de las actualizaciones efectivas de los diferentes siste-mas de opciones que permiten conformarlos. Desde este punto de vista, la multimodalidad es una característica inherente y necesaria para el AD simplemente porque el discurso es una unidad básicamente multimodal. Nos interesa focalizar aquí la metodología para abordar cualquier fenómeno discursivo.

Esto supone necesariamente considerar que un (i.e. cualquier) lenguaje es siempre potencial de significado que se describe, explica e interpreta desde tres puntos de vista complementarios: i) paradigmáticamente (lo que da cuenta de su sistema), sintagmáticamente (lo que da cuenta de su estructura) y estratégicamente (lo que da cuenta de su uso)

Para ello, organizaremos este artículo de la siguiente manera. En el punto 1, daremos los fundamentos que permiten justificar que la lingüística sistémico-funcional es una adecuada teoría de base para sostener la pers-pectiva multimodal. En 2, daremos los lineamientos generales del análisis del discurso. En 3, haremos la fundamentación del planteo multimodal. En 4, plantearemos las características de nuestro instrumento de análisis de las estrategias discursivas. En 5, analizaremos puntualmente un ejemplo de un afiche cinematográfico. En 6, sacaremos las conclusiones pertinentes.

59

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

1. La lingüística sistémico-funcional: teoría de base

La lingüística sistémico-funcional considera el lenguaje como un po-tencial de significado (Halliday, 1978) que se actualiza en forma de textos contextualmente dependientes.

La lingüística sistémico-funcional entiende el lenguaje verbal dentro de una semiótica social (Halliday, 1978), es decir, la teoría lingüística se ubica dentro del contexto de la semiótica entendida en términos del estudio de los sistemas y procesos del significado y reconoce una triple deuda que ayuda a entender este planteo de manera más integral:

• La antropología cultural de Malinowsky (1923) le aporta la de-pendencia contextual para entender los hechos significativos que el lenguaje crea, permite representar, intercambiar y organizar.

• LaglosemáticadeHjelmeslev(1986[1943])leaportaelconceptode semiótica connotativa y las dimensiones paradigmáticas y sintag-máticas en relación con los planos de la expresión y del contenido.

• El estructuralismo británico de Firth (1957) toma los dos ante-riores y los reelabora dando los puntos básicos de elaboración de la propuesta sistémico-funcional ampliando la base estructural al dominio semántico.

La lingüística sistémico-funcional describe el lenguaje como un siste-ma semántico realizado formalmente, cuya significación socio-cultural es lo que permite caracterizarlo; se prioriza el discurso o texto no solamente como evidencia del sistema sino como elemento constitutivo de la cultura.

Los textos son las unidades que permiten analizar esa potencial de significado a partir de sus realizaciones particulares. La propiedad que los caracteriza es la coherencia entendida a partir de su realización léxico-gramatical y contextual. Un texto es, entonces, una unidad de significado en uso coherente: cohesiva léxico-gramaticalmente y consistente en registro y género (Halliday y Hasan, 1976; Martin, 1985; Eggins, 2004). Por esta razón los textos no son unidades de interpretación. Un texto siempre se inscribe en un determinado contexto que marca el límite de su interpreta-ción posible. No hay texto sin contexto ni contexto sin texto. La relación no es jerárquica ni opositiva; es mutuamente interdependiente.

La lingüística sistémico-funcional considera fundamental cómo la len-gua crea significados y cómo permite intercambiarlos por medio de textos. Ahí reside su concepción semántica que se describe y explica a partir de las tres funciones básicas del lenguaje (ideativa, interpersonal y textual) y de los sistemas que permiten dar cuenta de ella (transitividad, tema y modo) (Halliday, 1970, 1978, 1985, 2002, 2004).

60

12 (1)

La lingüística sistémico-funcional entiende semántico en sentido amplio. Esto implica que está incluyendo en su definición lo que, desde la década del ochenta del siglo veinte, se denomina pragmático (Levinson, 1983; Leech, 1983); no realiza, por lo tanto, ninguna distinción entre semántica y pragmática. Considera que se trata de una distinción artificial ya que todo significado debe entenderse como un significado en uso (Halliday, 1978). Como la perspectiva funcional presupone una concepción del lenguaje en términos interaccionales cuya unidad es el texto, adoptar una perspectiva funcional implica, en con-secuencia, adoptar una perspectiva textual ya que el lenguaje sirve a ciertos propósitos que van más allá del propio lenguaje. Es decir, cumple finalidades de orden sociocultural. El lenguaje sirve, entonces, como una instancia en la que siempre se lleva a cabo una negociación de significados.

El concepto alrededor del que se organiza la gramática sistémico-funcional es el de opción, entendida en términos de potencial de significado sin implicar intencionalidad. Las opciones conforman sistema de redes pero no consti-tuyen una estructura taxonómica. El sistema de opciones es descripto como conjuntos de paradigmas disponibles que conforman una red. A su vez, este sistema tiene como correlato una estructura que se representa en términos sintagmáticos como las opciones efectivamente elegidas. Esa estructura es el texto. El sistema, desde el punto de vista teórico, se realiza en la estructura, i.e. los paradigmas se realizan en los sintagmas; en consecuencia, las opciones potenciales se realizan en las opciones efectivamente realizadas. Si bien desde el punto de vista sistémico-funcional la prioridad teórica la constituye la re-construcción del sistema (de ahí su nombre), ese sistema se encuentra en una relación de mutua interdependencia con la estructura. La posibilidad de su reconstrucción, desde el punto de vista analítico, la dan los textos; ellos son el conjunto de opciones efectivamente realizadas a partir de los cuales es posible reconstruir el conjunto de opciones disponibles.

No existe una caracterización dicotómica u opositiva sino una mutua y necesaria interdependencia entre sistema y estructura. El mismo tipo de relación se da entre texto y contexto. La relación texto/contexto no es de oposición sino de mutua interdependencia. El conjunto de paradigmas disponibles es la condición de posibilidad para la producción de un texto determinado y, a su vez, los textos son los que permiten reconstruir el conjunto de paradigmas disponibles. Son dos perspectivas mutuamente complementarias.

El concepto de opción supone que el lenguaje es inherentemente variable y que se expresa a partir de variantes. La realización efectiva de un conjunto de opciones conforma un texto y esa conformación lleva inscripta la variedad de uso elegida en función de la situación en la que ese texto se produce. Cuando un hablante elige determinada opción, la realiza porque hay un contexto que la determina, en algún grado, como adecuada y la habilita como tal. La gradua-lidad, entonces, determina el alcance de las opciones a partir de su realización efectiva en situaciones particulares.

61

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

El contexto se define en forma doble. En primer lugar, es entendido como la situación inmediata en la que el lenguaje se inscribe a partir de su uso. En segundo lugar, como una situación mediata, dada por la cultura en la que esa situación inmediata está convencionalmente inscripta y, en consecuencia, se le puede asignar un determinado significado social. Esas convenciones pueden o no respetarse en mayor o menor medida, pero no pueden negarse. Hay, en consecuencia, un contexto de situación que se inscribe dentro de un contexto de cultura. El primero se caracteriza a partir del registro; el segundo, del género. (Halliday, 1978; Hasan, 1995; Martin, 1985, 1992, 1997).

El registro es definido como una variedad de uso que está determinada por la situación. Se lo describe (Halliday, 1978; Halliday y Hasan, 1976; Martin, 1985) a partir de tres elementos: el campo (el tipo de actividad reconocida en una cultura en la que el lenguaje cumple un papel deter-minado), el tenor (la relación entre los participantes) y el modo (el canal utilizado para llevar a cabo el intercambio).

Los géneros discursivos han sido definidos tradicionalmente como convencionesdeuso(Bajtín,1944[2008]).Estasconvencionessoncons-titutivas de los discursos ya que actúan como condiciones previas y básicas de interpretación. El género actúa, de este modo, como el contexto cultural mediato que hace posible que un discurso pueda ser interpretado de una manera determinada.

En consecuencia, se puede afirmar que el hablante opta en función del género discursivo. Y la realización de esa opción depende y está con-dicionada por él.

El condicionamiento textual es, por lo tanto, doble: 1) gramatical, en tanto depende del sistema de opciones que el hablante tiene (que representa sólo idealmente todas las opciones posibles que podría tener); 2) genérico, en tanto depende del conjunto de convenciones de uso (las situaciones) que tiene incorporado (al menos en algún grado) porque es un sujeto social que forma parte de una determinada cultura.

2. El análisis del discurso

El análisis del discurso es, originalmente, una subdisciplina lingüística que puede caracterizarse a partir de lo que llamaremos la intersección de los contextos. Pero, al mismo tiempo y como veremos, se debe inscribir también dentro del planteo semiótico social a partir de una perspectiva efectiva que determina, en última instancia, su práctica analítica: la multimodalidad.

Esta intersección nos permite poner en relación tanto la lingüística sistémico-funcional como teoría gramatical de base (cf. punto 1) con las teorías tradicionalmente agrupadas bajo el nombre de pragmática (Levinson, 1983; Leech, 1983; Lavandera, 1985) y adoptar una perspectiva amplia,

62

12 (1)

la pragmática-discursiva (Verschueren, 1995, 1999; Menéndez, 1997) que permiten una integración efectiva de gramática y discurso como dominios complementarios.

El discurso aparece, entonces, en la intersección de dos contextos: uno, cognitivo-social (representado centralmente por la gramática y los entornos cognitivos (Sperber y Wilson, 1986); otro, socio-cultural (representado por el género). Ambos, gramática y género, condicionan su aparición. El discurso es el que permite contrastar las opciones realizadas con las reali-zables y caracterizar las convenciones de uso ya que es, simultáneamente, el proceso y el producto que se obtiene por medio de la interacción de dos contextos que son su condición de posibilidad: el contexto cognitivo-social y el contexto socio-cultural. Proceso, desde el punto de vista de su constitución; producto, desde el punto de vista de su análisis.

El contexto cognitivo está representado por el sistema de opciones disponibles que muestra la variabilidad como característica inherente y potencial del lenguaje y los mecanismos suposicionales que permiten alma-cenar información y llevar a cabo inferencias. El contexto socio-cultural está representado fundamentalmente por los géneros discursivos que involucran lo que la gramática sistémica denomina campo, tenor y modo (Halliday, 1978; Halliday y Hasan, 1976; Martin, 1992) pero no se agotan en ellos.

El proceso de producción discursiva involucra necesariamente optar en función del género. Esta dupla opción /género no constituye una dico-tomía ya que el discurso aparece como el elemento en el que las opciones se realizan y las matrices genéricas pueden verificarse.

Tres perspectivas, entonces, permiten dar cuenta del AD. Ellas son: a) gramatical, b) discursiva, c) crítica. La primera reconoce como su caracte-rística dominante la variabilidad entendida a partir del sistema de opciones disponibles que representa. La segunda, la negociabilidad entendida a partir de la combinación de las opciones realizadas, es decir, recursos en forma de estrategias discursivas. La tercera, la adaptabilidad entendida a partir de su inscripción socio-histórico-cultural a partir de la interpretación crítica que se lleva a cabo. Las tres son complementarias y no suponen jerarquización sino focalización. La gramática privilegia la descripción de los recursos; el análisis del discurso, la explicación de cómo operan las estrategias; y el análisis crítico, la interpretación a partir de los efectos que las series de discursos tienen dentro de la sociedad.

En esta intersección proponemos establecer una correlación entre gra-mática, registro y género a partir de una reformulación parcial (Menéndez, 1997) de las características constitutivas de la perspectiva pragmática (Verschueren, 1995, 1999).

Las tres unidades que las representan serían: el texto, el discurso y la serie discursiva, como se presentan en el Cuadro 1:

63

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

Cuadro 1: Perspectivas, unidades y elementos que se analizan

Perspectivas Característica Disciplina AlcanceCaracterísticas

del alcanceUnidad

de análisis

Elementos que se

analizan

Gramatical Variabilidad Gramática Descriptivo Sistema de opciones disponibles

Texto Paradigmas (grados de especifici-dad)

Discursiva Negociabilidad AD Explicativo Opción realizada como recurso de una estrategia

Discurso Combi-nación de recursos en forma de estrategias discursivas

Crítica Adaptabilidad ACD Interpreta-tivo

Interpretación crítica del uso estratégico

Serie discursiva

Géneros discursivos

Las tres son complementarias y no suponen jerarquización sino focaliza-ción. Están representadas por tres disciplinas que representan los objetos que cada una de ellas privilegia: la gramática, el análisis del discurso y el análisis crítico del discurso.

La focalización pasaría por el hecho de que la gramática privilegia la des-cripción del sistema; el análisis del discurso, la explicación de cómo operan las estrategias y; el análisis crítico, la interpretación a partir de los efectos que las series de discursos tienen dentro de la sociedad.

Inscribimos nuestra propuesta en el Análisis Estratégico del Discurso (antes Análisis pragmático del discurso (Menéndez, 1995, 1997); AED, de aquí en más). Este enfoque adopta una perspectiva que sostiene que el funcionamiento socio-cognitivo-histórico-cultural de los discursos debe explicarse en términos de estrategias.

Esto supone, en términos generales, que mientras las lenguas son descriptas gramaticalmente como sistema de recursos para significar (Halliday, 1978), el análisis del discurso lo hace como conjuntos de estrategias discursivas.

Distinguimos cuatro unidades de análisis complementarias: cláusula, texto, discurso y serie discursiva. Tomamos en este caso como sistema de base, el verbal.

Definimos cláusula como el lugar en el que se proyectan simultánea-mente las tres funciones del lenguaje: la ideativa, la interpersonal y la textual (Halliday, 1985). La identificación de la cláusula la llevamos a cabo a partir de la presencia explícita o implícita de procesos (verbos) tanto conjugados como no conjugados. La aparición de una forma verbal determinará, en principio, el alcance de una cláusula y está servirá como principio de segmentación de los textos que analizaremos.

64

12 (1)

Definimos texto solamente como el conjunto de relaciones semánti-cas cohesivas (Halliday y Hasan, 1976) que realizan las cláusulas como la unidad gramatical. Definimos discurso como sujeto discursivo más texto (Menéndez, 1997). El sujeto discursivo es entendido como una construc-ción que se produce en el discurso y que incorpora lo que denominamos la dimensión pragmática.La cláusula es una unidad estructural básica; el texto es una unidad semántico-gramatical definida por una propiedad intratextual denominada cohesión. El discurso, una unidad interaccional definida por una propiedad interdiscursiva denominada coherencia. Las relaciones textuales pueden analizarse en forma aislada y permiten describir relaciones semánticas que operan entre los elementos que las conforman. Las relaciones discursivas son ilimitadas y están determinadas por las estrategias discursivas que el sujeto pone en funcionamiento dentro de una interacción determinada. Establecemos, por lo tanto, una separación operativa entre el texto, como unidad semántico-gramatical y el discurso como unidad pragmática-discursiva.

Definimos serie discursiva (Menéndez, 1997) como un conjunto de dis-cursos. Es un constructo teórico-analítico que depende fundamentalmente del recorte que lleva a cabo el analista a partir de una serie de características que permiten agrupar las interacciones (y los discursos que las constituyen) en función de determinadas características: i) tópico común; ii) identidad de sujeto discursivo; iii) identidad de audiencia o destinatario; iv) identidad de registro; v) identidad de género. Estas características no son mutuamente excluyentes sino, por el contrario, pueden y suelen complementarse. La serie discursiva limita y permite fundamentar una interpretación determinada sobre otras posibles, en función de las relaciones interdiscursivas que se establecen entre los discursos que forman parte de ella.

3. Fundamentos del planteo multimodal

La multimodalidad puede definirse como una perspectiva para el análisis discursivo (Jewitt, 2009). El enfoque multimodal sostiene que las opciones no se dan solamente en el plano del lenguaje verbal sino simultá-neamente junto con otros sistemas de opciones que se realizan junto con él. Hay, por lo tanto, sistemas de opciones disponibles y conjuntos de recursos realizados. Estos son los modos que interactúan entre sí y hacen posible que un discurso sea interpretado como una unidad semántico-discursiva y estratégicamente analizable.

Los distintos sistemas semióticos serían las distintas gramáticas de los diversos sistemas que entran en una semiótica social. Cada uno de ellos puede definirse como una potencialidad que se representa como una paradigmática, es decir, como una reconstrucción que el analista hace a partir del análisis discursivo. Las paradigmáticas representan las distintas

65

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

opciones posibles que conforman todos los sistemas que están representados por todos los discursos de una determinada cultura. Debe aclararse que las especificidades de cada sistema son propias de ellos. No hay isomorfismo con el sistema verbal salvo en el hecho de conformar una paradigmática.

Cada paradigmática se realiza a partir de una sintagmática, es decir, un conjunto de opciones, un modo, que necesariamente se combina con otros modos que constituyen el discurso efectivamente realizado.

Los sistemas son paradigmáticas disyuntivas (X o Y). Las estructuras suponen la complementación de los ejes de la simultaneidad y de la sucesión. El discurso, desde la perspectiva multimodal, puede caracterizarse como la simultaneidad en la sucesión. En consecuencia, un lenguaje es siempre conjunto de recursos que se describe, en el momento de su instanciación, tanto sintagmáticamente como paradigmáticamente; la integración modal no supone privilegios sino integración simultánea de ambos ejes.

Los modos, por lo tanto, interactúan entre sí y son los que hacen posible que un discurso sea analizado en función de sus estrategias para poder ser interpretado. El modo, en consecuencia, nunca aparece aislado; siempre se da en relación con otros modos. Es la interacción simultánea de los modos lo que caracteriza al texto desde el punto de vista multimodal. No hay jerarquización de sistemas ni de modos a priori. El contexto situacional y cultural es integrado de manera efectiva ya que los “modos” cubren lo que en las tradiciones de las lingüísticas contextualmente dependientes suelen aparecer como elementos extra-verbales o para-verbales

Puede afirmarse, entonces, que el enfoque multimodal es una necesaria precisión del AD ya que el discurso aparece siempre como una unidad com-pleja, multimodal en la que se pone en primer plano el análisis discursivo como la realización del registro en el que una situación se inscribe. Eso supone ver las diferentes variedades de uso de los diferentes modos en fun-ción de la finalidad comunicativa que persiguen en una inscripción efectiva.

4. Estrategias discursivas

Entendemos que analizar discursos es básicamente analizar conjuntos de estrategias discursivas (Menéndez, 1997, 2000, 2005). Ellas permiten describir recursos, explicar su combinación e interpretar su alcance. Nos interesa, por lo tanto, mostrar cómo el enfoque estratégico permite analizar la multimodalidad a partir de la combinación de los diferentes recursos que despliegan cada uno de los modos que constituyen un determinado discurso. El principio que permite abordar el análisis del discurso es el análisis de las estrategias discursivas. Ellas son el principio de explicación e interpretación del funcionamiento socio-histórico de los discursos (Menéndez, 2000, 2005).

Importa, entonces, caracterizar qué es una estrategia discursiva. La defi-nimos como la reconstrucción analítica de un plan de acción que el hablante/

66

12 (1)

escritor, en tanto sujeto discursivo, pone en funcionamiento cuando combina un conjunto de recursos de diferentes modos con el objeto de obtener una finalidad interaccional particular.

Una serie de precisiones se imponen. El enfoque estratégico reconstruye una práctica; no pretende ser esa práctica ni reemplazarla. No pretendemos decir que el hablante hace lo que proponemos ya que establecemos una clara diferenciación entre el hablante como sujeto empírico y el sujeto discursivo que es el objeto de la reconstrucción analítica. Es importante entender, entonces, que cuando decimos que el hablante en tanto sujeto discursivo lleva a cabo un plan de acción nos referimos a esa entidad que es operativamente válida en función de nuestro objeto. Por lo tanto, el análisis estratégico no explica lo que el hablante efectivamente quiso hacer en una situación determinada cuando produce un discurso sino que reconstruye lo que el sujeto discursivo (constructo teórico-analítico que se conforma en el discurso) pone en funcionamiento al combinar diferentes clases de recursos.

Los recursos son las opciones efectivamente seleccionadas en cada uno de los modos que aparecen simultánea y sucesivamente en el discurso. Esto significa que cada sistema semiótico tiene independencia virtual, es decir, se construye a partir de la reconstrucción analítica. Ahí tenemos la prioridad teórica de la paradigmática que podemos redefinir como el conjunto de sistemas semióticos que son la condición de posibilidad de los discursos. Pero, al mismo tiempo, tenemos también la prioridad práctica dada por las opciones elegidas de manera efectiva, los recursos que siempre aparecen combinados e interactuando entre ellos. El análisis que proponemos da cuenta de esta efectiva interacción a partir de la integración de esos recursos.

Podemos poner como ejemplo el sistema verbal. Tenemos una para-digmática conformada por los diferentes paradigmas especificados. Y una sintagmática realizada a partir de dos tipos de recursos: 1) gramaticales y 2) pragmáticos. Los recursos gramaticales realizan la gramática de una lengua a partir de los sistemas de transitividad, modo y tema (Halliday, 1987; Halliday & Matthiessen, 2004) y de las relaciones cohesivas (Halliday y Hasan, 1976). Los recursos pragmáticos realizan la pragmática de una lengua determinada al permitir establecer los diferentes aspectos que el sujeto discursivo pone en funcionamiento cuando produce un discurso. Los postulamos en términos de las siguientes dimensiones: 1) la dimen-sión ilocucionaria (Austin, 1962) que da cuenta del dominio accional de los discursos; 2) la dimensión suposicional que da cuenta del conjunto de supuestos e inferencias que condicionan los discursos (Sperber y Wilson, 1986); 3) la dimensión indireccional que da cuenta de los diferentes grados de distancia (Brown y Levinson, 1987); 5) la dimensión evaluativa que da cuenta de dominio de juicio que los diferentes recursos conllevan (Martin y White, 2005).

67

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

5. Un ejemplo: análisis estratégico de un afiche cinematográfico

Veremos la estrategia que denominamos “Diseñar un afiche cinemato-gráfico”, aplicada al caso de un afiche de la película Transamerica (Figura 1), en el cual se pueden claramente distinguir los tres componentes centrales del análisis que proponemos y que pueden esquematizarme de la siguiente manera:

Cuadro 2: Elementos que componen la estrategia

Diseñar un afiche de una película

Modos (interacción de)

• Verbal

• Color

• Distribución de los objetos

• Plano

Registro Género

Figura 1: afiche original del largometraje Transamerica

En primer lugar, describiremos cada uno de los modos intervinientes.

i) Modo verbal

68

12 (1)

Figura 2: Modo verbal. Detalle de las cláusulas

El modo verbal está conformado por cuatro cláusulas declarativas afirmativas. La número 1 utiliza un proceso relacional en la que aparece el “contenido” a partir del que debe o puede inferirse el tema de la película. La frase es general, pero no por eso deja de ser específica ya que se explicará en función de los recursos de los otros modos intervinientes. La cláusula 2 muestra el nombre de la protagonista y el título de la película con una elisión verbal. En la 3 se repite el mismo procedimiento, la elisión (en este caso nominal y verbal) para mostrar la fecha de estreno y en 4 otra elisión (también nominal y verbal) señala que los nombres en los extremos perte-necen a las compañías productoras de la película.

ii) Modo color

Figura 3: Modo color. Detalle del uso del modo color

El modo color se distribuye con una organización claramente delimitada en la que aparecen dos colores, el rosa y el celeste, que oponen cultural-mente la distinción biológica entre los dos sexos (masculino y femenino). El rosa aparece en la pared; el celeste en la puerta de los baños; el azul en

69

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

el vestido de la figura, las letras de la cláusula 1 y en parte del nombre de la película (America). El violeta, que une los dos colores anteriores, aparece en el moño del pelo de la figura humana que nos da la espalda, la camisa que le cubre la cintura y el prefijo del título (trans-). El blanco y el negro neutralizan los íconos identificadores de los baños, el nombre de la prota-gonista y las productoras.

iii) Modo distribución de objetos

Figura 4: Modo distribución de objetos. Detalle de la distribución

La distribución de los objetos es sencilla. Hay una simetría entre dos puertas que claramente identifican dos baños a partir de los íconos que consagran la división tradicional de los sexos claramente señalada. Sólo en la de la izquierda se ve la manija que permite su apertura.

iv) Modo plano: ubicación de la figura humana

Figura 5: Modo plano. Ubicación de la figura humana

70

12 (1)

La ubicación de la figura humana en un plano general de espaldas a los espectadores, que focaliza la atención en función de su importancia, divide el espacio y permite describir diferentes posturas simultáneamente. La cabeza muestra una leve inclinación hacia la puerta del baño femenino; el pie derecho, hacia la del baño masculino. El pie izquierdo está ubicado en una dirección que marca ir más allá de los límites de ese espacio; la sombra que permitirían proyectar ambos pies marca ir más allá pero en la dirección opuesta.

La descripción de los recursos que componen cada uno de los modos permite explicar su funcionamiento a partir de su combinación. Es en esa combinación en los que la estrategia se lleva a cabo. Hay una correlación evidente entre cada uno de los recursos descriptos en su integración discursiva. Y esa correlación supone su combinación selectiva. La naturaleza multimodal del discurso queda así ampliamente justificada a partir de la organización que su co-ocurrencia estratégica habilita.

Hay un predominio de los aspectos visuales sobre los lingüísticos. Algo evidente en el registro de ese género. Estos últimos están reducidos al mínimo y pueden explicarse en función de la combinación de los otros que marcan, claramente, el diseño del afiche, modo preponderante que explica la estrategia a partir de los recursos seleccionados.

La combinación de una figura humana, una mujer por su características físicas y de vestuario, ubicada de una manera particular frente a un espacio determinado, las puertas de dos baños, la que permite explicar el grado de complemento de sus posturas, los colores, la cláusulas.

A partir de la descripción de los recursos y su combinación estratégica, se puede justificar el alcance interpretativo del uso de esa estrategia en un registro particular (el afiche que siempre es un elemento de publicidad, es decir, de persuasión explícita para conseguir una finalidad expuesta de ma-nera evidente (en este caso la de atraer público) y en un género particular, el cinematográfico, en el que se espera que el afiche tenga el suficiente atractivo y que condense, de alguna manera, las características fundamentales de la película promocionada.

El ejemplo presentado es, creemos, claro por su efectividad. Independientemente del conocimiento que se pueda tener o no lo de la película, el afiche se concentra en una situación simple que conlleva una serie de complejidades a partir de cómo están organizados los elementos que la componen. La situación: una mujer va a entrar al baño; la complejidad, la duda que supone la elección de la puerta (del sexo) que no es sino una imagen de esa mujer cuya sexualidad aparece necesariamente en conflicto. El prefijo “trans” y sus asociaciones evidentes refuerzan ese viaje que debe hacer a través de “América” (el país) y de su persona.

71

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

6. ConclusionesNos hemos propuesto demostrar que el enfoque estratégico es pertinente

para analizar textos desde una perspectiva multimodal. Esa pertinencia se justifica a partir de mostrar el análisis llevado a cabo (que es parcial y pretende ser simplemente un ejemplo puntual) que el AD siempre ha trabajado (más allá de las exclusiones que esto haya podido suponer) multimodalmente. Esto implica que un enfoque multimodal advierte, de manera evidente, que el lenguaje verbal no puede analizarse aisladamente de los otros modos in-tervinientes, ni que estos son subsidiarios ni marginales a él sino que intenta ponerlo en práctica de una manera efectiva.

Analizar el lenguaje en uso supone, entonces, tomar en consideración la interacción y jerarquización de los modos intervinientes. Esto conlleva una ventaja y un desafío.

La ventaja –al menos desde el punto de vista que hemos señalado aquí– es que contamos con una teoría lingüística pero semióticamente adecuada, la sistémico-funcional, que permite esta puesta en funcionamiento del análisis multimodal del discurso.

El desafío es mostrar que a partir de un conjunto de conceptos claros, precisos y claves (paradigmática, sintagmática, opción) podemos analizar los diferentes modos sin caer en la copia del modo verbal (más allá de su hegemonía histórica y su complejidad evidente). Si bien cada uno de los modos reconocerá una paradigmática específica, esto no implica que su constitución se lleve a cabo del mismo modo que la del lenguaje verbal. El desafío también opera sobre el dominio del modo verbal, su hegemonía. Esta perspectiva acentúa su impor-tancia en relación con los otros modos y pone en primer plano la necesidad de ver cómo se ponen en relación los modos con sus jerarquías evidentes que aparecen limitadas por el contexto realizado, fundamentalmente, por el género.

Intentamos demostrar que esa ventaja y ese desafío pueden abordarse a partir del relevo de estrategias de discurso que ponen en funcionamiento efectivo la interacción modal con el objeto de explicar cómo ellas operan para justificar la interpretación discursiva.

Finalmente, el análisis multimodal del discurso pone en evidencia cómo los sistemas no sólo se conforman sino qué finalidad persiguen. Se parte, entonces, de una doble dimensión gramatical (paradigmática como opción, sintagmática como recurso) y la dependencia discursiva (los recursos se combinan entre sí). Analíticamente, entonces, tenemos las gramáticas y los modos. Es decir, op-ciones que se realizan en recursos, recursos que se combinan en estrategias. La diferencia con el planteo discursivo tradicional se centra en el hecho de que las gramáticas y los modos tienen especificidades diferentes y que la interpretación que de ellas se obtiene siempre es un proceso que supone la reconstrucción analítica de las estrategias discursivas.

72

12 (1)

referencias bibliográficas

austin, J. L. (1962). How to do things with words. Oxford: Oxford University Press.bajtin, m.(1944[2008]).‘El problema de los géneros discursivos’, en Estética de

la creación verbal, pp. 245-290. México: Siglo XXI.brown, P. & levinson, S. (1987). Politeness. Cambridge: Cambridge University

Press.eggins, s. (2004). Introduction to Systemic-Functional Linguistics. London: Con-

tinuum.firth, j.r. (1957). Papers in Linguistics, 1934-1951. London: Oxford University

Press.Halliday, M. (1970). ‘Language structure and language function’, en J. Lyons (Ed.)

New Horizons of Linguistics, pp. 140-164. Harmondsworth, UK: Penguin.halliday, m. (1978). El lenguaje como semiótica social. México: FCE.halliday, m. (1985). Introduction to functional grammar. London: E. Arnold.halliday, m. (1987). ‘Spoken and written modes of meaning’, en R. Horowitz

& S. Jay Samuels (Eds.) Comprenhending Oral and Written Language, pp. 55-87. San Diego, CA.: Academic Press.

halliday, m. (2002). On Grammar. Collected Works.Volume 1. London: Con-tinuum.

halliday, m. (2004). On Language and Linguistics. Collected Works. Volume 3. London: Continuum.

halliday, m. & hasan, r. (1976). Cohesion in English. London: Longman.hasan, r. (1995). ‘The conception of context in text’, en P. Fries & M. Gregory

(Eds.) Discourse in Society: Systemic Functional Perspectives, 183-283. New Jersey: Ablex.

halliday, m. & matthiessen, cH. (2004). An Introduction to the Functional Grammar. London: Edward Arnold

hjelmeslev, L.(1986[1943]).Prolegómena para una teoría del lenguaje. Madrid: Gredos.

Kress, G. (2009). Multimodality. A social semiotic approach to contemporary com-munication. London: Routledge.

Jewitt, c. (2009). The Routledge Handbook of Multimodal Analysis. London: Routledgde.

lavandera, b. (1985). Curso de lingüística para el análisis del discurso. Buenos Aires: CEAL.

leech, g. (1983). Principles of pragmatics. London: Longman.levinson, s. (1983). Pragmatics. Cambridge: Cambridge University Press. malinowsKy, b. (1923). ‘The problem of meaning in primitive languages’, en K.

Ogden & I. A. Richards The meaning of meaning, pp.451-510. London: Kegan Paul.

martin, J. (1984). ‘Language, register and genre’, en C. Frances (Ed.) Children writing: Reader, pp. 21-30. Geelong, Vic.: Deaking University Press.

73

Salvio Martín Menéndez: Multimodalidad y estrategias discursivas: un abordaje metodológico

martin, J. (1985). ‘Process and text: Two aspects of human semiosis’. Applied Linguistics. Field of discourse: Theory and application, 1: 45-55.

martin, j. (1992). English text: System and Structure. Amsterdam: Benjamins.martin, j. (1997). ‘Analysing genre: Functional parameters’, en F. Christie y J.

R. Martin (Eds.) Genre and institutions, pp. 3-39. London: Continuum. martin, j. r. & white, P.R.R. (2005). The Language of Evaluation. Appraisal in

English. New York: Palgrave MacMillan.menéndez, s. m. (1995). ‘Estrategias discursivas: un principio de análisis prag-

mático del discurso’. En Actas del X Congreso de la ALFAL, pp. 537-547. México: UNAM.

menéndez, s.M. (1997). Hacia una teoría del contexto discursivo. Tesis doctoral inédita, Facultad de Filosofía y Letras, Universidad de Buenos Aires.

menéndez, s. M. (2000). ‘Estrategias discursivas: principio metodológico para el análisis pragmático del discurso’, en J.J. de Bustos y P. Charaudeau (Eds). Lengua, discurso, texto (I Simposio Internacional de Análisis del discurso), pp.926-945. Madrid: Visor.

menéndez, s. m. (2005). ‘Gramática, análisis del discurso e interpretación crítica: las relaciones no tan evidentes’, en Proceedings of the Internacional Conference on Critical Discourse Analysis. Valencia: Universitat de Valencia. Edición en CD.

sPerber, d. & wilson, D (1986). Relevance. Communication and Cognition. Harvard: Harvard University Press.

van leeuwen, T. (2005). Introducing Social Semiotics. London: Routledge.verschueren, J. (1995). ‘The pragmatic perspective’, en J. Verschueren, J-O

Östman y J. Bloomaert (Eds.) Handbook of pragmatics. Manual, pp.1-20. Amsterdam: Benjamins.

verschueren, j. (1999). Understanding Pragmatics. London: Arnold.

salvio martín menéndez es profesor, licenciado en Letras por la Universidad de Buenos Aires y doctor por la misma Universidad. Es Profesor Titular de Lingüística I y Lingüística II de la carrera de Letras de la Facultad de Humanidades de la Universidad Nacional de Mar del Plata. Profesor asociado a cargo de la titularidad de Lingüística General y Gramática Textual de la carrera de Letras de la Facultad de Filosofía y Letras de la Universidad de Buenos Aires. Es investigador independiente del CONICET. Actualmente es Director del Instituto de Lingüística de la Facultad de Filosofía y Letras de la Universidad de Buenos Aires. Sus áreas de especialización son lingüística sistémico-funcional, pragmática y análisis del discurso.

Correo electrónico: salviomenendez@gmail.com

75ALED 12 (1), pp. 75-97

ARTÍCULO

KAY L. O’HALLORAN2

National University of SingaporeTraducción: Claudia Gabriela D’Angelo3

Resumen. El análisis del discurso multimodal (ADM) constituye un paradigma emergente en el campo de los estudios del discurso que amplía el estudio del lenguaje per se al estudio del lenguaje en combinación con otros recursos. En este trabajo se exponen los motivos por los que emerge este campo en el área de la lingüística, se plantean los principales desafíos y la multiplicidad de enfoques de los análisis de discursos multimodales y se analizan en detalle los conceptos específicos. Luego, se desarrolla el análisis multimodal de un segmento de discurso televisivo. A modo de conclusión, se considera que el principal desafío del ADM es resolver los detalles y la complejidad que requiere anotar, analizar, investigar y recuperar los patrones semánticos multimodales. Por este motivo se propone, como uno de los posibles métodos de abordaje, desarrollar plataformas mediáticas digitales interactivas. Por último, se considera que solo será posible avanzar hacia el objetivo de comprender los patrones y las tendencias de la tecnología, los textos, los contextos y la cultura trabajando de manera colaborativa e interdisciplinaria.

Palabras clave: análisis del discurso, multimodalidad, discurso televisivo, perspectiva sistémico-funcional.

Resumo. A análise do discurso multimodal (ADM) é um paradigma emergente nos estudos do discurso que amplia o estudo da linguagem per se para o estudo da lingua-gem em combinação com outros recursos. Neste trabalho, discutem-se as principais preocupações da ADM, as razões para o surgimento deste campo na lingüística, assim como a multiplicidade de enfoques das análisis de discursos multimodais desenvolvidos e, a seguir, são analizados em detalhe conceptos específicos da ADM. A partir daí, um exemplo de análise multimodal é apresentado: um segmento de um debate político transmitido pela televisão. O principal desafio da ADM é de lidar com os detalhes e a complexidade inerentes à anotação, análise, investigação e recuperação dos padrões semânticos presentes em fenômenos multimodais complexos. Por isso, um dos possíveis métodos de abordar essa complexidade se dá pelo desenvolvimento de plataformas mediáticas digitais interativas desenhadas especificamente para a ADM. De qualquer maneira, o caminho adiante requer necessariamente a colaboração interdisciplinar para atingir os objetivos mais amplos de compreensão dos padrões e tendências em tecnologias, texto, contexto e cultura.

Palavras-chave: análise do discurso, multimodalidade, discurso da televisão, perspectiva sistêmico-funcional.

Análisis del discurso multimodal1

Recibido: 26 de marzo de 2012 • Aceptado: 5 de agosto de 2012.

76

12 (1)

abstract. Multimodal discourse analysis (MDA) is an emerging paradigm in dis-course studies which extends the study of language per se to the study of language in combination with other resources. In this paper, the major concerns of MDA, the reasons for the emergence of this field in linguistics, and the variety of approaches which have been developed are discussed, before concepts specific to MDA are exa-mined in detail. Then, a sample multimodal analysis is presented: an extract from a television multiparty debate. The major challenge of MDA is managing the detail and complexity involved in annotating, analyzing, searching and retrieving multimodal semantics patterns within and across complex multimodal phenomena. Thus, one method of managing this complexity involves the development of interactive digital media platform specifically designed for MDA. In any case, the path forward must necessarily involve interdisciplinary collaboration if the larger goals of understanding patterns and trends in technologies, text, context and culture are to be achieved.

Key words: discourse analysis, multimodality, television, systemic-functional perspectives.

‘En verdad, podemos definir la cultura como un conjunto de sistemas semióticos, como conjuntos

de sistemas de significados que se interrelacionan’

(Halliday & Hassan, 1985:4)

Introducción

El análisis del discurso multimodal (de aquí en más, ADM) constituye un paradigma emergente en el campo de los estudios del discurso que amplía el estudio del lenguaje per se al estudio del lenguaje en combinación con otros recursos tales como las imágenes, el simbolismo científico, la gestualidad, las acciones, la música y el sonido. En la actualidad, la terminología que utiliza el ADM es algo laxa dado que los conceptos y las formas de abordaje progresan continuamente en este campo de estudio relativamente nuevo. Por ejemplo, para hacer referencia al lenguaje y a los otros recursos que se integran para crear significado en los fenómenos ‘multimodales’ (o ‘multisemióticos), como los materiales impresos, los videos, los sitios web, los objetos tridimensionales y las actividades cotidianas, se utilizan las expresiones ‘recursos semióticos’, ‘modos’ y ‘modalidades’. Esto sucede incluso con el propio ADM, al que se hace referencia como ‘multimodalidad’, ‘análisis multimodal’, ‘semiótica multimodal’ y ‘estudios multimodales’.

Para evitar confusiones, en este artículo se utilizará la expresión recur-so semiótico para describir los recursos (o modos) (es decir el lenguaje, las imágenes, la música, la gestualidad y la arquitectura) que se integran en forma transversal en modalidades sensoriales (por ejemplo visual, auditiva, táctil, olfativa, gustativa, quinésica) en los textos, discursos y actividades multimodales, a los que llamaremos colectivamente fenómenos multimodales. Siguiendo a Halliday (1978:123), los sistemas semióticos son ‘sistema(s) de

77

Kay L. O’Halloran: Análisis del discurso multimodal

significados que constituyen “la ‘realidad’ de una cultura”. El medio es el canal a través del que se materializan los fenómenos multimodales (es decir, los periódicos, la televisión, la computadora o diversos objetos y hechos ma-teriales). A continuación se plantean los principales desafíos que enfrenta el ADM, los motivos por los que emerge este campo en el área de la lingüística, la multiplicidad de enfoques que se han desarrollado para, a continuación, analizar en detalle los conceptos específicos del ADM y presentar un ejemplo de análisis multimodal.

El ADM se ocupa de la teoría y del análisis de los recursos semióticos y de las expansiones semánticas que tienen lugar a medida que, en los fenómenos multimodales, se combinan las diferentes opciones semióticas disponibles. Las relaciones ‘inter-semióticas’ (o inter-modales) que surgen a partir de la interacción de las opciones semióticas, conocidas como intersemiosis, consti-tuyen un área central de los estudios multimodales (Jewitt, 2009a). El ADM también se ocupa del diseño, de la producción y de la distribución de los recursos multimodales en contextos sociales (van Leeuwen, 2008) y de la resemiotización (Iedema, 2001b, 2003) de los fenómenos multimodales que tiene lugar a medida que se despliegan las prácticas sociales. Los principales desafíos que enfrenta el ADM incluyen desarrollar teorías y marcos analíticos para los recursos semióticos no lingüísticos, modelar los procesos semióticos sociales (en especial la intersemiosis y la resemiotización) e interpretar el complejo espacio semántico que se despliega y articula de manera transversal en el interior de los fenómenos multimodales.

Hay múltiples razones que justifican el cambio paradigmático que implica que nos alejemos del mero estudio del lenguaje y que nos orientemos al estudio de la integración del lenguaje con otros recursos. Primero, que los analistas del discurso que han intentado interpretar la amplia gama de prácticas discursivas humanas se han encontrado con la necesidad de describir los sentidos que surgen del despliegue de múltiples recursos semióticos en diversos medios, incluyendo las tecnologías digitales interactivas contemporáneas. Segundo, que las tecnologías para desarrollar nuevos abordajes metodológicos para el ADM, como por ejemplo las herramientas de anotación multimodal (Rohlfing et al., 2006), están actualmente a nuestra disposición y son accesibles. Y por último, que la investigación interdisciplinaria se ha tornado más habitual debido a que científicos provenientes de distintas disciplinas buscan resolver problemas similares. Luego de atravesar ‘una era en la que cada disciplina tenía su propio campo de estudio, su propio concepto de teoría y su propio conjunto de métodos’, el siglo veinte se ha constituido para los investigadores en ‘la era de los temas’ (Halliday, 1991: 39) orientados a resolver problemas particulares. El ADM es un ejemplo de ese cambio de paradigma y tiene la responsabilidad de realizar un aporte fundamental con respecto al análisis multimodal, a la investigación y a la recolección de información.

78

12 (1)

Diversas formas de abordar el ADM

Gunther Kress y Theo van Leeuwen (1996 [2006] y Michael O’Toole (1994 [2010] proporcionaron los fundamentos de la investigación multi-modal en las décadas de 1980 y 1990 siguiendo la teoría del lenguaje como semiótica social de Michael Halliday (1978; 1985 [1994, 2004]) para dar forma al potencial de significado de las palabras, los sonidos y las imágenes como conjuntos de sistemas inter-relacionados y sus estructuras Kress y van Leeuwen (2006) exploraron las imágenes y el diseño visual y O’Toole (2010) aplicó el modelo sistémico funcional de Halliday al análisis semiótico de muestras de arte, pintura, escultura y arquitectura.

La preocupación de Halliday (1978; Halliday & Hassan, 1985) tanto por el texto como por el contexto, por la instancia y el potencial, está reflejada en estos trabajos fundacionales. Es decir, Kress y van Leeuwen (2006) adoptan un abordaje contextual (de arriba hacia abajo) orientado en particular hacia la ideología y derivado de principios generales del diseño visual que se ilustran a través del análisis de textos; mientras que O’Toole (2010) desarrolla un enfo-que ‘gramatical’ (de abajo hacia arriba) trabajando estrechamente con ‘textos’ específicos (por ejemplo, pinturas, diseños arquitectónicos y esculturas) para derivar en marcos teóricos que pueden ser aplicados a otros trabajos. Las inves-tigaciones posteriores se han basado en estos dos enfoques y los han extendido a nuevas áreas de análisis. Por ejemplo, se han desarrollado enfoques contex-tuales para estudiar la oralidad, el sonido y la música (van Leeuwen, 1999), los textos científicos (Lemke, 1998), los hipertextos (Lemke, 2002), las acciones y los gestos (Martinec, 2002) y para realizar investigaciones en el área de la educación (Jewitt, 2006) y de la alfabetización (Kress, 2003). Además, a partir de enfoques gramaticales aplicados a las matemáticas (O’Halloran, 2005), los hipertextos (Djonov, 2007) y a una gama de otros textos multimodales (por ejemplo Bednarek & Martin, 2010) ha surgido una propuesta conocida como análisis del discurso multimodal desde una perspectiva sistémico-funcional (SF-MDA según sus siglas en inglés). Jewitt (2009b: 29-33) clasifica los enfoques contextuales y los enfoques gramaticales como ‘multimodalidad socio-semiótica’ y como ‘análisis del discurso multimodal’ respectivamente.

Estos enfoques proporcionan perspectivas complementarias debido a que derivan del enfoque socio-semiótico de Michael Halliday para el estudio de los textos, la sociedad y la cultura (ver Iedema, 2003) que ancla la crítica social en prácticas sociales concretas a través de tres principios fundamentales:

(1) La conceptualización del significado en tres estratos que relaciona caracte-rísticas de bajo nivel que aparecen en los textos (por ejemplo las imágenes y el sonido) con patrones semánticos de orden superior a través de conjuntos de sistemas lexicogramaticales inter-relacionados y, en última instancia, con contextos de situación sociales y con la cultura.

79

Kay L. O’Halloran: Análisis del discurso multimodal

(2) La teoría de las metafunciones, que modela el potencial de significado de los recursos semióticos en tres ‘metafunciones’ diferentes:

* el significado ideativo (es decir nuestra concepción del mundo) involucra:- el significado experiencial: la representación y la forma en que retratamos

la experiencia en el mundo,- el significado lógico: la construcción de relaciones lógicas en ese mundo;

* el significado interpersonal: la puesta en acción de las relaciones sociales y

* el significado textual: la organización del significado en forma de textos y unidades coherentes.

(3) La instanciación da cuenta de las relaciones entre las opciones concretas realizadas en los textos y el potencial sistémico, con subpotenciales inter-medios -registros- que aparecen como patrones de opciones realizadas en tipos de textos (por ejemplo, en conversaciones casuales, debates y trabajos académicos). La investigación multimodal se expandió rápidamente a partir de mediados

de los 2000 a medida que progresó el interés de los lingüistas sistémicos y de otros investigadores del lenguaje por explorar la integración del lenguaje con otros recursos. Se reconoció explícitamente que la comunicación es inheren-temente multimodal y que la alfabetización no se limita al lenguaje.

A partir de allí surgieron otras formas de abordar los estudios multimodales entre las que se incluyen los trabajos de Ron Scollon, Suzanne Wong Scollon y Sigrid Norris en el área del análisis interaccional (Norris, 2004; Norris & Jones, 2005; Scollon, 2001; Scollon & Wong Scollon, 2004), desarrollados para el análisis del discurso mediado que surge a partir de la sociolingüística interaccional y la comunicación intercultural y, también, el enfoque cognitivo desde el que Charles Forceville (Forceville & Urios-Aparisi, 2009) aborda el estudio de la metáfora multimodal basado en la lingüística cognitiva (Lakoff & Johnson, 1980). A estos trabajos se sumaron los que se desarrollaron desde el análisis crítico del discurso (Machin, 2007; van Leeuwen, 2008) basados en la semiótica social y en otras tradiciones críticas. En la actualidad continúa emergiendo una gran variedad de conceptos y marcos teóricos en el área de los estudios multimodales (ver Jewitt, 2009c) pero la mayoría tiene algún tipo de relación con uno o más de los paradigmas mencionados.

Las publicaciones recientes dan cuenta de la creciente popularidad del ADM (por ejemplo Baldry & Thibault, 2006; Bateman, 2008; Bednarek & Martin, 2010; Jewitt, 2009c; Unsworth, 2008; Ventola & Moya, 2009). No es sorprendente que se debata mucho acerca de la naturaleza de este campo emergente (Jewitt, 2009c). Y si bien la multimodalidad puede caracterizarse como ‘un espacio de investigación’ (Kress, 2009:54) (por ejemplo, del diseño visual, las muestras de arte, la matemática, los hipertextos y la educación, entre otras áreas) es evidente que necesitamos contar con teorías, descripciones y

80

12 (1)

metodologías específicas para el ADM (O’Halloran & Smith, en prensa) y que ya se han desarrollado algunas herramientas y marcos teóricos (por ejemplo Bateman, 2008; Bednarek & Martin, 2010; Lemke, 2009; O’Halloran, 2005; O’Toole, 2010).

Y en tanto espacio de investigación, los estudios multimodales propician la relación y la fertilización cruzada con otras disciplinas con las que comparten el mismo objeto de estudio. Incorporar conocimiento, teorías y metodologías de otras disciplinas presenta muchos problemas, entre los cuales no resulta menor la cuestión de proporcionar las herramientas adecuadas para emprender investigaciones que trascienden los límites disciplinares tradicionales.

Por otra parte, el desarrollo de teorías y prácticas específicas para el ADM potencialmente constituirá un aporte a otros campos de estudio, entre los que se incluye, fundamentalmente, la lingüística. En este sentido, el ADM ‘utiliza textos o tipos de textos para explorar, ilustrar, problematizar o aplicar cuestiones generales en los estudios multimodales, tales como los que surgen del desarrollo de marcos teóricos específicos para el estudio de los fenómenos multimodales o temas metodológicos’ (O’Halloran & Smith, en prensa). Este trabajo trata el ADM precisamente de este modo - como un nuevo campo de estudio que requiere de marcos teórico-metodológicos y de herramientas específicas que, a su vez, puedan ser aplicadas de manera transversal a otras disciplinas y campos de estudio.

Problemas analíticos y teóricos del ADM

Los problemas analíticos y teóricos del ADM incluyen:

(a) dar forma a los recursos semióticos que son fundamentalmente diferentes del lenguaje,

(b) dar forma y analizar las expansiones inter-semióticas de significado como opciones semióticas integradas en fenómenos multimodales,

(c) dar forma y analizar la resemiotización de los fenómenos multimodales en el despliegue de las prácticas sociales.

Estas problemáticas se examinarán a continuación por separado.

(a) Dar forma a los recursos semióticos que son funDamentalmente Diferentes Del lenguaje

Siguiendo a Halliday, el lenguaje puede teorizarse como un conjunto de sistemas interrelacionados, representados en forma de redes sistémicas, que se organizan en metafunciones de acuerdo a taxonomías de diferentes rangos o jerarquías (palabras, grupos de palabras, cláusulas, complejos de cláusulas y párrafos y textos (Martin, 2011). Los sistemas gramaticales vinculan palabras y significados en el estrato semántico (Martin, 2011). El

81

Kay L. O’Halloran: Análisis del discurso multimodal

modelo de Halliday también incluye aquellos sistemas que operan en el plano de la expresión (es decir, la grafología y la tipografía del lenguaje escrito y la fonología para la oralidad).

La mayoría de los recursos semióticos son esencialmente diferentes del lenguaje, sin embargo, los que se han desarrollado a partir del lenguaje (por ejemplo el simbolismo matemático, la notación científica y los lenguajes de programación computacional) mantienen una relación más estrecha en términos de gramaticalidad. Las imágenes difieren, por ejemplo, en que al-gunas partes se perciben como patrones organizados en relación con el todo, siguiendo las leyes de organización de la Gestalt. Y lo que es más, siguiendo la categorización de los signos de Charles Sanders Pierce, el lenguaje es un sistema simbólico de signos que no guarda ninguna relación con lo que se representa, mientras que las imágenes son icónicas porque representan algo a través de la similitud. Por lo tanto, los enfoques y los marcos analíticos basados en modelos lingüísticos han sido cuestionados (Machin, 2009). Sin embargo, los modelos adaptados de la lingüística, como el de O’Toole (2010), se han utilizado muy a menudo y con buenos resultados para analizar imágenes científicas y matemáticas, ciudades, edificios, museos y muestras de arte. La teoría gestáltica constituye la base teórica del modelo de O’Toole. Para la Gestalt las imágenes se componen de partes interrelacionadas en la compo-sición del todo. O’Toole (2010) traza superposiciones visuales de opciones sistémicas sobre la imagen, y sugiere la posibilidad de avanzar proponiendo una gramática definida visualmente.

La teoría gestáltica constituye la base de otros enfoques de análisis visual, incluyendo los enfoques computacionales para estudiar la percepción visual que involucra estructuras geométricas (por ejemplo puntos, líneas, planos y figuras) y el reconocimiento de patrones (por ejemplo, Desolneux, Moisan & Morel, 2008) y algebras semántico-visuales (por ejemplo Wang, 2009). Tal vez una de las claves de estas descripciones sea proporcionar un nivel abstracto intermedio, en el que los recursos de los niveles inferiores se relacionan con la semántica a través de gramáticas sistémicas. Sin embargo, el problema es que los sistemas organizados jerárquicamente en categorías, como aquellos desarrollados para el lenguaje, tienen limitaciones cuando se estudian recursos tales como imágenes, gestos, movimientos y sonido, que son de naturaleza topológica (Lemke, 1998, 1999). Van Leeuwen (1999, 2009) propone di-señar sistemas dentro de los recursos semióticos multimodales (como por ejemplo, color, tipografía, tamaño de la fuente, volumen, calidad y tono de la voz) considerándolos como conjuntos de parámetros con valores graduales en vez de taxonomías categoriales ordenados en términos de delicadeza (es decir, subcategorías con opciones más refinadas). En algunos casos, se ha cuestionado la existencia de un nivel gramatical intermedio para el caso de recursos como la música (por ejemplo, van Leeuwen, 1999).

82

12 (1)

(b) Dar forma y analizar las exPansiones intersemióticas De significaDo como oPciones semióticas integraDas en fenómenos multimoDales

La interacción de opciones semióticas en los fenómenos multimodales da lugar a expansiones semánticas en tanto se abre y se integra el potencial de significado de diferentes recursos, como es el caso de las relaciones entre texto e imagen (Bateman, 2008; Liu & O’Halloran, 2009; Martinec, 2005; Unsworth & Cleirigh, 2009), gestos y habla (Martinec, 2004) y lenguaje, imágenes y simbolismo matemático (Lemke, 1998; O’Halloran, 2008). Esta expansión semántica también está relacionada con la materialidad de los ar-tefactos multimodales, incluyendo la tecnología u otros medios involucrados (por ejemplo libros, medios digitales interactivos) (Jewitt, 2006; Levine & Scollon, 2004; van Leeuwen, 2005).

En los fenómenos multimodales se puede abordar la integración se-mántica desde el punto de vista de las metafunciones y considerar que los significados experienciales, lógicos, interpersonales y textuales interactúan atravesando elementos de diferentes rangos (por ejemplo grupos de palabras e imágenes). La multiplicación de significados resultante (Lemke, 1998) abre un complejo espacio semántico multidimensional en el que puede haber compresión de significados (Baldry & Thibault, 2006) y significados divergentes (e incluso en conflicto) (Liu & O’Halloran, 2009). De hecho, no hay motivo para suponer que en los fenómenos multimodales la integración semántica de las opciones semióticas es coherente.

La teorización total de los procesos y mecanismos de expansión semán-tica que surgen de la intersemiosis es una asignatura pendiente. Tal vez se requieran sistemas intersemióticos que superen los conjuntos de sistemas gramaticales interrelacionados para cada recurso y que operen como “meta-gramáticas”. Esta clase de sistemas intersemióticos podrían potencialmente vincular aquellas opciones que vinculan las opciones de distintas taxonomías jerárquicas para cada recurso, de modo que un grupo de palabras, por ejemplo, sea resemiotizado como un componente de una compleja narrativa visual, y viceversa. Uno de los principales problemas que enfrentan los analistas del discurso multimodal es la complejidad tanto de los procesos intersemióti-cos como de los espacios semánticos resultantes, particularmente en el caso de los textos dinámicos (por ejemplo, los videos) y de los hipertextos con hipervínculos (por ejemplo, Internet).

(c) Dar forma y analizar la resemiotización De los fenómenos multimoDales en el DesPliegue De las Prácticas sociales

El ADM también aborda la resemiotización de los fenómenos multimoda-les a través del tiempo y del espacio: ‘la [r]esemiotización se ocupa de la forma en que el significado cambia de contexto en contexto, de práctica en práctica,

83

Kay L. O’Halloran: Análisis del discurso multimodal

o de una etapa de una práctica a la próxima’ (Iedema, 2003: 41). Iedema (2003:50) trata la resemiotización en tanto proceso dinámico que enfatiza ‘las dimensiones materiales e historizadas de la representación’.

La resemiotización tiene lugar dentro del despliegue mismo del discurso multimodal (a medida que el discurso alterna entre los diferentes recursos utilizados) y también a través de los diferentes contextos a medida que las prácticas sociales se despliegan (por ejemplo, la forma en que se ejecutan las acciones que surgen de un documento sobre políticas). Desde una perspectiva gramatical, la resemiotización necesariamente involucra la reconstrucción de significados a medida que las opciones semióticas cambian en función de los cambios temporo-espaciales. En muchos casos, la resemiotización conlleva introducir nuevos recursos semióticos y puede resultar en una expansión metafórica de significados a medida que los elementos funcionales de un recurso semiótico se realizan utilizando otro recurso semiótico: por ejem-plo, el cambio del lenguaje a la imagen y al simbolismo matemático que se despliega en el discurso matemático. Este proceso tiene lugar a medida que las configuraciones lingüísticas que involucran, por ejemplo, participantes, procesos y circunstancias se visualizan como entidades. La resemiotización necesariamente tiene como resultado un cambio semántico, dado que las opciones de diferentes recursos semióticos no son conmensurables (Lemke, 1998).

Los procesos específicos del ADM, tales como la intersemiosis y la resemio-tización de fenómenos multimodales, se suman a la complejidad del espacio semántico al que debemos dar forma y analizar. De hecho, la esencia del ADM reside en abordar esta complejidad.

Ejemplo de análisis (ADM) de un texto4

Los conceptos específicos del ADM, es decir los recursos semióticos, la intersemiosis y la resemiotización, se ilustran a través del análisis de un segmento de un debate televisivo de diferentes partidos políticos: el segundo episodio del programa ‘Q&A: Adventures in Democracy’ (Preguntas y res-puestas: aventuras en democracia) de la Australian Broadcasting Commission (ABC) emitido el jueves 29 de marzo de 2008. El moderador es el reconocido periodista Tony Jones e integran el panel Tanya Plibersek (Ministro de Vivien-da y del Estatus de la Mujer durante el gobierno laborista nacional de Kevin Rudd), Tony Abbott (en ese entonces uno de los líderes de la bancada del Partido Liberal opositor y actualmente líder de la oposición en la Cámara de Diputados de Australia) y Bob Brown (Líder del Partido Verde Australiano). Si bien no participan en el segmento seleccionado, también integraron el panel Warren Mundine (Líder de los Pueblos Originarios y ex-presidente del Partido Laborista Australiano) y Louise Adler (Directora Ejecutiva y Editora General de la editorial Melbourne University Publishing).

84

12 (1)

El segmento que sigue (véase el original en inglés en el apéndice) mues-tra las interacciones entre Tony Jones, Tanya Plibersek y Tony Abbott sobre los documentos internos del gabinete que se filtraron e hicieron públicos. Los documentos trataban sobre la decisión del gabinete nacional a favor del esquema de Fuel-Watch para combatir el aumento del precio del petróleo y las objeciones que ese servicio de monitoreo oficial tenía con respecto a ese mismo esquema y que los documentos que se filtraron develaban (en la transcripción * indica superposición).

Tanya Plibersek ... Los documentos del gabinete son confidenciales para que los funcionarios de carrera se sientan cómodos al aconsejar con franqueza al gobierno de turno.

Tony Jones Bien. Tony Abbott, usted ha estado en las trincheras. Eso es algo justo, ¿verdad?

Tony Abbott Sí, claro, pero lo interesante es que el nuevo gobierno ya esté filtrando información, Tony. Me refiero a que normalmente pasan muchos años *antes de que - antes - antes de que un gobierno... bueno yo-

Tony Jones *sí, un poco - un poco como la coalición. Se filtra infor-mación en todos lados.

Tony Abbott Los gobiernos desgastados y de muchos años filtran infor-mación. Se supone que los gobiernos nuevos, con agudeza mental, hábiles e inteligentes no filtran información, y el hecho que este gobierno esté filtrando tanta información tan pronto es una señal muy preocupante.

El análisis multimodal incluye las interacciones entre el lenguaje oral, los recursos quinéticas (incluyendo la mirada, la postura corporal y la ges-tualidad) y los efectos cinematográficos (incluyendo el ángulo de cámara y el tamaño del cuadro) (ver también Baldry & Thibault, 2006; Iedema, 2001a; Tan, 2005, 2009). El siguiente análisis multimodal se presenta a modo de ejemplo. Se podría haber presentado un análisis lingüístico más abarcativo, además de incluir otros recursos semióticos (por ejemplo, la iluminación del estudio de filmación, el vestuario, la proxémia, la ubicación de los participantes, etc.). Y, además, las opciones semióticas se presentan en una tabla estática (ver Tabla 2) y no en un formato dinámico, lo que hu-biera permitido representar cómo se despliegan las opciones y los patrones.

Para el análisis del lenguaje (incluyendo la entonación) se utiliza el modelo sistémico funcional de Halliday (2004; Halliday & Greaves, 2008) y para la mirada y la acción quinética (Figura 1) así como para los ángulos, los movimientos de cámara y el encuadre (Tabla 1) se utiliza el

85

Kay L. O’Halloran: Análisis del discurso multimodal

modelo sistémico de Tan (2005, 2009). Además, se aplica el trabajo de van Leeuwen sobre la semiótica del ritmo de habla (por ejemplo, 1999). Las descripciones exhaustivas de estos modelos han sido publicadas y, por lo tanto, no se repetirán en este trabajo. El análisis multimodal del segmento con los cuadros esenciales en términos de saliencia puede verse en la Tabla 2. El análisis pone de manifiesto cómo las opciones multimodales de Tony Abbott, en particular las opciones lingüísticas, la entonación, los gestos y la postura corporal, funcionan en conjunto para reorientar la discusión sobre los documentos filtrados. Así, se pasa de discutir una cuestión legal a discutir una cuestión política con el objetivo de criticar y socavar el gobierno laborista de Kevin Rudd (Primer Ministro de Australia).

Figura 1. Redes sistémicas de los vectores de mirada y acción quinética (Tan, 2005: 45) (del original en inglés).

86

12 (1)

Tabla 1: Ángulos de cámara, movimientos de cámara y encuadre (Tan, 2009: 179) (del original en inglés)

Tabla 2: Análisis multimodal de ‘Documentos del gabinete que se filtraron’ (Sesión Q&A, ABC, martes 29 de mayo de 2008) (del original en inglés)

Tony Jones le dirige a Tony Abbott una proposición que finaliza con un interrogativo ¿verdad? (que explícitamente requiere una respuesta en particular) con respecto a la defensa que Tanya Plibersek hace de la manera en la que su

87

Kay L. O’Halloran: Análisis del discurso multimodal

gestión gubernamental manejó la cuestión de los documentos que se habían fil-trado: “Eso es algo justo, ¿verdad?” (That’s fair enough isn’t it). El tono 4 (exagerado) (descendente-ascendente, en inglés) de la respuesta de Tony Abbott “Sí, claro…” (Ah, yes it is…) (ver Figura 2) agrega a esta proposición una reserva y se trata de una respuesta centrada en lo interpersonal, tanto porque el foco de la información está en la forma finita “es” (is) –elemento de negociación de la cláusula- como porque (en términos de contenido) no se agrega sentido experiencial hasta que Tony Abbott no continua con “pero lo interesante es que el nuevo gobierno ya esté filtrando información, Tony” (but the interesting thing is that the new government is already leaking Tony).

Figura 2. Tony Abbott utiliza el Tono 4 (Halliday & Greaves, 2008) en “Sí, claro…” (Yes, it IS…). (Imagen producida utilizando el programa de computación Praat)

De esta manera Tony Abbott concede (a través de la polaridad) la propo-sición como dada, pero (a través de la entonación) pone en acto sus objeciones con respecto a otro campo del discurso, el campo de la política: que un nuevo gobierno ya esté filtrando información. Por lo tanto para él lo que está en juego no es una cuestión legal sino que hay un desplazamiento mediante el cual la fil-tración de documentos se transforma en una cuestión política, lo que conduce a una nueva subfase en la fase Filtración de documentos del gabinete (ver Tabla 2 y Figura 3(a)). Él lleva la batalla a un nuevo territorio y luego procede a elaborar el tema así instalado.

Este desplazamiento del campo del discurso es característico del discurso po-lítico (muy conocido en la afirmación “los políticos no responden a la pregunta”) pero, en este caso, es posible ver cómo Tony Abbott utiliza de manera efectiva un

88

12 (1)

amplio espectro de recursos multimodales que funcionan intersemióticamente para cambiar el campo del discurso, tal como se ve en la Tabla 2 y en la Figura 3(b)-(c). Estos recursos incluyen la gramática de la cláusula (conjunción adversativa “pero” / but); la gramática de la unidad de información (uso de una actitud ‘reservada’, rea-lizada a través del tono 4, que desciende y luego asciende en inglés); la gestualidad (levantar la mano indicando ‘espere’, que luego se torna en un elemento de prepa-ración para hacer una serie de gestos que enfatizan su argumento, ver Figura 3(b)); la postura corporal (primero, se apoya en el respaldo del asiento y luego desplaza su cuerpo hacia adelante a medida que desarrolla su argumento respecto de la nueva filtración de información del gobierno) y la deixis interpersonal (el uso del vocativo ‘Tony” buscando un efecto de solidaridad). A continuación, Tony Abbott sigue hablando mientras vuelve a reclinarse hacia atrás y luego establece contacto con los miembros de la audiencia que se encuentran en el estudio de grabación, Tony Jones y Tanya Plibersek a través de la mirada y del ángulo de la postura corporal, mientras expande de alguna manera sus gestos manuales (ver Figura 3(b)-(c)).

Pero, además, se establece contacto con el espectador de manera breve pero directa adoptando una postura corporal erguida con las dos manos levantadas y las palmas hacia fuera para involucrar aún más al espectador antes de dirigir su atención de nuevo a los panelistas Tanya Plibersek y Tony Jones y a la audiencia que se encuentra en el estudio. La respuesta ‘perpleja’ de Tanya Plibersek se pone de manifiesto en su mirada y su expresión facial (Cuadro 9 en la Tabla 2, ver también el anteúltimo cuadro de la Figura 3), lo que constituye un estudio en sí mismo: ella no hace ningún otro signo semiótico significativo pero resulta claro que está muy familiarizada con las estratagemas de su oponente político. Noten que acá la cámara se despliega como un recurso semiótico a través de la elección del encuadre que se hace de esta participante. Este encuadre establece un contexto dialógico entre Tony Abbott y ella, a pesar de haber sido Tony Jones quien formuló la pregunta.

Figura 3(a). Cambio de campo de una cuestión legal a una cuestión política

89

Kay L. O’Halloran: Análisis del discurso multimodal

Figura 3(b). Mirada y gestos

Figura 3(c) Postura corporal

Figura 3. La filtración de los documentos tratada como un tema político por Tony Abbott

Tony Abbott utiliza gestos y el ritmo del habla para enfatizar ítems léxicos, elevando el estatus textual de palabras individuales y la idea general creando, de esta manera, una suerte de graduación del énfasis (Martin & White, 2005). La utilización de los gestos y del énfasis en la pronunciación en forma conjunta proporciona un rango más delicado de gradualidad textual que organiza el flujo de la información creando diferentes grados de refuerzo – una expansión semiótica que surge de la combinación de la gradualidad visual y auditiva de la amplitud de los gestos y de la pronunciación.

En este momento crítico Abbott establece una referencia intertextual crucial (Lemke, 1995) con el discurso completo de las elecciones federal australianas

90

12 (1)

anteriores, cuando su gobierno Liberal de once años fue derrotado categóri-camente por una oposición que se proyectaba como fresca y “hábil” (clever) y establecía así un contraste con el “viejo y cansado” (tired old) gobierno entonces en ejercicio. Esto lo realiza principalmente a través del ritmo: hasta el momento en que hace referencia a “los gobiernos viejos y cansados filtran información” (tired old governments leak) Abbott había establecido un patrón de acentos tempo-rales en particular, que altera entre “hábil” (clever) e “inteligente” (intelligent) cuando dice “Se supone que los gobiernos nuevos, con agudeza mental, hábiles e inteligentes no filtran información” (New, smart, clever, intelligent governments aren’t supposed to leak). De esta manera en este discurso reciente por la reelec-ción Abbott actúa de manera irónica y su mirada directa (ver Cuadro 8 de la Tabla 2) también toma el cariz semiótico del tono satírico e irónico, como signo visual del “jugar limpio”.

Hay muchas otras oportunidades para demostrar cómo funcionan inter-semióticamente los recursos multimodales en función de satisfacer la agenda de las partes involucradas, incluyendo a los productores que utilizan las tomas de cámara para crear un diálogo entre los participantes. Por ejemplo, mientras Tony Jones establece un diálogo crítico con Tanya Plibersek sobre una iniciativa gubernamental de política ambiental, la cámara cambia de toma para incluir a Bob Brown, líder del Partido Verde Australiano, que eleva las cejas, asiente con la cabeza, se pasa la lengua por los labios y niega con la cabeza y cuyos gestos –vehiculizados por la elección de la toma- recontextualizan completamente un diálogo del cual, en ese momento, Brown no participa (verbalmente).

Figura 4: Cámara: Encuadre

Toda la sesión de Q&A (Preguntas y respuestas) se resemiotiza en el pá-rrafo de presentación del sitio web de Q&A (Figura 5) en el que se evoca la

91

Kay L. O’Halloran: Análisis del discurso multimodal

noción de debate político como deporte (“Tony, Tanya y Bob. Jueves 29 de mayo. Tony Abbott y Tanya Plibersek retornan al ring para el segundo episodio de Preguntas y respuestas. Los acompañarán Bob Brown, Warren Mundine y Louise Adler en el primer interrogatorio a fondo de los verdaderos jefes de Preguntas y respuestas” – “Tony, Tanya and Bob. Thursday, 29 May. Tony Abbott y Tanya Plibersek are back in the Boxing ring for Q&A’s second episode. Joining them are Bob Brown, Warren Mundine and Louise Adler for their first grilling by the Q&A punters”). Pero se alienta a los ‘espectadores’ –a la audiencia- a par-ticipar a través de los foros interactivos dispuestos por los blogs debajo de las preguntas de cada programa y en los que los miembros del sitio web pueden publicar sus comentarios (Diga lo suyo / Have your say), otra resemiotización de los temas que se debatieron durante el programa (de expertos a la opinión pública), así como también preguntas publicadas por el mismo programa (incluyendo preguntas “en vivo” durante el programa”. Una tabla matemática también muestra información analítica (limitada) sobre el tiempo dedicado a los diferentes temas de discusión y más abajo, en la página web, se presenta a los panelistas a través de fotografías y breves párrafos.

Figura 5. Sitio web de Preguntas y respuestas: Aventuras en democracia: “Tony, Tanya y Bob” 5 (del original en inglés)

La discusión anterior muestra claramente que el contexto es parte esencial de todo análisis, no solo el contexto inmediato de situación (Q&A en sí y las subsiguientes resemiotizaciones del programa) sino el contexto cultural en

92

12 (1)

general, incluyendo en este caso las referencias intertextuales que se hace a las recientes elecciones en Australia y su discurso y a la cultura democrática austra-liana en general. El ADM muestra cómo las instancias de opciones semióticas multimodales funcionan de manera intersemiótica para, en última instancia, crear y responder a patrones culturales y sociales más amplios.

Nuevos rumbos del ADM

El principal desafío del ADM es resolver los detalles y la complejidad que requiere anotar, analizar, investigar y recuperar los patrones semánticos multimodales que los complejos fenómenos multimodales contienen y que, además, se articulan de manera transversal entre esos mismos fenómenos. El analista debe tomar en cuenta los procesos intersemióticos y de rese-miotización que articulan escalas temporales y ámbitos espaciales dispares. Además, los diferentes medios pueden hacer necesario utilizar diferentes abordajes teóricos, por ejemplo, el análisis de videos y largometrajes puede abrevar en los estudios cinematográficos (Bateman, 2007). El ADM de portales de Internet y de hipermedia puede presentar un grado de dificultad adicional ya que las opciones semióticas se combinan con el análisis de los enlaces hipermedia y otros recursos de navegación que conducen al análisis hipermodal (Lemke, 2002).

Un método de abordaje de esta complejidad consiste en desarrollar plataformas mediáticas digitales interactivas específicamente diseñadas para el ADM. Más aún, el desarrollo de programas de computación como herra-mienta metasemiótica para el análisis multimodal constituye en sí mismo un espacio de teorización y desarrollo del ADM. En la actualidad existen herra-mientas de anotación multimodal (Rohlfing et al., 2006) y se está trabajando para desarrollar un programa interactivo para el ADM que permita no solo realizar anotaciones sino que incluya opciones de visualización y técnicas de análisis matemático (O’Halloran, Tan, Smith & Podlasov, 2010). Solo será posible avanzar hacia nuestro objetivo de comprender los patrones y las tendencias de la tecnología, los textos, los contextos y la cultura trabajando de manera colaborativa e interdisciplinaria.

lecturas recomenDaDas

forceville, c. j. & urios-aParisi, E. (eds) (2009). Multimodal Metaphor. Berlin and New York: Mouton de Gruyter.

halliDay, m. a. K. (1978). Language as Social Semiotic: The Social Interpretation of Language and Meaning. London: Edward Arnold.

jewitt, c. (ed) (2009). Handbook of Multimodal Analysis. London: Routledge. Kress, g. & van leeuwen, t. (2006). Reading Images: The Grammar of Visual

Design (2nd ed). London: Routledge.

93

Kay L. O’Halloran: Análisis del discurso multimodal

norris, s. (2004) Analyzing Multimodal Interaction: A Methodological Framework. London: Routledge.

o’toole, m. (2010). The Language of Displayed Art. (2nd ed). London and New York: Routledge.

notas

1 Este trabajo es una traducción de O’Halloran, K. L. (2011). ‘Multimodal Discourse Analysis’, en K. Hyland y B. Paltridge (eds). Companion to Discourse, pp. 120-137. London and New York: Continuum. Es publicado con la autorización de The Con-tinuum International Publishing Group Ltd. www.continuumbooks.com, a quienes agradecemos su amabilidad por otorgarnos el permiso.

2 Basado en las investigaciones realizadas en Singapur en el Multimodal Analysis Lab, IDMI, de la National University of Singapore, con el apoyo de Media Development Authority (MDA) y en el marco del Programa de Investigación y Desarrollo Interactive Digital Media NRF2007IDM-IDM0002 de la National Research Foundation (NRF).

3 La traductora agradece a Beatriz Quiróz- Olivares por sus valiosos aportes y co-mentarios durante el proceso de traducción de este trabajo.

4 La autora expresa su sincero agradecimiento a Bradley Smith y Sabine Tan del Multimodal Análisis Lab, del Interactive and Digital Media Institute (IDMI) de la National University of Singapore por sus aportes al análisis de las preguntas y respuestas. Agradece también a Bradley Smith por proporcionarme el extracto de preguntas y respuestas y la Figura 2.

5 http://www.abc.net.au/tv/qanda/txt/s2255680.htm

referencias bibliográficas

BalDry, a. P., & thibault, P. J. (2006). Multimodal Transcription and Text Analysis. London: Equinox.

bateman, j. (2007). ‘Towards a Grande Paradigmatique of Film: Christian Metz Reloaded’, Semiotica, 167, 13-64.

bateman, J. (2008). Multimodality and Genre: A Foundation for the Systematic Analysis of Multimodal Documents. Hampshire: Palgrave Macmillan.

beDnareK, m. & martin, j. R. (eds). (2010). New Discourse on Language: Functional Perspectives on Multimodality, Identity, and Affiliation. London and New York: Continuum.

Desolneux, a., moisan, l. & morel, j. m. (2008). From Gestalt Theory to Image Analysis: A Probabilistic Approach. New York: Springer.

Djonov, e. (2007). ‘Website Hierarchy and the Interaction between Content Organization, Webpage and Navigation Design: A Systemic Functional Hypermedia Discourse Analysis Perspective’. Information Design Journal, 15:2, 144-162.

forceville, c. j. & urios-aParisi, e. (eds). (2009). Multimodal Metaphor. Berlin and New York: Mouton de Gruyter.

94

12 (1)

halliDay, m. a. K. (1978). Language as Social Semiotic: The Social Interpretation of Language and Meaning. London: Edward Arnold.

halliDay, M. A. K. (1985). An Introduction to Functional Grammar. London: Edward Arnold. [2nd ed 1994].

halliDay, M. A. K. (1991). ‘Towards Probabilistic Interpretations’, in Trends in Linguistics Studies and Monographs 55: Functional and Systemic Linguistics Approaches and Uses, pp. 39-61. Berlin: Mouton de Gruyter.

halliDay, M. A. K. (2004). An Introduction to Functional Grammar. (3rd ed, revised by C. M. I. M Matthiessen ). London: Arnold.

halliDay, M. A. K. & greaves, W. S. (2008). Intonation in the Grammar of English. London: Equinox.

halliDay, m. a. K. & hasan, r. (1985). Language, Context, and Text: Aspects of Language in a Social-Semiotic Perspective. Geelong, Victoria: Deakin Uni-versity Press [Republished by Oxford University Press 1989].

ieDema, R. (2001a). ‘Analysing Film and Television: A Social Semiotic Account of Hospital: An Unhealthy Business’, en T. van Leeuwen y C. Jewitt, (eds) Handbook of Visual Analysis, pp. 183-204. London: Sage.

ieDema, R. (2001b). ‘Resemioticization’. Semiotica, 137 - 1/4: 23-39.ieDema, R. (2003). ‘Multimodality, Resemioticization: Extending the Analysis of

Discourse as a Multisemiotic Practice’. Visual Communication, 2(1): 29-57. jewitt, c. (2006). Technology, Literacy and Learning: A Multimodal Approach.

London: Routledge. jewitt, C. (2009a). ‘An Introduction to Multimodality’, en C. Jewitt (ed.) The

Routledge Handbook of Multimodal Analysis, pp. 14-27. London and New York: Routledge.

jewitt, c. (2009b). ‘Different Approaches to Multimodality’, in Jewitt, C. (ed), Handbook of Multimodal Analysis, pp. 28-39. London and New York: Routledge.

jewitt, C. (ed) (2009c). Handbook of Multimodal Analysis. London: Routledge. Kress, G. (2003). Literacy in the New Media Age. London: Routledge. Kress, G. (2009). ‘What is Mode?’, en C. Jewitt (ed.), Handbook of Multimodal

Analysis, pp. 54-67. London and New York: Routledge. Kress, g. & van leeuwen, t. (1996). Reading Images: The Grammar of Visual

Design. (1 ed). London: Routledge (2nd edition 2006). Kress, g. & van leeuwen, t. (2006). Reading Images: The Grammar of Visual

Design. (2nd ed). London: Routledge. laKoff, g. & johnson, m. (1980). Metaphors We Live By. Chicago: The University

of Chicago Press. lemKe, j. l. (1995). ‘Intertextuality and Text Semantics’, in Fries, P. H. & Gregory,

M. (eds) Discourse in Society: Systemic Functional Perspectives: Meaning and Choice, pp. 85-114.. Norwood, N.J.: Ablex.

lemKe, j. l. (1998). ‘Multiplying Meaning: Visual and Verbal Semiotics in Scientific Text’, en J. R. Martin y R. Veel (eds.) Reading Science: Critical and Functional Perspectives on Discourses of Science, pp. 87-113. London: Routledge.

95

Kay L. O’Halloran: Análisis del discurso multimodal

lemKe, j. l. (1999). ‘Typological and Topological Meaning in Diagnostic Dis-course’. Discourse Processes, 27(2): 173-185.

lemKe, j. l. (2002). ‘Travels in Hypermodality’. Visual Communication, 1(3): 299-325.

lemKe, j. L. (2009). ‘Multimodal Genres and Transmedia Traversals: Social Se-miotics and the Political Economy of the sign’. Semiotica, 177(1-4): 1-27.

levine, P. & scollon, r. (eds) (2004). Discourse and Technology: Multimodal Discourse Analysis. Washington, DC: Georgetown University Press.

liu, y. & o’halloran, K. L. (2009). ‘Intersemiotic Texture: Analyzing Cohesive Devices between Language and Images’, Social Semiotics, 19(4): 367-387.

machin, D. (2007). Introduction to Multimodal Analysis. London/ New York: Hodder Arnold.

machin, D. (2009). ‘Multimodality and Theories of the Visual’, en C. Jewitt (ed.) Routledge Handbook of Multimodal Analysis, pp. 181-190. London and New York: Routledge.

martin, j. r. & white, P. r. r. (2005). The Language of Evaluation: Appraisal in English. London / New York: Palgrave Macmillan.

martinec, r. (2000). ‘Types of Processes in Action’. Semiotica, 130-3/4: 243-268.

martinec, r. (2004). ‘Gestures that Co-Concur with Speech as a Systematic Resource: The Realization of Experiential Meanings in Indexes’. Social Semiotics, 14 (2): 193-213.

martinec, r. (2005). ‘A System for image-Text Relations in New (and Old) Media’. Visual Communication, 4(3): 337-371.

norris, s. (2004). Analyzing Multimodal Interaction: A Methodological Fra-mework. London: Routledge.

norris, s. & jones, r. h. (eds.) (2005). Discourse in Action: Introducing Me-diated Discourse Analysis. London: Routledge.

o’halloran, K. l. (2005). Mathematical Discourse: Language, Symbolism and Visual Images. London / New York: Continuum.

o’halloran, K. l. (2008). ‘Inter-Semiotic Expansion of Experiential Meaning: Hierarchical Scales and Metaphor in Mathematics Discourse’, en C. Jones y E. Ventola (eds.) New Developments in the Study of Ideational Meaning: From Language to Multimodality. London: Equinox.

o’halloran, K. l. & smith, b. a. (en prensa). ‘Multimodal Studies’, en K. L. O’ Halloran y B. A. Smith (eds.) Multimodal Studies: Exploring Issues and Domains. London and New York: Routledge.

o’halloran, K. l., tan, s., smith, b. a. & PoDlasov, a. (2010). ‘Challenges in Designing Digital Interfaces for the Study of Multimodal Phenomena’. Information Design Journal, 18(1): 2-12.

o’toole, m. (1994). The Language of Displayed Art. London: Leicester Uni-versity Press.

o’toole, m. (2010). The Language of Displayed Art (2nd ed). London and New York: Routledge.

96

12 (1)

rohlfing, K., loehr, D., Duncan, s., brown, a., franKlin, a., Kimbarra, i., milDe, j., Parrill, f., rose, t., schmiDt, t., sloetjes, h., thies, a. & wellinghoff, s. (2006). ‘Comparison of Multimodal Annotation Tools - Workshop Report’. Online-Zeitschrift zur Verbalen Interaktion, Ausgabe, 7: 99-123.

scollon, r. (2001). Mediated Discourse: The Nexus of Practice. London and New York: Routledge.

scollon, r. & wong scollon, s. (2004). Nexus Analysis: Discourse and the Emerging Internet. London: Routledge.

tan, s. (2005). A Systemic Functional Approach to the Analysis of Corporate Tele-vision Advertisements. Unpublished MA, National University of Singapore.

tan, s. (2009). ‘A Systemic Functional Framework for the Analysis of Corporate Television Advertisements’, en E. Ventola y A. J. Moya Guijjaro (eds). The World Told and The World Shown: Multisemiotic Issues, pp. 157-182. Hamp-shire: Palgrave Macmillan.

unsworth, l. (2008). Multimodal Semiotics: Functional Analysis in Contexts of Education. London and New York: Continuum.

unsworth, l. & cleirigh, c. (2009). ‘Multimodality and Reading: The Cons-truction of Meaning through Image-Text Interaction’, en C. Jewitt (ed.) The Routledge Handbook of Multimodal Research, pp. 151-163. London / New York: Routledge.

van leeuwen, t. (1999). Speech, Music, Sound. London: Macmillan. van leeuwen, t. (2005). Introducing Social Semiotics. London: Routledge. van leeuwen, t. (2008). Discourse and Practice: New Tools for Critical Discourse

Analysis. Oxford: Oxford Univerity Press.van leeuwen, t. (2009). ‘Parametric Systems: The Case of Voice Quality’, en

C. Jewitt (ed.) The Routledge Handbook of Multimodal Analysis, pp. 68-77. London/ New York: Routledge.

ventola, e. & moya, j. (eds) (2009). The World Told and the World Shown: Mul-tisemiotic Issues. Hampshire: Palgrave Macmillan.

wang, y. (2009). ‘On Visual Semantic Algebra (VSA): A Denotational Mathema-tical Structure for Modeling and Manipulating Visual Objects and Patterns’. International Journal of Software Science and Computational Intelligence, 1(4): 1-16.

aPénDice

Tanya Plibersek: … The reason that cabinet documents are confidential is that so senior public servants feel comfortable giving frank advice to the government of the day.

Tony Jones: Alright. Tony Abbott, you“ve been in the trenches. That’s fair enough isn’t it.

97

Kay L. O’Halloran: Análisis del discurso multimodal

Tony Abbott: Ah, yes it is, but the interesting thing is that the new govern-ment is already leaking Tony. I mean normally it takes many years *before a – before – before a government … well I -

Tony Jones: * yes a little – a little bit like the coalition. Leaking going on all round.

Tony Abbott: Tired old governments leak. New, smart, clever, intelligent governments aren’t supposed to leak, and the fact that this government is leaking so badly so early is a pretty worrying sign.

Kay l. o’halloran es Directora del Multimodal Analysis Lab (Laboratorio de Análisis Multimodal) del Instituto de Medios Digitales Interactivos (IDMI, según su sigla en inglés) y Profesora Asociada del Departamento de Inglés y Literatura de la National University of Singapore. Sus áreas de investigación incluyen el análisis del discurso multimodal, con especial interés en los abor-dajes multimodales de las matemáticas y el desarrollo de tecnologías digitales interactivas para el análisis multimodal de fenómenos multimodales. Kay O’Halloran es Investigadora Principal de varios proyectos en el Multimodal Analysis Lab IDMI (http://multimodal-analysis-lab.org/.)

Correo electrónico: kay.ohalloran@nus.edu.sg

99ALED 12 (1), pp. 99-117

ARTÍCULO

NEYLA GRACIELA PARDO ABRILUniversidad Nacional de Colombia

Resumen. En un tiempo y un espacio en el que la cultura de la imagen es un elemento en la transformación de la vida social, los problemas estructurales de las sociedades se representan, debaten y reflexionan en los medios de comunicación. Los medios han superado la fotografía, los gráficos, la animación y, cada vez más, el uso de la lengua es impensable si no está articulado a múltiples códigos y herramientas tecnológicas. La multimodalidad discursiva, entendida como la coexistencia de sistemas sígnicos, es una manera cotidiana de representar la realidad. En este trabajo se propone verificar e interpretar el conjunto de recursos simbólicos y tecnológicos que se utilizan en un vídeo documental, para dar cuenta de un problema social estructural en la sociedad colombiana como es la pobreza. Se analiza el vídeo “Los niños de Hollywood”, que circula en YouTube e integra el corpus del proyecto “Análisis crítico del discurso: repre-sentaciones mediáticas de la pobreza”. El posicionamiento teórico retoma los postulados de los Estudios Críticos del Discurso (ECD) y los vincula con las reflexiones teóricas pioneras en el área, para hacer posible la formulación de una perspectiva analítica.

Palabras clave: multimodalidad, mediatización, discursos híbridos, Estudios Críticos del Discurso, pobreza, YouTube.

Resumo. Em um momento em que a cultura da imagem é um elemento na transforma-ção da vida social, os problemas estruturais das sociedades são representados, debatidos e refletidos nos meios de comunicação. Os meios superaram a fotografia, os gráficos, a animação e, cada vez mais, o uso da língua é impensável se não estiver articulado a múltiplos códigos e ferramentas tecnológicas. A multimodalidade discursiva, entendi-da como a coexistência de sistemas sígnicos, é uma maneira cotidiana de representar a realidade. Este trabalho se propõe a verificar e interpretar o conjunto de recursos simbólicos e tecnológicos que são utilizados num documentário, para perceber um problema social estrutural na sociedade colombiana como é a pobreza. Será analisado o vídeo “Los niños de Hollywood”, que circula em YouTube e integra o corpus do projeto “Análise crítica do discurso: representações midiáticas da pobreza”. O posicionamento teórico retoma os postulados dos Estudos Críticos do Discurso (ECD), vinculando-os com as reflexões teóricas pioneiras na área, para tornar possível a formulação de uma perspectiva analítica.

Palavras-chave: multimodalidade, midiatização, discursos híbridos, Estudos Críticos do Discurso, pobreza, YouTube.

Abstract. In a context in which images have become an element able to change social life, social structural problems are represented, discussed, and debated in the mass media. At the same time, the media have increasingly gone beyond pictures, graphs,

Exploraciones sobre la pobreza y el racismo en Colombia. Estudio Multimodal

Recibido: 12 de mayo de 2012 • Aceptado: 28 de septiembre de 2012.

100

12 (1)

or animations, so the use of language is mandatorily articulated to multiple codes and technological tools. Discursive multimodality is a daily way to represent reality. It is the aim of this paper to verify and interpret the array of symbolic and technologic resources deployed in a video in order to account for a structural problem of Colombian society such as poverty. We analyze the YouTube documentary video “Los niños de Hollywood”. This corpus is part of the research project “Critical Discourse Analysis: media representation of poverty”. Our framework shares the theoretical position of Critical Discourse Analysis (CDA), and relates it to mainstream works in order to offer a novel analytical perspective.

Key words: multimodality, mediatization, hybrid discourses, Critical Discourse Analysis, poverty, YouTube.

Introducción

Los estudios de pobreza y racismo en Colombia han integrado diferentes perspectivas analíticas a partir de las cuales se han intentado explicar y com-prender los factores que inciden en el reforzamiento de las estructuras sociales que sostienen la discriminación. En relación con el tema de la pobreza, se han realizado indagaciones para desentrañar los factores que contribuyen a mantener y reproducir las brechas sociales. En relación con el racismo, se ha reflexionado sobre los mecanismos y las estrategias que los grupos dominantes despliegan para marginalizar, segregar y excluir a los grupos étnicos. Los ne-xos entre pobreza y racismo se han explorado para evidenciar una condición histórica de desposesión. En este sentido, se han abordado las formas en que a los grupos étnicos minoritarios se les impide el acceso a los recursos simbó-licos y materiales indispensables para el ejercicio de sus derechos, así como la posibilidad de acceder a los espacios de toma de decisiones y de participación en los asuntos públicos.

Este trabajo se propone integrar algunas categorías de la sociología, de la antropología cognitiva y de las ciencias económicas sobre la pobreza y los grupos étnicos para, en el marco de los Estudios Críticos del Discurso (ECD) dar cuenta de las especificidades que adquieren los discursos contemporáneos y su papel en el reforzamiento del racismo, la desigualdad y la exclusión social. Se parte del supuesto de que los problemas estructurales de las sociedades se representan, de-baten y reflexionan en los medios de comunicación, que en las sociedades actuales han articulado una variedad de recursos y sistemas sígnicos en la producción y reproducción de significados. En consecuencia, se asume que la multimodalidad discursiva, es decir, la coexistencia de múltiples sistemas sígnicos, así como la hibridación de géneros, formatos, técnicas y herramientas, se ha constituido en una manera cotidiana de representar la realidad. Por lo tanto, en este trabajo se propone un Estudio Crítico del Discurso Multimodal (ECDM).

Se pretende verificar e interpretar el conjunto de recursos simbólicos y tecnológicos que apropia el discurso en YouTube, para dar cuenta de dos pro-blemas sociales estructurales en la sociedad colombiana como son la pobreza

101

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

y el racismo. Se desentraña el carácter híbrido y multimodal del discurso, y se exploran las estrategias y recursos en la producción de significados analizando el vídeo documental, “Los niños de Hollywood” elaborado por Telepacífico, que concursó en el Festival Iberoamericano de Televisión Educativa en el año 2001 y ganó mención especial. El material de análisis forma parte de un corpus más amplio que se estudia en el proyecto “Análisis crítico del discurso: repre-sentaciones mediáticas de la pobreza”. El material objeto de esta investigación circula por YouTube y se recopiló en el año 2008.

1. Espacio social, orden simbólico y discurso

El espacio social es lugar de controversias y de construcción permanente de significado que adquiere su especificidad en virtud de las posiciones de los actores sociales, de las estrategias que elaboran y de los recursos simbólicos y materiales que ostentan. De acuerdo con Bourdieu (2001), las condiciones sociales de existencia proceden de la estructura de distribución de los diferentes tipos de capitales que circulan en una sociedad, de las formas de jerarquización a partir de las cuales se instaura un orden social particular y de las maneras en que los distintos agentes interiorizan el orden social como modus vivendi. La conceptualización de la sociedad como un espacio de controversia permite identificar a los grupos que interactúan en este escenario de acuerdo con las estrategias y capitales que emplean, para la conservación de sus posiciones y condiciones de existencia.

El carácter político que se deriva de la acción discursiva se amplifica en la medida en que moviliza estratégicamente más recursos discursivos. La elección de uno u otro recurso semiótico da cuenta de las elecciones político-ideológicas de actores sociales insertos en escenarios estratégicos muy complejos. El po-sicionamiento de intereses, el ocultamiento de fuentes de tensión social y la propuesta escenificada de variadas formas de consenso encuentran en la mul-timodalidad discursiva sus mecanismos de cualificación (Kress, Leite-García & van Leeuwen, 2000).

Los discursos son portadores de diferentes modos y recursos, que evocan sentidos y representaciones diferentes debido a los condicionamientos que se derivan de cada sistema sígnico, de las maneras específicas como se amalgaman y, de forma particular, de los condicionamientos socio-históricos. Por lo tanto, la utilización, combinación y condensación de significado, a través de las dife-rentes modalidades sígnicas, otorgan especificidad a los discursos. De acuerdo con Kress & van Leeuwen (2001), las relaciones particulares entre modos, recursos y discurso establecen significaciones cuyo fundamento es subjetivo e intersubjetivo. A través de la activación de estos dos niveles, el discurso multi-modal otorga sentido y contribuye a la estabilización de significados sociales.

El empleo de diferentes modos y recursos discursivos tiene impacto en la cognición individual y colectiva, y hace posible inferir que una configuración

102

12 (1)

diferencial de técnicas, recursos, formatos y modos tiene efectos sociales, políticos y culturales diferentes. La restricción sobre dichos recursos implica la segregación de los procesos culturales y la negación de la utilización de los medios de representación a través de los cuales es posible participar e incidir en una comunidad (van Leeuwen, 2008).

La acción de los medios de comunicación potencia la incidencia de los actores mediáticos en la configuración de la agenda pública, inciden en el establecimiento de las prioridades políticas y, por consiguiente, contribuyen a la configuración de las opiniones públicas. Los medios hacen referencia a los escenarios, instituciones y tecnologías que gestionan y orientan la cons-trucción de significados y la materialización de los fenómenos multimodales. La acción mediática se propone como lugar de construcción, reproducción y transformación de representaciones sociales e ideologías, cuya función consiste en reforzar o alterar las posiciones de los actores en el espacio social e incidir sobre la estructura de distribución de los recursos simbólicos y materiales que circulan en una comunidad.

Las representaciones se entienden como sistemas de estructuras y opera-ciones cognitivas producidas socialmente, utilizadas y transformadas a partir de las correlaciones entre los actores sociales. Las ideologías, por su parte, están conformadas por conjuntos de representaciones relacionadas funcionalmente para dotar de sentido y significado a las prácticas colectivas, y para otorgar cohesión, obediencia y disciplina en torno a un objetivo colectivo. En síntesis, los medios de comunicación pueden consolidar representaciones e ideologías a través de las cuales se instala y dota de validez un orden simbólico y, con él, los proyectos de sociedad y de poder que resultan exitosos en el espacio estratégico de interacción social (Fairclough y Wodak, 1997). El discurso mediático es una acción socialmente constitutiva y condicionada que tiene afectación sobre las identidades sociales, sobre las relaciones individuales y colectivas, y sobre los posicionamientos evaluativos que los sujetos asumen en relación con temas relevantes para su comunidad (Busch y Wodak, 2004).

La pertinencia de los Estudios Críticos del Discurso Multimodal, para el análisis de las relaciones entre problemas sociales como el racismo o la pobreza, se explica en la posibilidad de poner en relación las estructuras del discurso con las estructuras y los procesos sociopolíticos. Los medios masivos de comunicación, en tanto instituciones sociales, actores políticos e instancias de interacción y de construcción de saberes, se posicionan como agentes que gestionan y orientan las maneras en que se comprende e interpreta la realidad social y los acontecimientos del mundo físico.

2. Racismo y pobreza: aproximación sociohistórica

Luego de la independencia de Colombia los grupos étnicos distintos a los mestizos y blancos fueron marginalizados de los procesos de construcción co-

103

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

lectiva, y recién en 1851 fue abolida formalmente la esclavitud en Colombia. Si bien la abolición de la esclavitud significó para las poblaciones afrocolombianas una ruptura aparente, su situación de derechos no corresponde con el conjunto de normativas que desde ese momento se han desarrollado para suprimir la discriminación. La ausencia de acciones afirmativas por parte del Estado y la tardía construcción de un movimiento social sólido, retrasaron la puesta en escena de acciones coordinadas y orientadas a la transformación cultural necesaria para la inclusión de la problemática de los grupos afrocolombianos en la agenda social y política del país (Arriaga, 2006).

La difícil situación social y política de la población afrodescendiente se puede evidenciar en la ausencia de estrategias destinadas a la consolidación de acciones de visibilización, de integración y de restitución. Junto a los con-dicionamientos socioeconómicos y políticos, las características fenotípicas de las distintas poblaciones se constituyen en el criterio de jerarquización, en el requisito para acceder a los recursos simbólicos y materiales y, en consecuencia, en un marcador de estatus, prestigio y posicionamiento de los grupos étnicos.

Los procesos de marginalización y exclusión se advierten en la forma en que los grupos étnicos se distribuyen geográficamente, consolidando lo que se ha denominado ‘procesos de territorialidad étnica’, cuya vigencia permanece aún hoy. En este marco, los grupos afrocolombianos, como consecuencia del ejercicio de la violencia racial y de aspectos relacionados con la distribución del acceso al mercado laboral, fueron desplazados a las zonas periféricas del país (de Friedermann, 1993).

Aunque la constitución de 1991 trajo consigo el reconocimiento y la garantía formal de derechos para los grupos étnicos, así como la creación de condiciones de organización y movilización colectivas, la discriminación si-gue evidenciándose en múltiples actividades de la vida social. Como lo señala Bejarano (1994), pese a que el propósito expresado por los constituyentes consistía en realizar una transformación de las estructuras del Estado para incluir sectores históricamente marginados, la estrategia gubernamental estuvo ligada a los intereses por implantar un modelo económico neoliberal y generar las garantías institucionales para adecuar el país a un contexto internacional en creciente globalización. Así, por ejemplo, resultó funcional articular el tema ambiental con la identidad de las comunidades afrocolombianas, para viabilizar sus demandas y aspiraciones políticas que, entre otros aspectos, se expresó en su autodenominación como ‘guardianes de la naturaleza’ (Agudelo, 2001).

Esa condición ha venido reforzando la segregación de los afrocolombianos en las regiones periféricas del país. De acuerdo con datos del Departamento Administrativo Nacional de Estadística –DANE- y el Departamento Nacional de Planeación –DNP- estas regiones corresponden con las zonas geográficas que presentan los mayores índices de pobreza, de desplazamiento forzado y de restricción al acceso de recursos simbólicos y materiales1. La distribución territorial de la población afrocolombiana se puede observar en el gráfico 1.

104

12 (1)

Imagen 1. Los afrodescendientes en el territorio nacional

Fuente: Departamento Administrativo Nacional de Estadística. Censo 2005. http://www.dane.gov.co/files/censo2005/etnia/sys/etnias.pdf

Sumado a esto, aunque los procesos de inclusión de los afrocolombianos y la protección de los derechos de propiedad adquiridos sobre sus territorios an-cestrales fueron garantizados de forma nominal, la complejidad de los conflictos y los intereses en el pacífico colombiano contribuye a la vulneración, desconoci-miento y segregación de dichas poblaciones (Wouters, 2001; Oslender, 2008). Además, fenómenos como el desplazamiento forzado, las ejecuciones extraju-diciales, la amenaza y la intimidación de líderes comunales son recurrentes en los territorios de la costa pacífica. El incremento de las actividades delictivas de los paramilitares en la región corresponde con el interés de establecer negocios por parte de los grandes capitales. La industria maderera, la siembra de palma africana, el fomento de la ganadería extensiva y la explotación de los recursos naturales se constituyen en los factores más importantes que permiten explicar y comprender la forma como se han vulnerado a estas comunidades.

Entre los años 1998 y 2002 el panorama se complica por el fallido proceso de paz entre el gobierno de Andrés Pastrana y las Fuerzas Armadas Revolucionarias de Colombia –FARC-, a partir de lo cual se recrudece el conflicto armado, se genera una reacción generalizada de condena a las dila-ciones de las FARC y se legitiman acciones militares en contra de los grupos insurgentes. En este escenario, territorios con grandes riquezas económicas y biológicas, se constituyeron en escenarios de confrontación permanente entre

105

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

los actores armados del conflicto, en donde confluían los intereses del Estado, los paramilitares, las guerrillas, los grupos económicos, el narcotráfico y los grupos étnicos, quienes buscaban salvaguardar sus territorios (Mejía, 2010).

Como consecuencia de estos acontecimientos, el desplazamiento forzado se incrementó en muchas regiones del país. Las poblaciones afrocolombianas, que habitan los territorios más golpeados por el conflicto, se constituyen en las principales víctimas de quienes tienen propósitos económicos, políticos y militares en sus territorios. Luego del destierro y el despojo, las empresas multinacionales, los grupos económicos y los narcotraficantes se apoderan de los territorios de las comunidades negras, y cuando éstas retornan, encuentran a actores privados usufructuando sus tierras en ganadería intensiva, cultivos agroindustriales y sembradíos de coca. De esto se deriva que las estructuras de racismo en la sociedad colombiana han sido reforzadas por los intereses de grupos hegemónicos y por la ineficiencia del Estado en relación con la protec-ción, garantía y provisión de los derechos de los grupos étnicos.

3. Diseño para la exploración del Discurso Multimodal

La propuesta analítica aspira a recuperar el conjunto de categorías y rela-ciones que pueden ser el punto de partida para la formulación de un análisis cualitativo y sistemático de los discursos multimodales. Para esto se aborda el análisis del video “Los niños de Hollywood” que forma parte de un corpus más amplio recopilado del sitio Web YouTube. El corpus se selecciona adoptando como criterio básico las palabras clave pobreza, pobre, indigencia e indigente. La propuesta pone en relación las maneras como se perciben los significados en los discursos propios de la producción multimedia y los ECD desarrollados en los trabajos de Kress & van Leeuwen (2001), van Leeuwen & Jewitt (2001), van Leeuwen (2008) y Ventola, Charles & Kaltenbacher (2004).

La sistematización del corpus se realiza desde la propuesta teórico-metodoló-gica de O’Halloran (2004) y se adaptan los programas ELAN 3.6.0 y Toolbox2 para desarrollar el proceso descriptivo que facilita el análisis multimodal. En este trabajo se asumen los principios teóricos y metodológicos de los ECD y de los EDM en una propuesta que se denominará en lo sucesivo Estudios Críticos del Discurso Multimodal –ECDM.

Los recursos que se utilizan para los ECDM permiten reconocer, categorizar y sistematizar para un corpus dado los modos semióticos implicados, así como los recursos y estrategias discursivas. ELAN 3.6.0 es un programa desarrollado por el Max Planck Institute3, que permite al analista agregar un número ilimitado de anotaciones a archivos de audio y de vídeo. Las anotaciones se elaboran en distintos niveles que pueden estar jerárquicamente relacionados entre sí, per-mitiendo estructurar el corpus para el análisis y garantizan la identificación de ciertas relaciones. Cada anotación puede relacionarse con la línea de tiempo del discurso analizado o puede referirse a otras anotaciones previamente elaboradas.

106

12 (1)

A partir de las anotaciones se pueden formular distintos puntos de vista en relación con el corpus que se analiza, de manera que el proceso descriptivo sirve al trabajo analítico-interpretativo.

Las principales características del programa se manifiestan en la facilidad para describir el corpus en sus distintas expresiones y recursos. La visualización de información en los diferentes niveles, su registro y su comentario, facilita la categorización. Para el modo auditivo, se incluyen categorías como tono, género, perspectiva, ruido, forma, fondo y estrategia perceptual, entre otras. Para el caso del modo lingüístico o verbal, se abordan unidades léxicas, categorías gramaticales, relaciones y redes semánticas, temas, tópicos, voces discursivas, formas de atribución, marcadores de subjetividad, coherencia, figuras retóricas y relaciones pragmáticas, entre otras.

Para la descripción del corpus el programa permite la construcción de vo-cabularios controlados, sistematizando el procedimiento. En tanto herramienta tecnológica, ELAN permite que el analista relacione e interprete el conjunto de recursos y estrategias discursivas que proceden de la articulación de los múltiples modos semióticos, que se explorarán en profundidad en una segunda etapa. Estos modos son apropiados en los distintos medios tecnológicos, que para este caso corresponden a la tecnología digital interactiva. En el proceso descriptivo se da cuenta de las estructuras discursivas para poner en relación lo visual y lo sonoro. En la imagen 2 se observan algunos de los criterios que el programa permite organizar para efectos del análisis.

Imagen 2. Aplicación del programa ELAN en la descripción del corpus multi-modal

107

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

La flexibilidad que el programa ELAN posee facilita adoptar unidades temporales que no estén basadas en unidades de tiempo fijas, sino que se utilizan otras estrategias de segmentación como las unidades narrativas. Se cualifican las posibilidades de análisis en tanto pueden elaborarse reflexiones lineales y transversales.

4. Discriminación y desposesión: representación mediática de las negritudes de Buenaventura

“Los niños de Hollywood” permite hacer un acercamiento, por una parte, a las características propias de los discursos multimodales y, por otra parte, a las formas en que se consolidan idearios y se refuerzan relaciones sociales pro-clives a los ejercicios abusivos de poder. En este documental el punto de vista adoptado por el narrador es el de un observador externo que hace usufructo de la condición particular de un grupo humano, exponiendo una problemática que reitera los factores que históricamente se han atribuido a la desposesión y a grupos étnicos concretos. La pretendida objetivación de la problemática representada contribuye a objetualizar una comunidad y a naturalizar sus con-dicionamientos. De esta manera, se contribuye a estabilizar la representación que propone al grupo como incapaz de acción, carente de volición y objeto de manipulación, en síntesis, se le despoja de su dignidad y potencialidad creadora y transformadora.

El discurso propuesto a través del video se encuentra ubicado estratégica-mente en un escenario económico y político desde el cual es posible dar cuenta de los lugares y estrategias de interlocución. Este escenario está constituido por actores sociales que desarrollan estrategias orientadas a fines. Aunque el vídeo documental producido por Telepacífico4 se propone como un discurso reivindicatorio, en el proceso de dar cumplimiento a lo estipulado en la visión del canal, es decir, promover la identidad sociocultural de las comunidades de la costa pacífica ante el mundo, objetualiza y espectaculariza a los actores que pretende representar.

Además de ser un órgano que percibe recursos del Estado y, en esa me-dida, estar en la obligación de rendirle informe detallado de sus actividades, Telepacífico es regulado por la Comisión Nacional de Televisión5. En conse-cuencia, el lugar de interlocución del canal está definido por la posición que ocupa en la estructura de la organización estatal y en el campo de la economía, y sus estrategias involucran la utilización de recursos, a través de las cueles aspira a lograr un desempeño adecuado en estos escenarios.

4.1. en busca de la consolidación de lo establecido

la estructura del vídeo se encuentra compuesta por treinta y siete escenas, enriquecidas con títulos y subtítulos que se agrupan en cuatro secuencias.

108

12 (1)

Esta estructura está diseñada para describir el modo de vida de un sector de la comunidad afrocolombiana en la ciudad costera de Buenaventura, en el departamento del Valle del Cauca. La primera secuencia se introduce con la expresión “Ciento cincuenta años después…” para luego hacer un paneo general de la ciudad, utilizando para ello encuadres generales y panorámicos, y un ángulo picado. Esta toma abarca las edificaciones y el mar al fondo para luego ingresar en la ciudad, cuyas calles se muestran transitadas por carros y gente, mientras se explica algunas de sus características socio-económicas y demográficas.

En la segunda secuencia se construye una visión general, apropiando el recurso del encuadre panorámico y el ángulo picado, para mostrar el segmento de la población que vive en palafitos6, enfatizando en su condición socioeco-nómica. Se busca con ello focalizar en las distintas espacialidades para detallar escenarios como los pasadizos, las viviendas y los sectores aledaños que sirven incluso como lugares de trabajo. En la tercera secuencia, se inserta el título y se visualiza a quienes se proponen como protagonistas del video documen-tal, es decir, a los niños que viven en los palafitos del sector conocido como “Hollywood”. Dicha visualización incluye iconos de la marginalidad, como los pies descalzos, un puente rústico en madera por el cual transitan los personajes y un perro, así como una descripción detallada de sus pasatiempos, las actividades lúdicas que realizan y las locaciones en las que coexisten. En la secuencia final se observa el charco de marea donde los niños nadan y, en seguida, se cierra con el enunciado “21 de Mayo. 150 años de la abolición de la esclavitud en Colombia”, con lo cual se construye una estructura narrativa cíclica, cuyo eje es la temporalidad y una temática implícita que ubica la narrativa históricamente.

Aunque la construcción espaciotemporal formulada constituye un eje del proceso de contextualización, se silencian los condicionamientos históricos y se evita la reflexión que procede de poner en relación los modos de desarrollo occidentales con el acceso concreto de las comunidades a los recursos simbó-licos y materiales de los que requieren para participar de dicho desarrollo. El punto de partida es el discurso hegemónico, en el que se representa a los grupos étnicos desposeídos de manera antagónica a aquellos grupos humanos que se supone se encuentran insertos en procesos de desarrollo.

La narrativa visual se estructura en la construcción de visiones panorá-micas con la combinación de ángulos picados y encuadres generales, con el fin de mostrar los tres espacios en los que se sitúa la narración: la ciudad de Buenaventura, los palafitos del barrio Cristóbal Colón y el charco de marea del sector de “Hollywood”. Podría inferirse que el discurso visual desempeña una función focalizadora, pues a medida que va avanzando el relato se enfatizan ciertos escenarios y aspectos de la narrativa, y se realizan tomas para coextender significados particulares a ámbitos generales. En paralelo, el discurso visual contribuye a la construcción de las paradojas que se expresan en la secuencia

109

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

de imágenes, en la sucesión temporal de tomas y en los personajes focalizados: la opulencia de la miseria y la miseria de la esperanza. Por su parte, el recurso sonoro sirve al propósito de diferenciar los escenarios a través de la constitución de planos sonoros, que contribuyen a topicalizar sentidos.

La construcción de las disparidades procede de la comparación entre los sectores de Buenaventura que se escenifican, por una parte, como lugares de supuesto desarrollo y, por otra parte, el sector que se propone como repre-sentativo de un grupo socioeconómico caracterizado por condiciones de vida distintas a los estándares occidentales. La representación del desarrollo se realiza a través de tres escenas en las que se focaliza una mirada urbana y comercial de la ciudad. Se incluyen actividades económicas, arquitecturas modernas, trazado urbano incipiente, y flujo vehicular y marítimo. Las condiciones de vida de la población del barrio Cristóbal Colón se representan, en contraposición, como disposiciones a la inactividad, focalizando el aparente ocio del adulto, que contrasta con la actividad “caritativa” de los personajes que se proponen como representantes de la institución religiosa y que se consolidan como iconos de las políticas asistencialistas. Simultáneamente, se incluye la actividad lúdica de los niños, los cuales se constituyen en íconos de la desposesión, de la marginalidad y de la ausencia de autonomía y autodeterminación. Esto evoca el sentido de vulnerabilidad, desprotección y debilidad, entre otros.

La narrativa del documental reconstruye permanentemente una estética de la ruina, a partir de la cual se incorporan elementos tales como las basuras, construcciones en condición de deterioro, charcos de lodo, escombros, aguas residuales y objetos averiados. Lo que se propone en el documental es una focalización sobre los condicionamientos que orientan las formas de vida de la comunidad representada, para cuestionar los marcos temporales en los que se ha venido desarrollando la historia de las comunidades de la región que se referencia. En este sentido, la ruina se propone para evocar recuerdos del pasado, de un pasado parcialmente superado, que imprime en la niñez una marca de continuidad, de inercia y de inacción, y que se expresa en la advertencia de un futuro catastrófico, adverso e invariante.

4.2. Formas de exclusión: estrategias y recursos

la representación visual de la ruina, además de posicionar una forma rígida de comprender la realidad de la comunidad, contribuye a la estabilización de representaciones proclives a la preservación de la exclusión y la marginaliza-ción. La narrativa visual incluye las estrategias de naturalización y de espec-tacularización, así como el uso de estrategias más puntuales como la elipsis, la paradoja o la focalización, entre otras. El efecto consiste en la limitación de la posibilidad de comprender a profundidad los fenómenos sociocultura-les representados. Esto sucede como consecuencia de procesos en los que se conjugan emociones, representaciones y formas de ejercicio abusivo de poder

110

12 (1)

(Pardo y Hernández, 2007). Así, el usufructo sensacionalista que se hace de los niños, la naturalización de las representaciones sobre los escenarios en los que conviven y la legitimación de sus condiciones de vida, consolidan la idea de invariabilidad que se puede recoger en la afirmación de que ‘así es, así ha sido y así seguirá siendo’.

La estrategia de espectaculización y la evocación de imágenes sensaciona-listas se observan en varios segmentos que van desde el minuto 2:20 a 2:40. En este intervalo se focaliza en los niños que se proponen como los personajes centrales. La estrategia de focalización se combina con el recurso de la planifica-ción, el cual consiste en registrar una escena en planos que varían en la línea de tiempo. Así, el movimiento va del primer plano, pasando al gran primer plano, hasta el plano general. Con la última imagen, el plano se amplía lentamente a través de un movimiento de la cámara en retroceso, que permite ver que las niñas se encuentran a las puertas de uno de los palafitos.

En las tomas en las que se muestra a los niños mirando la cámara con curiosidad se propone un sentido de lo inusual, de lo novedoso y de lo raro, lo cual da cuenta de la falta de familiaridad de la comunidad con las tecnologías y, en consecuencia, con los potencialidades de uso que de ellas se derivan. Las tomas con las que se construyen personajes como el niño trabajador y los niños “jugando a la pelea” sugieren la falta de actividades académicas y artísticas que contribuyan al desarrollo de las capacidades de los personajes. Por último, las tomas que incluyen niños caminando sobre tablas con chancletas o descalzos (minuto 4:03 y 4:12), se usan para denotar la carencia de los elementos que la cultura occidental propone como bienes básicos. En consecuencia, los referentes a los que se apela para narrativizar la realidad corresponden con sistemas de categorización eurocéntricos y occidentalistas.

El recurso de la elipsis visual es utilizado de manera frecuente para gene-rar paradoja. Este recurso consiste en la supresión de unidades gráficas con el fin de que el interlocutor reconstruya la representación de lo que se propone y otorgue relevancia a una unidad particular. Además, la elipsis contribuye a la evocación y el reforzamiento de representaciones icónicas, a partir de las cuales se proponen las distintas problemáticas sociales. Así, cuando en el minuto 2:05 se focaliza la imagen de los pies, se está evocando y estabilizando la representación a partir de la cual se asocia la indigencia, la desposesión y la marginalización, con los personajes que sintetizan dicha conceptualización, es decir, los niños afrocolombianos de un sector de la ciudad de Buenaventura. En consecuencia, además de funcionar como una figura retórica de elisión, la elipsis visual contribuye a proponer representaciones, a activar saberes o a consolidar imágenes sobre lo que se representa.

Las imágenes propuestas desde el minuto 4:18 también generan un efec-to de diferenciación. En este caso, la definición del punto de referencia hace imprescindible la reformulación conceptual a medida que se va introduciendo nueva información. El efecto de las imágenes se expresa en la generalización

111

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

de significados y en la atribución de cualidades a los sujetos implicados. En un principio, la toma que incluye a los niños en el charco no permite evidenciar los alrededores del lugar, que sólo hasta el minuto 4:44 van a hacerse explícitos. El escenario sólo logra percibirse de manera precisa cuando se observa que el charco, en el que nadan los niños, está formado por aguas residuales, desechos y algunas acumulaciones de agua de mar.

La paradoja, por una parte, evidencia una realidad que se ha formulado y estabilizado en la cultura y, por otra parte, genera una ruptura en relación con esos saberes. La paradoja también acentúa los prototipos que se proponen como contrarios, pues dichos prototipos constituyen sus referentes de validez retórica. Luego de la toma donde los niños se bañan aparentemente felices, se evidencia el estado real del escenario que en principio es descrito como una “piscina natural”. De esta manera, se refuerzan los estereotipos occidentales en relación con los personajes implicados y con lo que se les atribuye. Las inter-pretaciones son mediadas por la idea de que la desposesión y la marginalidad se vinculan con la basura y la suciedad.

La construcción de las tomas y sus efectos de choque se apoya en recursos como el encuadre general, el ángulo picado y las formas en que se ubica la cámara en las distintas espacialidades propuestas, todo lo cual contribuye a focalizar ciertos aspectos y a generalizar lo focalizado. Esto puede apreciarse en los minutos 5:49 y 5:52 en los que el manejo del zoom se constituye en el recurso de focalización y generalización. En el minuto 5:49, la presencia de una mujer y un niño sentado sobre una mesa deteriorada, al lado de una pared de madera rota, se constituyen en el foco de la imagen. Para el minuto 5:52 disminuye el zoom desplazando el foco de las personas a la estructura del hábitat. Se propone un desplazamiento visual, a partir del cual se enfatiza en las características del entorno físico para denotar las condiciones vitales de quienes habitan en el escenario representado.

Imagen 3. Papel del Zoom en la construcción de sentido

Fuente: http://www.youtube.com/watch?v=tAE1isDwow0

La presencia de la mujer con el bebe se propone para sugerir su rol como un actor social pasivo, que se define en razón de la complicidad que le es atri-

112

12 (1)

buible por su inacción frente a los condicionamientos en los que crecen y se desarrollan los niños de su grupo social. Este carácter se infiere de los recursos sonoros: una melodía que evoca melancolía y desasosiego, y las voces de los niños y los sonidos ambientales. Esto contribuye a reforzar la idea de la respon-sabilidad compartida y, de esta manera, a normalizar los hábitos, conductas y prácticas que refuerzan la imposición identitaria comúnmente asignada a éstas comunidades. Visibilizar de esta forma la vida de una comunidad contribuye a estabilizar representaciones a partir de las que el sujeto, responsable de su propio destino, debe ser objeto de corrección, reprensión, orientación y direc-cionamiento por parte de sujetos externos a su grupo social.

Los sentidos de desprotección, vulnerabilidad, inestabilidad e inercia asociados con la mujer y el bebe que se representan en las imágenes contribu-ye, a través del zoom, por una parte, a estabilizar el carácter femenino de la pobreza y, por otra parte, a generalizar dicho carácter a la comunidad en su conjunto. La naturalización de los estereotipos frustra la posibilidad de propo-ner e implementar acciones transformadoras, al tiempo que oculta a quienes son responsables de los sistemáticos y sostenidos ejercicios de exclusión. La función ideológica del uso del zoom se evidencia en la adopción de un punto de vista en el que se enfatiza el rol expectante de los personajes, los cuales ante el escenario que se presenta como marginal, se muestran como sujetos pasivos carentes de capacidad de acción y de transformación.

5. Conclusiones

El campo de los Estudios Críticos del Discurso ha venido enriqueciéndose con los desarrollos de la semiótica social y de los Estudios del Discurso Mul-timodal. La articulación de diferentes perspectivas analíticas y de categorías provenientes de campos como la sociología, la antropología cognitiva, las ciencias económicas, la lingüística, la ciencia política y la psicología social y cognitiva, entre otras disciplinas, han arrojado luces sobre la complejidad de los fenómenos sociales contemporáneos y han contribuido al desarrollo de puntos de vista integrados que los permitan explicar y comprender. Simultá-neamente, el incremento en la complejidad de los procesos sociales, derivado de las transformaciones de los procesos productivos y comunicativos en la era de la globalización, ponen de manifiesto la necesidad de dar cuenta de los mecanismos y estrategias de interacción social actuales y, sobre todo, de sus efectos sobre lo público.

En este marco, los discursos contemporáneos adquieren nuevas especi-ficidades. El auge tecnológico otorga la potencialidad para utilizar múltiples recursos, formatos, géneros y herramientas en la construcción de significado, así como en la producción y reproducción de representaciones sobre los fenó-menos que se desarrollan en la sociedad. Por ello, el abordaje de los problemas socioculturales contemporáneos, en perspectiva crítica, requiere del desarrollo

113

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

de procedimientos metodológicos, la integración de múltiples referentes teóricos y un trabajo interdisciplinar que permita llevar a cabo análisis integrales de la realidad estudiada. Desde esta perspectiva, los Estudios Críticos del Discurso Multimodal se constituyen en una corriente intelectual interdisciplinar preocu-pada por la manera en que se concreta la reproducción discursiva del abuso del poder y de la desigualdad social en las sociedades contemporáneas.

Para el propósito de dar cuenta de las formas de reproducción de la do-minación y el abuso del poder, los Estudios Críticos del Discurso Multimodal permiten verificar e interpretar el conjunto de recursos y estrategias simbólicas y tecnológicas que se apropian y despliegan en un sitio Web como YouTube. En el caso de problemas sociales como la pobreza y el racismo, un análisis crítico del discurso multimodal permite dar cuenta de las representaciones, estereoti-pos e ideologías que se erigen en órdenes simbólicos orientadores de la acción colectiva y reforzadores de estructuras sociales inequitativas y excluyentes. Así, el discurso mediático de la pobreza en YouTube, si bien amplia el espectro del acceso a la información a personas de otros lugares en tiempo real, mercantiliza los temas propuestos y contribuye a estabilizar formas de diferenciación social que tienen su anclaje en referentes económicos y culturales.

En relación con el vídeo documental analizado, el cual hace parte de un amplio corpus seleccionado de YouTube, se evidencian los mecanismos y es-trategias a partir de los cuales no solamente se ha propuesto una información sobre las comunidades abordadas, sino que, fundamentalmente, se les ha construido y asignado arbitrariamente una identidad. Esta identidad, además de no corresponder con los intereses y demandas reales de estas comunidades, legitima formas de intervención en las que dichos grupos son reducidos a la condición de meros objetos funcionales. En esta perspectiva, la descripción de los hábitos y conductas de los habitantes del barrio Cristóbal Colón de la ciudad de Buenaventura es representada bajo cánones occidentales, para generar contrastes entre los estilos de vida locales y el ‘deber ser’ que se ha definido en la cultura occidental.

El proceso de representación mediática de la identidad de las comunidades referenciadas, incluye la utilización estratégica de recursos semióticos para gene-rar espectáculo, mediante lo cual se objetualiza a los actores representados. Esta objetualización a menudo se acompaña de la naturalización de roles y atributos, así como de la construcción de estereotipos negativos. La naturalización de estereotipos inhibe el desarrollo de acciones de transformación, al tiempo que oculta a quienes son responsables de los sistemáticos y sostenidos ejercicios de exclusión hacia las comunidades representadas.

El análisis exploratorio, que será profundizado en la segunda etapa de análisis de este vídeo, sugiere que la combinación de recursos y la articulación de modos discursivos permiten amplificar el sentido de lo expresado y poten-cializar la función política del discurso mediático. En muchos de los casos, la

114

12 (1)

función ideológica de los recursos utilizados se evidencia en la focalización del supuesto rol expectante de los personajes, los cuales, ante el escenario que se propone marginal, se muestran como sujetos pasivos carentes de capacidad de volición, de acción y de transformación. Desde esta perspectiva, la aspiración de dar cuenta de la identidad histórica de las comunidades representadas ter-mina constituyéndose en una estrategia, a partir de la cual se aspira a definir la situación de interacción, a generar un sentido común que se articula a las expectativas que se anticipan de los interlocutores –los financiadores de algunos proyectos televisivos- y a desarrollar actuaciones para escenificar roles y lugares funcionales a dichas expectativas.

Con el despliegue de estrategias y recursos semióticos se pretende generar la conmoción necesaria en el interlocutor para movilizar recursos y apoyos institucionales. Dada la necesidad inminente de efectuar presentaciones estra-tégicamente orientadas, se lleva a cabo la producción simbólica y arbitraria de la comunidad que pretende representar objetivamente, mediante lo cual se le conceptualiza como un ente incapaz de tomar decisiones y como un ser que no tiene la potencialidad para concretar su propio proyecto de vida. Así, los recursos y estrategias visuales apropiados y desplegados por los productores del documental no solamente desarrollan propuestas temáticas, sino que proponen y expresan representaciones sociales proclives al ejercicio de la discriminación, marginalización y dominación de los grupos étnicos que son representados. De esta manera, el discurso multimodal se constituye en una acción orientada que se inscribe en conjuntos de prácticas sociales más amplias, validando e invalidando visiones de mundo, normalizando formas de interacción y natu-ralizando representaciones.

notas

1 Para más información véase DANE. (2007). Colombia una nación multicultural. Su diversidad étnica. URL: http://www.dane.gov.co/files/censo2005/etnia/sys/colombia_nacion.pdf. También véase DNP. (2008). Insumos para el análisis de las barreras que impiden el avance de la población negra, afrocolombiana, palenquera y raizal. Bogotá: DNP.

2 Agradezco Carlos Rodríguez, Lingüista de la Universidad Nacional de Colombia, por la adaptación y puesta en funcionamiento del software.

3 Véase Albert Bikford (2005). Using ELAN: A getting-started guide for use with sign languages.

4 Para más información a este respecto, véase http://www.telepacifico.com/index.php5 Para más información a este respecto, véase http://www.cntv.org.co/cntv_bop/. 6 Los palafitos son construcciones para la vivienda que se apoyan en columnas de

madera o en estacas, y que, generalmente, se construyen sobre agua a la orilla del mar, de los ríos, lagunas o donde las aguas son tranquilas.

7 Agradezco a Juan Ruiz, estudiante del Departamento de Ciencia Política de la Uni-versidad Nacional de Colombia por su colaboración en el desarrollo de éste trabajo

115

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

como asistente de investigación y miembro del Grupo Colombiano de Análisis del Discurso Mediático.

reFerencias bibliográFicas

arriaga, L. (2006). Los negros, ciento cincuenta años después de la esclavitud en Colombia. Cátedra de estudios afrocolombianos, Volumen 1. Fondo de publicaciones afrocolombianas. Bogotá: Casa Nacional de la Cultura Afro-colombiana.

agudelo, c. (2001). ‘Nuevos actores sociales y relegitimación de Estado. Estado y construcción de movimientos sociales de comunidades negras en Colom-bia’, Análisis Político, 43: 1-33. Bogotá: Universidad Nacional de Colombia.

bejarano, a. (1994). ‘Recuperar el Estado para fortalecer la democracia’, Análisis Político, 22: 59-91. Bogotá: Universidad Nacional de Colombia.

bourdieu, P. (2001). Poder, derecho y clases sociales. Bilbao: Editorial Desclée de Brower.

biKFord, a. (2005). Using ELAN: A getting-started guide for use with sign languages.URL: http://www.und.nodak.edu.

busch, b. & wodaK, r. (2004). ‘Approaches to Media Texts’. The SAGE Hand-book of Media Studies. URL: www.sage-ereference.com/hdbk_mediastudy/Article_n6.html.

dePartamento administrativo nacional de estadística (DANE) (2007). Colombia una nación multicultural. Su diversidad étnica. URL: http://www.dane.gov.co/files/censo2005/etnia/sys/colombia_nacion.pdf.

de Friedermann, n. (1993). La saga del negro. Bogotá: Pontificia Universidad Javeriana.

dePartamento nacional de Planeación (DNP) (2008). Insumos para el análisis de las barreras que impiden el avance de la población negra, afrocolombiana, palenquera y raizal. Bogotá: DNP.

Fairclough, n. & wodaK, r. (1997). ‘Critical Discourse Analysis’, en T.A. van Dijk (Ed.) Discourse Studies: A Multidisciplinary Introduction. Vol. 2. London: Sage.

Kress, g., leite-garcía, r. & van leeuwen, t. (2000). ‘Semiótica discursiva’, en T. van Dijk (Comp.). El discurso como estructura y proceso. Barcelona: Gedisa.

Kress, g. & van leeuwen, t. (2001). Multimodal discourse. The modes and media of contemporary communication. New York: Hodder Arnold.

mejía, c. (2010). ‘Atrato, más allá de la extensión del conflicto armado: Derechos colectivos y cultivos extensivos en un escenario de confrontaciones’, Diálogos de Derecho y Política, 3 (1) URL: http://aprendeenlinea.udea.edu.co/revistas/index.php/derypol/article/view/5162/4518

o’halloran, K. (2004). Multimodal Discourse Analysis: Systemic Functional Per-spectives. London: Continuum.

oslender, u. (2008). Comunidades negras y espacio en el Pacífico colombiano. Hacia un giro geográfico en el estudio de los movimiento sociales. Bogotá: Instituto

116

12 (1)

Colombiano de Antropología e Historia. Pardo, n. & hernández, E. (2007). ‘La parálisis cognitiva. Sumatoria de de-

terminantes socioculturales´, Enunciación, 12: 24-46. Bogotá: Universidad Distrital Francisco José de Caldas.

van leeuwen, t. (2008). Discourse and practice. New tools for Critical Discourse Analysis. Oxford: Oxford University Press.

van leeuwen, t. & jewitt, c. (2001). Handbook of Visual Analysis. London: Sage.ventola, e., charles, c. & Kaltenbacher, m. (2004). Perspectives on Multimo-

dality. Philadelphia: John Benjamins.wouters, m. (2001). ‘Derechos étnicos bajo fuego: El movimiento campesino

negro frente a la presión de grupos armados en el Chocó. El caso de la HACIA’, Acción colectiva, Estado y etnicidad en el Pacífico Colombiano, pp. 259-285. Bogotá: Instituto Colombiano de Antropología e Historia.

anexo 1

Letra video documental

“LOS NIÑOS DE HOLLYWOOD”

Ciento cincuenta años después… Buenaventura, principal puerto sobre el pacífico colombiano… la puerta más importante para las importaciones y exportaciones del país. Gran parte de su población de afrodescendientes, habita en palafitos construidos sobre pedazos de tierra que le han robado al mar. Sus condiciones de vida están por debajo del nivel más bajo de cualquier ciudadano colombiano.

LOS NIÑOS DE HOLLYWOOD.

En estas circunstancias los niños del barrio Cristobal Colón, que tienen pocas oportunidades de asistir a la escuela, se ingenian diversas formas para ocupar mucho de su tiempo libre y divertirse. Algunos juegan mientras trabajan recogiendo las almejas que se encuentran en el ba-rro durante la marea baja del océano pacífico. Los juguetes que otros han dejado y que no les pertenecen por no ser de su cultura, cobran vida en las manos de estos niños que ven el mundo de otras maneras. Aquí la violencia es un juego [¿?...] parecería simplemente… que el juego es la violencia. En medio del barrio existe un lugar conocido como “Hollywood”, y allí, un charco que es como un gran parque de diversiones. Los niños saltan, se sumergen, se bañan, gritan, ríen y juegan. La piscina natural que se forma durante el crecimiento de las mareas, sirve para que los niños se entretengan, intercambien y hagan un poco de deporte a la vista de todos. Lejos de tener unas aguas frescas y cristalinas, estas aguas estancadas durante meses son la alcantarilla del barrio y el botadero de escombros, animales muertos y

117

Neyla Graciela Pardo Abril: Las Exploraciones sobre la pobreza y el racismo en Colombia...

heces fecales. Sin embargo, “los niños de Hollywood” ríen porque ni la pobreza absoluta calla sus gritos, sus alegrías y sus sueños de niños.

neyla graciela Pardo abril es Doctora en Filología-Lingüística Española. Profesora titular e investigadora del Instituto de Estudios en Comunicación y Cultura y del Departamento de Lingüística de la Universidad Nacional de Colombia. Investigadora principal del Grupo Colombiano de Análisis del Discurso Mediático.

Correos electrónicos: neylapardo@yahoo.com / pardo.neyla@gmail.com

119

Reseñas

BEDNAREK, Monika y MARTIN, Jim R. (eds.) (2010). New Discourse on Language. Functional Perspectives on Multimodality, Identity, and Affiliation. London: Continuum. 269 pp. ISBN 978-1-8470-6483-7.

En este libro se plantea ampliar el campo de estudio de la Lingüística Sistémico-Funcional (LSF) a partir de la inscripción teórico-metodológica en el enfoque multimodal. Desde este punto de vista, se intenta dar cuenta de los constructos fundamentales para el conocimiento de las relaciones entre lenguaje y sociedad: los fenómenos semiótico-sociales de la individuación, la identidad y la afiliación. Este es el objetivo fundamental de esta publicación que permite extender la perspectiva sistémico-funcional a diversos objetos y, al mismo tiempo, repensar esos objetos a partir de un abordaje de la variación semántica. Esto permite desplegar el panorama de posibilidades del análisis del discurso, tanto en lo que hace a las modalidades de la comunicación como a las negociaciones entre los hablantes/escritores.

Gracias a los fructíferos trabajos pioneros de Halliday y Matthiessen (1999, 2004) para el estudio del lenguaje y los de Kress y van Leeuwen (2006 [1996 ]) para las imágenes, los investigadores de este libro -representantes de la LSF de la Escuela de Sydney- han desarrollado una nueva y vigorosa perspectiva sobre el modo en que se utilizan los recursos semióticos (lingüísticos y visuales) tanto desde la perspectiva de la variación entre los textos como desde la variación entre los usuarios. La primera supone qué recursos semióticos se utilizan para realizar acciones, para construir textos y, por lo tanto, reconstruir textos con los que entran en diálogo; y la segunda, qué recursos semióticos se utilizan para negociar la construcción de la identidad de los sujetos y de la afiliación, entendida esta última como la pertenencia a un grupo social. Si bien ambas perspectivas son diferenciadas en el terreno de la explicación y el análisis, este libro muestra cómo en el uso de los sistemas semióticos (que son, entre otros, el lenguaje y las imágenes) las variaciones semánticas provienen de las opciones de significado que se actualizan de manera simultánea acorde con las intenciones, realidades e ideas de los sujetos en un contexto socio-cultural determinado.

Los diez capítulos del libro están relacionados de un modo muy cercano y coherente por este planteo y enfoque teórico comunes. En cada uno los au-tores desarrollan los conceptos de la teoría propuesta por medio del análisis de corpora conformados por textos que no son sino instanciaciones de diversos recursos multimodales. Martin (cap. 1) introduce el marco teórico del libro y lo ilustra por medio del estudio de una columna publicada en la revista Good

120

12 (1)

Weekend (del Sydney Morning Herald). Knight (cap. 2) estudia el humor entre amigos para dar cuenta de cómo la identidad y la afiliación son negociadas en los textos como procesos de valores compartidos. Caldwell (cap. 3) se ocupa también de los conceptos de identidad y afiliación pero explorando los estilos rítmicos de una selección de artistas de rap que colaboraron con Kanye West, productor de este género musical popular. Knox, Patpong y Piriyasilpa (cap. 4) analizan el tailandés estudiando la primera plana de los periódicos de Tailandia y cómo este medio masivo de comunicación se posiciona en relación con los individuos, los grupos sociales y la sociedad de esta nación. Caple (cap. 5) explora las nociones de alusión y vinculación a partir del análisis de las co-construcciones de significado entre palabras e imágenes en una serie de artículos periodísticos del Sydney Morning Herald. Tian (cap. 6) examina qué se entiende por “feminidad” en la edición ilustrada y bilingüe (inglés-chino) de The ballad of Mulan, constructo multimodal que no solo se atiene a las relaciones entre imagen, texto y género (lo femenino) sino también a las determinaciones ideológicas subyacentes. Tann (cap. 7) revisa las teorías contemporáneas sobre la identidad que la entienden como un fenómeno lingüístico, sugiere una aproximación multifuncional para un abordaje más comprensivo y lo ejem-plifica con manuales de texto de Singapur. Zhao (cap. 8) propone un modelo complementario de intersemiosis para estudiar los textos de hipermedia, en el que las relaciones entre los diversos recursos de significado son entendidas como patrones logogenéticos. Zappavigna, Cléirigh, Dwyer y Martin (cap. 9) analizan las relaciones de emparejamiento entre la fonología y los gestos, en tanto que estos últimos también poseen una estructura prosódica, a través de un corpus de filmaciones de encuentros realizados en el marco de la justicia juvenil en Australia. Bednarek (cap. 10) cierra el libro ofreciendo una contri-bución no solo a la combinación de la lingüística del corpus y las dimensiones teóricas de la LSF, sino también al análisis de la cultura popular con el estudio de la serie televisiva estadounidense Gilmore Girls.

Como se mencionó arriba, Martin (cap. 1) se ocupa de desarrollar el marco teórico general de estas investigaciones revisando algunos conceptos clave de la LSF para dar cuenta del sistema como un conjunto de recursos potenciales de significado: los conceptos de metafunción, realización e instanciación, entre otros. Primero, explica que, además de la jerarquía de la realización entre los tres estratos sociales (género, registro y sistema lingüístico), existe la jerarquía complementaria de la instanciación. Esta noción relaciona el sistema con las instancias de uso, recontextualiza los trabajos sobre las nociones de registro y género e introduce los conceptos de emparejamiento y compromiso como herramientas para explorar la multimodalidad en relación con la variación fun-cional entre los textos. Luego, pasa a desarrollar la jerarquía complementaria de la individuación, que relaciona el sistema con los repertorios de uso. Esta per-mite revisar los trabajos sobre el concepto de la orientación del código (Hasan, 2009, siguiendo a Bernstein, 1971) e introduce las nociones de vinculación e

121

Reseñas

iconización como herramientas para explorar la afiliación. Finalmente, se ocupa de la génesis (la variación semántica en el tiempo), reviendo los trabajos sobre filogénesis (evolución del sistema), ontogénesis (desarrollos de los repertorios) y logogénesis (instancias desarrolladas de uso).

Martin señala la diferencia teórica entre realización e instanciación con-siderando el lugar del registro y el género en cada jerarquía. Como el género es un patrón configurativo del campo, el tenor y el modo, se sitúa en la cima de la escala de la realización, en el nivel más alto de abstracción. Pero como cada género despliega una configuración recurrente específica de significados, estos están posicionados como un sistema de sub-potencial en la escala de ins-tanciación. Todos los estratos de realización, por lo tanto, están involucrados en la instanciación, que es una jerarquía relativamente poco desarrollada en la LSF, de modo que este libro es un importante aporte para pensar esta categoría central de relaciones jerárquicas.

Dos conceptos presentes en la línea de trabajo de todos investigadores cuyos trabajos conforman este libro son los de emparejamiento y compro-miso. Por emparejamiento se hace referencia al modo en que los significados se combinan a través de los estratos, metafunciones y sistemas simultáneos (incluyendo las modalidades). En tanto que la jerarquía de la realización se ocupa de las combinaciones de significado en general, un conjunto indefini-damente amplio de combinaciones posibles queda abierto; y, dado que los textos especifican combinaciones de este conjunto, el concepto de empareja-miento resulta entonces útil para centrar la atención en cómo se desarrollan estas combinaciones. Por compromiso se refieren al grado de especificidad del significado que se instancia en un texto. Esto tiene que ver con cuántas elecciones de significado son tomadas y la manera en la que, generalmente, en un texto, estas elecciones se suscriben a un modo particular de instanciación. Emparejamiento y compromiso son procesos que se interrelacionan, ya que los modos de compromiso que llevan a cabo los sujetos tienen que ver en los discursos multimodales con modos de emparejar imágenes, sonidos y textos verbales, entre otras posibilidades de instanciación de los recursos semióticos.

De esta manera, la multimodalidad se constituye en una semiótica en la que la instanciación es fundamental para comprenderla e interactúa con mu-chos fenómenos de la biología humana poco estudiados desde una perspectiva sistémico-funcional, que guarda relación (entre otros) con el ver, el gesticular o el oír, aspectos que son tratados en este libro. El color, por ejemplo, impacta somáticamente en los observadores, lo que genera una respuesta neurobiológica. Esto plantea cuestiones importantes sobre los límites de la semiosis y la respon-sabilidad de los semiólogos para realizar emparejamientos no sólo a través de las modalidades de la comunicación, sino entre esas modalidades y su incorporación en las especies biológicas. Como Caldwell (cap. 3) y Zappavigna et al. (cap. 9) demuestran, en lo que respecta a la interacción del sonido y la expresión verbal, la cuestión del significado incorporado es, hoy en día, insoslayable.

122

12 (1)

Mientras que la instanciación refiere a la especialización del potencial de significado de una cultura en los textos, la individuación especializa ese potencial de significado de acuerdo con la gente (privilegiando los usuarios, antes que los usos del lenguaje) y su pertenencia a determinados grupos sociales en y con los que construye su identidad. Las lecturas de los investigadores de este libro en materia de diferenciaciones de género, generación y clase social son espe-cialmente acertadas y afinadas: no solo reconocen estilos semánticos asociados con identidades tales como género y generación (Knight: cap. 2; Tian: cap. 6) sino los estilos de diversos grupos sociales, incluyendo naciones (Tann: cap. 7), las llamadas ‘tribus urbanas’ de varias clases (emos, góticos, motoqueros), círculos de amigos (Knight: cap. 2), parejas y personalidades individuales. En LSF. el principal trabajo sobre individuación ha sido orientado a la generación, el género y la clase en el lenguaje materno de niños en edad preescolar (Hasan, 1996). En este libro, sin embargo, se muestra el rol capital que también jue-gan los medios de comunicación y la cultura popular en la negociación de la identidad (Caldwell: cap. 3; Knox et al.: cap. 4; Caple: cap. 5.; Tian: cap. 6).

Siguiendo a Bernstein (1996), Martin (cap. 1) explica que la afiliación de un sujeto es una trayectoria que empieza con su constitución como persona, pasa por su grado de pertenencia a alguno/s de los grupos de la sub-cultura (como las “tribus urbanas”), conforma luego una identidad primaria y, por último, se integra como sujeto social a una determinada cultura. El proceso de individuación es una trayectoria que sigue un recorrido inverso al de la afiliación: la jerarquía va desde la integración a una cultura del sujeto hasta la constitución de la persona (Knight: cap. 2). Los procesos de afiliación e individuación son actividades de negociación donde los hablantes evalúan los distintos factores socio-culturales (grupos sociales, identidad, cultura, etc.) a partir de la instanciación de recursos evaluativos del potencial de significados. Recientemente, la teoría de la evaluación (Martin y White, 2005; Tian: cap. 6; Tann: cap. 7) ha llamado la atención sobre la importancia de la negociación en las comunidades a través del lenguaje evaluativo. Las evaluaciones son las que actúan como recursos constitutivos de la pertenencia a una comunidad, ya que las funciones evaluativas aportan la experiencia común y los valores compartidos entre los sujetos (Bednarek: cap. 10).

Con respecto a la logogénesis, el libro plantea que todos los empareja-mientos tienen que ser, en última instancia, progresivos, en forma de cadenas lineales de sonidos, gráficos o signos gestuales. La orientación paradigmática de la jerarquía de la realización en LSF ha sido poderosa en cuanto a la cartografía del potencial de significado de las culturas (Matthiessen, 1995). Pero en materia de logogénesis, que tiene que ver con los fenómenos sintagmáticos de significar en el decurso del tiempo, muchos lingüistas han interrumpido su investigación (Martin, 1985; O’Donnell, 1990). Sin embargo, en este libro Zhao (cap. 8) explora el tema en relación con los textos basados en la web y Zappavigna et

123

Reseñas

al. (cap. 9) analizan cuidadosamente el desarrollo semiótico-temporal a través de dos modalidades: la entonación y el gesto. Hasta tanto se diseñe una forma de visualizar la animación de base matemática para el tiempo real de los em-parejamientos en el desarrollo del discurso, será difícil que este progreso más que anecdótico en los estudios de logogénesis pueda superar estos límites. Las series de textos no son sino un conjunto de significados acumulándose en el tiempo, como una esfera rodando que se desarrolla día a día en ese recorrido; pero aún no puede obtenerse una percepción sinóptica cabal de lo que está ocurriendo en ese proceso semántico-genético.

En síntesis, este libro representa un marco metodológico y teórico coherente y elegante, cuya perspectiva multifuncional y multimodal permite explorar nuevas líneas de investigación que en la actualidad han sido poco trabajadas y, por eso mismo, constituyen un fascinante desafío. De ahí su valor principal: el de promover nuevas ideas que contribuyen a extender los alcances de la LSF a otros objetos, intereses y, en definitiva, problemas del lenguaje y la sociedad en el siglo XXI.

RefeRencias bibliogRáficas

BeRnstein, B. (1971). Class, Codes, and Control. London: Routledge. Vol. I.beRnstein, B. (1996). Pedagogy, Symbolic Control and Identity: Theory, Research,

Critique. London: Taylor & Francis.Halliday, M. A. K. & MattHiessen, C. M. I. M. (1999). Construing Experience

through Meaning. A Language-based Approach to Cognition. London: Cassell.Halliday, M. a. K. & MattHiessen, C. M. I. M. (2004). An Introduction to

Functional Grammar. London: Arnold.Hasan, R. (1996). Ways of Saying: Ways of Meaning. London: Cassell.Hasan, R. (2009). Semantic Variation: Meaning in Society and in Sociolinguistics.

London: Equinox. Vol. II.KRess, g. & van leeuwen, T. (2006 [1996]). Reading Images: The Grammar of

Visual Design. London: Routledge. MaRtin, J. R. (1985). ‘Process and Text: Two Aspects of Human Semiosis’, en

J. D. Benson y W. S. Greaves (eds.) Systemic Perspectives on Discourse, pp. 248-274. Norwood, NJ: Ablex.

MaRtin, J. R. & wHite, P. R. R. (2005). The Language of Evaluation: Appraisal in English. London: Palgrave.

MattHiessen, C. M. I. M. (1995). Lexicogrammatical Cartography: English Systems. Tokyo: International Language Science Publishers.

o’donnell, M. (1990). ‘A Dynamic Model of Exchange’, Word, 41 (3): 293-328.

Damián AlvaradoUniversidad de Buenos Aires damianalvarado@filo.uba.ar

124

12 (1)

KRESS, Gunther R. (2010). Multimodality: A Social Semiotic Approach to Contemporary Communication. London & New York: Routledge. 213 pp. ISBN 978-0-415-32061-0.

Los análisis (inusuales) del catálogo de entidades semióticas (usuales) que se desarrollan en este volumen no son sino las ilustraciones y los ejemplos que alternan el desarrollo de un abordaje teórico acerca de la condición mul-timodal del significado y la comunicación humanos. Así, el libro comienza con el análisis de tres carteles con indicaciones para estacionar. En el capítulo segundo, el autor desarrolla con detenimiento las consideraciones teóricas de su marco de análisis, particularmente en referencia al entorno social de la comunicación contemporánea –tema sobre el que volveremos más adelante; en el capítulo tercero, se analizan las condiciones de la comunicación en una sala de cirugía, el tratamiento de la digestión en dos manuales escolares y dos de los mapas de las visitas a una muestra en un museo; en el capítulo cuarto, el autor analiza ilustraciones hechas por niños, el portal de un sitio web, los sobres de condimentos de tres líneas áreas distintas, dos envases de un mismo desodorante, un auto armado con piezas lego y dos fotos de un mismo salón tomadas de distinta forma; en el capítulo quinto, su corpus incluye un mapa conceptual de la circulación de la sangre, la narración de la misma circulación, la escritura alfabética y en caracteres, el dibujo de una línea de tiempo occidental, un esquema modular y una bandeja oriental para el almuerzo; en el capítulo sexto, se estudian la fachada y el hall de entrada de un edificio, la foto de un mismo rostro inserta en un pasaporte y en fuera de ese contexto, sellos y una suma de dibujos que incluye una clasificación doméstica y una escolar; en el capítulo séptimo, dos mondadores o pelapapas y los distintos portales de una misma página web se constituyen en objeto de análisis; en el capítulo octavo, la reflexión teórico y analítica se centra en los dibujos y los gestos que hiciera un profesor en una clase sobre la circulación de la sangre y afiches hechos en el aula con diferentes consignas acerca de un mismo tema; en el capítulo noveno, se aborda el estudio de los signos de aprendizaje en la escritura y en los dibujos hechos por dos niños de seis años; en el capítulo décimo -en coautoría con Adami– se analiza un teléfono móvil: el modelo N95 desarrollado por Nokia.

Los análisis de este corpus amplio y heterogéneo son la puesta en acción del enfoque teórico y estudian los potenciales semióticos y los facilitantes (en inglés, affordances) de los modos y ensambles, en particular, y su proyección posible, en general. En otras palabras, qué puede significar un modo que no pueda significar otro, cómo se construyen los signos (en los distintos modos), cómo se forman los significados, cómo se comunican y qué implica comunicarlos.

Sostiene Kress que el mundo del significado ha sido siempre multimodal, que los modos de los que disponemos para representar, conocer y comunicar son múltiples – la imagen, el color, la forma, el habla, los gestos, la escritura, la disposición (retórica). Y que, aunque hegemónica durante siglos, la escritura es

125

Reseñas

solo una de las tecnologías de la comunicación, solo una de las formas de trans-cribir nuestra relación con el mundo y representarlo. Las nuevas tecnologías, medios y dispositivos de comunicación, en un contexto social globalizado en el que el mercado comparte y supera el poder del estado, amplían y fomentan la agencia individual de opciones y elecciones en la factura del sentido. La mani-pulación de la información, la producción del conocimiento y la constitución de la subjetividad, todas formas de aprendizaje, implican un proceso incesante de creación de significados en desarrollo gobernado por un equilibrio pujante entre los recursos culturales y las elecciones individuales.

Kress adopta, por eso, la perspectiva funcional del modelo semiótico propuesto por Halliday (1978). Una teoría completa de la comunicación ne-cesita representar significados acerca de acciones, estados y eventos del mundo –función ideativa–, significados acerca de la relación social de quienes estén involucrados en la comunicación –función interpersonal– y tener la capacidad de formar textos, es decir, entidades semióticas complejas que puedan proyectar un mundo (social) completo, que puedan, a su vez, funcionar como mensajes internamente cohesivos y coherentes con el entorno –función textual.

Los diferentes modos, es decir, los diferentes recursos semióticos dis-cretos que satisfagan los requisitos teoréticos funcionales, poseen diferentes potenciales para producir significados. Esos potenciales producen un efecto fundamental en la elección del modo o ensamble en instancias específicas de comunicación. Si los dispositivos o facilitantes de los modos difieren, es evidente que no configuran el mundo de la misma forma. Los modos podrán concebirse, entonces, como tecnologías de transcripción para representar el mundo. Las opciones y las elecciones modales son, por eso, tanto individuales como socialmente motivadas.

La sociedad es el dominio de la (inter)acción humana, el terreno del trabajo, las prácticas, los usos y los efectos del poder. La cultura es un recorte evaluativo de los efectos del poder social. La globalización, sin embargo, constituida de diversa forma en distintos lugares, en interacción con la vasta variedad cultu-ral, social, económica y política del globo, produce efectos e impactos en las condiciones que hacen posible que características de uno o varios lugares –sean financieras, culturales o tecnológicas– estén presentes y activas en otro u otros. En el mundo, prácticas y valores de todo tipo están sujetos a fuerzas externas al dominio comprendido por lo local e inmediato. La relativa estabilidad del mundo social de hace uno o varios siglos (según la región) devino, durante las últimas tres décadas, en inestabilidad. La movilidad provisional y sincrética de las nuevas formas de representación y comunicación propició y produjo cambios de largo alcance en el dominio del significado, es decir, el dominio de quienes hacemos el significado.

Contra la subjetividad del ciudadano (de Estado), que adhiere mayormente a las nociones de responsabilidad, convención y clase sociales, la globalización y el mercado instalan y prefieren la subjetividad del consumidor (participante),

126

12 (1)

imbricado en las concepciones de opción y estilo de vida – estilo entendido como la política de las opciones, cuyos principios también controla el mercado. El avance del capitalismo que busca y crea nuevos nichos de mercado fomenta la fragmentación social, maximiza las opciones y, en eso, desarticula la noción de clase social en estilo de vida. Teóricos de la representación y la comunicación humanas proponen un término aparentemente más apropiado y comprensivo, mundo de vida (en alemán, lebenswelt), que agrupa factores y recursos sociales y culturales, tales como educación, género, generación, etnicidad, ocupación o profesión (Schütz & Luckmann, 1984). El impacto, entonces, de los potenciales modales y semióticos y los posibles efectos de aceleración y desarrollo de las tecnologías para la producción y la comunicación de mensajes necesitan ser considerados en este contexto.

Las nuevas formas de accesibilidad, diseminación, movilidad, conectividad y ubicuidad que facilitan los nuevos dispositivos tecnológicos condicionan los criterios de la composición de textos, ya sean multi o monomodales. Procedimientos como copiar –cortar, descargar, arrastrar, re-contextualizar– y pegar confieren protagonismo al intérprete o usuario y ponen en crisis los crite-rios de autoría, autenticidad y legitimidad de cierto tipo de textos y, entonces, cierto tipo de información y conocimiento (Barthes, 1968). Los límites de los marcos ontológicos, epistemológicos, discursivos y genéricos devienen, pues, borrosos. Tanto la canonicidad de los modos –sea la escritura o la imagen– como los marcadores discursivos de poder (Foucault, 1982) son relativos a condiciones genéricas (Bakhtin, 1986) circunstanciales.

Una teoría socio semiótica de la multimodalidad en la que se inscribe la obra de Kress representa, pues, un cambio de paradigma (Kuhn, 1968) res-pecto de las concepciones tradicionales del lenguaje, es decir, un cambio de punto de vista. El lenguaje, entendido como el recurso total de la expresión y las representaciones, como el fundamento de la racionalidad, suficiente para todo lo que pueda ser dicho, escrito, pensado, sentido o soñado (Eco, 1979), según una teoría de la semiosis social, es sólo un recurso representativo y co-municativo parcial e insuficiente. En este modelo, la categoría del lenguaje –la oralidad y la escritura, según la escisión de sus modos– es satelital (Kress & van Leeuwen, 1996). Si los modelos lingüísticos priorizan la generalización formal y sistemática de los fenómenos integrales de la comunicación, un enfoque socio semiótico de la comunicación multimodal –el estudio de los modos– prioriza la materialidad específica de las instancias comunicativas en un entorno determinado de acuerdo con la estabilidad relativa de los recursos en un momento preciso.

Un abordaje de esta naturaleza tiene, por eso, dos ramificaciones teóricas complementarias: la semiótica y la multimodal. La primera se refiere a los sig-nos, al significado y a la formación de signos y significados; la segunda, a los recursos materiales involucrados en dicha factura del significado, a los modos, cuya constante reformulación depende también de la actualización de los dis-positivos y facilitantes, su potencia y sus limitaciones. El interés sintético del

127

Reseñas

abordaje propuesto por Kress en este libro radica, entonces, en los potenciales semióticos de los modos y los ensambles, en su materialidad y en su lógica.

Sobre tales presupuestos, Kress delinea en los tres primeros capítulos, un esquema de la comunicación. Y, a medida que el libro avanza, el esquema, sus categorías y supuestos adquieren claridad y precisión. Se considera que la comu-nicación es un proceso compuesto por dos estadios. Al primero lo gobierna el interés del hacedor inicial (retórico) del texto o complejo sígnico, con la intención de manifestar el complejo semiótico como un mensaje y que el mismo opere en tanto estímulo discreto (en inglés, prompt) para uno o más intérpretes. En el segundo estadio, serán el interés y la atención del intérprete los que conduzcan la selección crítica y el encuadre del mensaje inicial. Asimismo, el significado hecho en tal interpretación puede convertirse en la base de un nuevo complejo sígnico para la composición de un mensaje nuevo.

Desde la perspectiva del hacedor inicial (retórico/diseñador/productor, que pueden o no ser los mismos) la secuencia comienza con un (estímulo discreto anterior y su interpretación →) complejo sígnico nuevo (basado en el interés y la sensibilidad de las características de la audiencia) → un mensaje intencional en tanto estímulo discreto → la atención y el compromiso del interlocutor con el mensaje → y una (posible) respuesta. Desde la perspectiva del intérprete, la secuencia está conformada por el mensaje → el interés del receptor → la atención → el compromiso → la selección → el encuadre → el diseño → y el nuevo signo (interno), cuya exteriorización posible formaría las bases de un nuevo complejo sígnico. Ambos estadios son instancias de trabajo semiótico, ambos son productores de nuevos signos.

Sendos estadios portan, asimismo, una subdivisión contingente (uno de cuyos momentos puede o no cumplirse, según la dirección de la interacción), a saber, el trabajo semiótico interno y el trabajo semiótico de exteriorización. En otros términos, el momento crítico (el interés, la atención y el compromiso), orientado a la relación entre el pasado remoto y el inmediato, y el momento del diseño (la selección, la transformación y el encuadre), orientado al futuro inmediato. El diseño representa el estadio prospectivo de la empresa: el medio que proyecta el interés en el mundo con la intención de causar un efecto.

Esta concepción del trabajo (semiótico) enfatiza la orientación y los pro-pósitos sociales de la teoría. Este trabajo implica experiencia y aprendizaje, involucra y produce cambios en quien trabaja, en las herramientas y en aque-llo en lo que se trabaja. Cada uno de estos cambios, sociales y funcionales, producen y corporizan nuevos significados. El efecto de tales cambios es el de producir recursos culturales. La cultura es, entonces, el nombre de los recursos que han sido hechos, producidos y transformados como resultado del trabajo (social), imbuidos de los significados del trabajo de aquellos quienes hicieron y rehicieron los recursos. Es, entonces, ‘lo social’ lo que genera ‘lo cultural’ y, en eso, ‘lo semiótico’. Contra los sistemas y las gramáticas, los recursos semióticos producidos por esta fuerza de interacción socialmente transformativa portan

128

12 (1)

la regularidad discernible de las prácticas sociales y, así, su estabilidad relativa. En un esquema con estas características el significado es siempre (hecho,

no usado de) nuevo y las entidades que lo representan (en cualquier modo o ensamble) son un todo integrado; la forma, el significado y el uso son inse-parables. Contra la distinción lingüística (hegemónica): sintaxis, semántica y pragmática, Kress –de acuerdo con Peirce (1991)– sostiene que el uso es una parte normal de la factura de cualquier signo y que el significado depende de una conjunción adecuada a la forma. Por eso, la relación entre la forma y el significado multimodales (por ejemplo, el dibujo de un auto o el nombre) no es arbitraria sino motivada y los signos operan como metáforas, siempre hechas de nuevo (Lakoff & Johnson, 1982). La motivación depende del interés del retórico, la selección y la (re) formulación que haga el diseñador (que suele ser el mismo) de los recursos y los dispositivos disponibles de acuerdo con los requisi-tos del entorno social. Según Kress aquello que parece arbitrario (de Saussure, 1983 [1917]) y convencional (Wittgenstein, 1935) es socialmente motivado por principios semióticos generales comunes a la comunicación humana, presentes ostensiblemente en todas las sociedades y sus culturas (Whorf, 1966). Kress no se refiere a universales innatos (Chomsky, 1965) sino a principios, recursos y procesos generales compartidos basados en la experiencia social.

Esta teoría socio semiótica de la multimodalidad hace hincapié, por tan-to, en la agentividad de individuos formados socialmente que hacen signos motivados por intereses y propósitos sociales con recursos hechos en sociedad en interacciones sociales. Aún cuando los significados no se materializaran en signo/s, la formación interna de los significados está motivada socialmente. El dominio social cuenta con (al menos algo) de regularidad, conformada por la suma de las experiencias pasadas y contemporáneas de sus numerosos miembros. El dominio individual se provee de la regularidad social, aunque el uso individual está formado por las contingencias de la experiencia individual, siempre en entornos específicos. Postular que los significados son siempre nuevos e individuales implica que los signos están integrados en un conjunto de experiencias del individuo y que emergen en un entorno y un momento específicos expresados como interés prospectivo.

El compromiso constante con el trabajo, con recursos culturales y semió-ticos socialmente realizados y su rehacer cotidiano, da forma a los recursos individuales internos mediante los cuales los individuos interpretan y trans-forman los potenciales de significado de tales recursos culturales y semióticos. Los recursos y los dispositivos influencian la factura del significado y, en eso, influencian también la formación de la identidad y la subjetividad a partir del uso que se haga de los mismos para abordar y concebir el mundo de vida que afecte y represente la vida de los individuos (Kress & Pachler, 2007).

En efecto, un abordaje retórico como éste implica directamente la pro-ducción del conocimiento y la constitución de la subjetividad, está basado en la diligencia de quienes hacen y rehacen los mensajes, en su interés y sus

129

Reseñas

propósitos, en su capacidad conciente de seleccionar los recursos e interpretar las necesidades de la audiencia y el entorno. El conocimiento se hace y se forma en la representación, de acuerdo con los potenciales facilitantes de los modos; el proceso de representación es idéntico al de la formación del conocimiento. En esto, quienes hacen representaciones (incluso de ellos mismos), hacen co-nocimiento (incluso de ellos mismos); la producción del conocimiento toda ella es parte de procesos participativos socio semióticos.

Una teoría socio semiótica, con todo lo que implica, requiere, pues, un marco básico para la conducta ética de la comunicación. La participación total, activa y por sus propios medios, de todos los miembros de un grupo social, cultural, económica y afectivamente en los asuntos de la comunidad es una condición sine qua non para el desarrollo saludable del grupo. Eso requiere el acceso total a los recursos semióticos, culturales, sociales y económicos e incluye un compromiso con los valores centrales para la mantención de la co-hesión social. Dadas las condiciones, será fundamentalmente ético tener clara conciencia de los efectos de las acciones (semióticas) en el prójimo y actuar de manera que tales efectos no perjudiquen los potenciales de acción de los otros.

Las escuelas y las universidades –tanto como otras instituciones– deben comprometerse con la investigación de los facilitantes comunicativos (y pe-dagógicos) de los nuevos dispositivos y tomar decisiones acerca de posibles acciones a la luz de un asesoramiento detenido de las necesidades y propósitos sociales específicos para la educación. Este libro –concluye Kress– pretende ser un recurso para tales propósitos.

La teoría socio semiótica de la comunicación que sintetiza esta reseña formula, entonces, algunos giros epistemológicos de consideración, a saber, el pasaje de lo monomodal o la multimodalidad en el recorte del objeto de estudio; de lo abstracto a lo material, respecto de la concepción ontológica del mismo, y una transición de lo sincrónico a lo contemporáneo respecto del tratamiento metodológico y, adicionalmente, de las reglas estáticas a las regu-laridades relativas, del sistema o gramática a los recursos semióticos, respecto de algunas consideraciones teóricas distintivas.

El libro que propone tales giros puede interesar principalmente a semiólo-gos, lingüistas, analistas del discurso, pedagogos y psicólogos. A los primeros, sin embargo, pueden incomodarlos o bien invitarlos a contribuir con el desarrollo del modelo algunas imprecisiones teóricas; las definiciones de género y discurso, por ejemplo, dada la abundancia bibliográfica que discute tales conceptos (y el encuentro inadvertido de parte de esa bibliografía en este mismo volumen), son más o menos imprecisas; la adopción de la perspectiva semiótica de Halliday ignora deliberadamente su carácter sistémico y la adhesión a la concepción de signo de Lakoff y Johnson confunde los presupuestos cognitivos de la perspec-tiva precedente (cf. Halliday & Matthiessen, 1999); y, aunque Kress aclare que no es el propósito del libro, las presuntas confusiones atribuidas a de Saussure parecen ignorar el recorte del objeto de la lingüística estructural.

130

12 (1)

Hechas estas las advertencias, celebro y fomento los propósitos éticos y pedagógicos declarados, y sostengo que este libro, resueltas las inconsistencias teóricas y la definición de los modos que el propio Kress advierte parcialmente irresoluta, puede ser una provechosa herramienta analítica, que ya es una audaz contribución para quienes seguimos preguntándonos –e investigamos– sobre el posible significado de las cosas.

RefeRencias bibliogRáficas

BaKHtin, M. (1986). Speech Genres and Other Essays. Cambridge, MA: MIT Press.BaRtHes, R. (1968/1978). The Death of the Author, en Barthes, R. Image- Mu-

sic- Text (traducido por Heath, S.), pp. 142-148. New York: Hill & Wang. CHoMsKy, n. (1965). Aspects of the Theory of Syntax. Cambridge, MA: MIT Press. Eco, U. (1979). A Theory of Semiotics. Bloomington: Indiana University Press.Foucault, M. (1982). The Archaeology of Knowledge and Discourse on Language.

London: Tavistock Press. Halliday, M. A. K. (1978). Language as a Social Semiotic. London: Edward Arnold.Halliday, M. a. K. & MattHiessen, C. (1999). Construing Experience through

Meaning: A Language-based Approach to Cognition. London & New York: Continuum.

KRess, g. R. & PacHleR, M. (2007). Thinking about the “m” in m-learning, en M. Pachler (ed.) Mobile Learning. Structures, Agency, Practices, pp. 7-32. London: Springer.

KRess, g. R. & van leuween, t. (1996). Reading Images: The Grammar of Graphic Design. London: Routledge.

KuHn, t. (1968). The Structure of Scientific Revolutions. Chicago: University of Chicago Press.

LaKoff, g. & JoHnson, M. (1982). Metaphors We Live By. Chicago: University of Chicago Press.

PeiRce, cH. s. (1991). Peirce on the Semiotic. Chapel Hill: University of North Carolina Press.

de saussuRe, f. (1983 [1917]). Course in General Linguistics (R. Harris trans.). London: Duckworth.

scHütz, a. &. lucKMann, T. (1984). Strukturen der Lebenswelt. Band 2, Frankfurt am Main: Suhrkamp.

wHoRf, b. l. (1966). Language, Thought, and Reality: Selected Writings of Benjamin Lee Whorf. J. Carrol (ed.). Cambridge, MA: MIT Press.

wittgenstein, L. (1935). Philosophical Investigations. New York: Prentice Hall.

Julian E. EzquerraUniversidad de Buenos Aires

julianez@gmail.com

131

Indice acumulado

Indice acumulado

VOLUMEN 1 (1) 2001

CHARAUDEAU, Patrick, De la competencia social de comunicación a las competencias discursivas, 7-22.

MARCUSHI, Luiz Antônio, Aspectos da questão metodológica na análise da interaçao verbal: o continuum cualitativo-cuantitativo, 23-42.

CARBÓ, Teresa, Tocar el lenguaje con la mano: experiencias de método, 43-67.VAN DIJK, Teun, Algunos principios de la teoría del contexto, 69-81.ESPAR, Teresa, Estrategias enunciativas en el discurso irónico: un artículo de opinión

de José Ignacio Cabrujas, 83-100.

ReseñasTeun van Dijk (comp.), El discurso como estructura y proceso. Estudios del discurso:

Introducción multidisciplinaria, reseñado por Guillermo Soto, 103-125.Giovanni Parodi Sweis (comp.), Relaciones entre lectura y escritura: una perspectiva

cognitiva discursiva. Bases teóricas y antecedentes empíricos, reseñado por Rebeca Beke, 127-130.

Helena Calsamiglia Blancaflor y Amparo Tusón Vals, Las cosas del decir. Manual de análisis del discurso, reseñado por Antonio Núñez, 133-137.

VOLUMEN 2 (1) 2002

VILLAÇA KOCH, Ingedore G., A construçã de objetos-de-discurso, 7-20.CUCATTO, Mariana, Cómo “hacer hacer” cosas con palabras. La construcción

discursiva del estereotipo femenino en la publicidad de los 90. El caso de Slim Center, 21-49.

WILLIAMSON, Rodney, Situación comunicativa y estructura genérica en la telenovela mexicana, 51-68.

MADRIZ, María Fernánda, La noción de pueblo en el discurso populista, 69-92.RUIZ ÁVILA, Dalia, Discurso autobiográfico e identidad sociocultural, 93-109.

ReseñasBob Hodge y Kam Louis, The politics of Chinese language and culture. The art of reading

dragons, reseñado por Irene Fonte, 111-114.Susan Hunston y Geoff Thompson (eds.), Evaluation in text: Authorial Stance and the

Construction of Discourse, reseñado por Nora Kaplan, 115-121.Ingedore Grunfeld Villaça Koch, Desvendando os segredos do texto, reseñado por Lenita

Vieira, 122-126.

132

12 (1)

VOLUMEN 3 (1) 2003

CADEMARTORI D. Yanina, La inscripción de las personas en textos de divulgación científica, 9-27.

CHAMORRO MIRANDA, Diana, MIZUNO HAYDAR, Jorge y MOSS, Gillian, Tergiversaciones y correspondencias: la metáfora y sus bemoles, 29-47.

GARCIA DA SILVA, Denise Elena, Discurso y cognición social en la “red” de las metáforas, 49-69.

MARTINS FERREIRA, Dina María, La identidad en la posmodernidad: Lula y la construcción discursiva del sujeto, 71-81.

VIEIRA, Lenita D., El mundo al revés. Humor en el discurso político, 83-91.

ReseñasLeda Berardi (comp.), Análisis crítico del discurso. Perspectivas latinoamericanas, reseñado

por Luisa Martín Rojo, 93-96.Luisa Martín Rojo (dir.), Ester Alcalá Recuerda, Aitana Gari Pérez, Laura Mijares,

Inmaculada Sierra Rodrigo y Mª Ángeles Rodríguez, ¿Asimilar o integrar? Dilemas ante el multilingüísmo en las aulas, reseñado por Dalia Ruiz Ávila, 97-101.

Analia Brandolín y María Eugenia Rosboch, Transformaciones “al aire”: radio, medios y poder, reseñado por Pedro Santander Molina, 102-107.

VOLUMEN 4 (1) 2004

ROMANO PACÍFICO, Soraya Maria y SOUSA ROMÃO, Lucília Maria, Intertextualidade e humor: No país do carnaval “Muito riso e pouco siso” é o lema nacional, 7-24.

ACOSTA V., Gladys Lucía, El Ser y el Hacer del DIRCOM: un análisis en la perspectiva del discurso, 25-46.

RODRÍGUEZ ALFANO, Lidia y KOIKE, Dale April, La interacción en diálogos transmitidos por la radio en la frontera, 47-72.

KICZKOVSKY, Silvia, Los relatos tradicionales como vehículos de valores éticos, 73-88.

HESS ZIMMERMANN, Karina, El desarrollo de la habilidad para manejar tiempos verbales en la narración, 89-102.

ReseñasPatrick Charaudeau, El discurso de la información. La construcción del espejo social,

reseñado por María Jesús Nieto y Otero, 103-104.Dalia Ruiz Ávila, Tejiendo discursos se tejen sombreros. Identidad y práctica discursiva,

reseñado por Irania Malaver, 105-107.Deborah Schiffrin, Deborah Tannen y Heidi E. Hamilton, (comps.) The handbook of

discourse analysis, reseñado por Nora Kaplan, 108-114.

133

Indice acumulado

VOLUMEN 4 (2) 2004

ZULLO, Julia y RAITER, Alejandro, Piquetes y piqueteros. Los actores sociales de la pobreza en la prensa argentina, 7-26.

ESCAMILLA MORALES, Julio y MORALES ESCORCIA, Efraín, Imaginarios culturales subyacentes en la canción vallenata, 27-53.

OSUNA, Zulaima, GALINDO VILLARDÓN, Ma Purificación y MARTÍN VALLEJO, Javier, Análisis estadístico de datos textuales. Aplicación al estudio de las declaraciones del Libertador Simón Bolívar, 55-62.

ALVAREZ, Guadalupe, Estudio sobre la representación del trabajo en el discurso de los indigentes de la Ciudad de Buenos Aires, 63-89.

CHUMACEIRO, Irma, Las metáforas políticas en el discurso de dos líderes venezolanos: Hugo Chávez y Enrique Mendoza, 91-113.

ReseñasGladys Acosta y Jorge Sánchez, Construcción de Identidad y Función Política en el discurso

del director de comunicaciones, reseñado por Olga Beatriz Muñoz, 115-119.Michel Meyer (Ed.), Perelman. Le renouveau de la rhétorique, reseñado por Frances

D. de Erlich, 120-126.Teun A. van Dijk, Racismo y discurso de las élites, reseñado por Leda Berardi, 127-

133.

VOLUMEN 5 (1) 2005

BERTORELLO, Adrián, El estatuto de la subjetividad en la teoría polifónica de la enunciación, 7-25.

RESENDE, Viviane De Melo, Y SEBBA RAMALHO, Viviane C., Análise de discurso crítica: uma reflexão acerca dos desdobramentos recentes da teoria social do discurso, 27-50.

MARTINS FERREIRA, Dina Maria, La construcción de la identidad de lo femenino: pragmatismo, imaginario y simbolismo, 51-61.

SHARIM PAZ, Sarah y MUÑOZ ACEVEDO, Daniel, Una propuesta metodológica para el análisis del diálogo: la Unidad Interaccional, 63-96.

BURDACH, Ana María y ROSS A., Paula, La construcción de la voz del enunciador en el discurso político de Ricardo Lagos, ex-Presidente de la República, 97-112.

ReseñasMarianne Peronard y Ximena Gómez García (Eds), El hombre y su palabra, reseñado

por Juana Marinkovich, 113-115.Anamaría Harvey (comp.), En torno al discurso. Contribuciones de América Latina,

reseñado por Marianne Peronard Thierry, 121-125.Giovanni Parodi (ed), Discurso especializado e instituciones formadoras, reseñado por

Carmen López Ferrero, 116-120.

134

12 (1)

VOLUMEN 5 (2) 2005

CONSTANTINO, Gustavo Daniel, Modalidades comunicativo-discursivas de participación en comunidades virtuales de aprendizaje: una propuesta para la evaluación formativa, 7-32.

FLORES TREVIÑO, María Eugenia, La ironía y el humor en El Habla de Monterrey, 33- 47.

GALLUCCI, María José, Argumentación y funciones estratégicas en el discurso político venezolano: el cierre de campaña del referéndum revocatorio presidencial, 49-75.

FONTE Irene y WILLIAMSON, Rodney, Marcos temporales y proyectos comunicativos: el análisis de la temporalidad en la interacción verbal, 77- 94.

RODRÍGUEZ ALFANO, Lidia y ELIZONDO REGALADO, Gabriela, Dime a quién citas y te diré quién eres. La co-construcción de la identidad en el diálogo, 95- 106.

SALGADO ANDRADE, Eva, Una nueva tipología para analizar la prensa en México, 107- 125.

ReseñasAlexandra Álvarez Muro, Poética del habla cotidiana, reseñado por Ainoa Larrauri, 127- 133.Jan Renkema, lntroduction to discourse studies, reseñado por María Valentina Noblía,

134- 137.Rodney Williamson y Fernando de Diego, Verbo e Imagen en la Telenovela mexicana, reseñado

por Yoconda Correa Maneiro, 138- 146.

VOLUMEN 6 (1) 2006

OQUENDO, Luís y DOMÍNGUEZ, Mariluz, Género, étnia y actitudes lingüísticas en hablantes bilingües wayuu, 5-20.

SOUSA ROMÃO, Lucília María, RIBEIRO PATTI, Ane y DE MACEDO RIBEIRO PATTI, Antônia, Heróis da mídia na voz das crianças: efeitos de sentido sobre/da infancia, 21-38.

MARCHESE, Mariana Carolina, La construcción del signo “indigente” en el discurso de las instituciones estatales de la Ciudad de Buenos Aires, 39-62.

TRINDADE, Eneus y FABIANO ANNIBAL, Sergio, Os sentidos do espaço na enunciação midiática publicitária, 63-76.

ESTRADA, Andrea, Originalidad vs. claridad en el discurso académico: la comprensión del evidencial reformulativo ‘en todo caso’, 77-112.

ReseñasLuís Alfonso Ramírez Peña y Gladis Lucía Acosta Valencia (comps.), Estudios del

discurso en Colombia, reseñado por Martha Shiro, 113-119.Viviane de Melo Resende y Viviane Ramalho, Análise de discurso crítica, reseñado por

João Bosco B. Bonfim, 120-123.Denise Elena García Da Silva, Nas instancias do discurso. Uma permeabilidade de

fronteiras, reseñado por Lúcia Gonçalves de Freitas, 124-128.

EntrevistaÓscar Iván Londoño Zapata, El análisis crítico del discurso (ACD), una actitud de

resistencia. Entrevista a Teun A. van Dijk, 129-135.

135

Indice acumulado

VOLUMEN 6 (2) 2006

MASSONE, María Ignacia y BUSCAGLIA, Virginia Luisa, La cumbia villera (en)red(ada) en el discurso. Una introducción al monográfico sobre cumbia villera en Argentina, 5-20.

MASSONE, Manuel y DE FILIPPIS, Mariano, “Las palmas de todos los negros arriba…” Origen, influencias y análisis musical de la cumbia villera, 21-44.

MARCHESE, Mariana Carolina, Tango: el lenguaje quebrado del desarraigo, 45-60.SERPA, Cecilia, Estado argentino y cumbia villera, 61-82.PARDO, María Laura, Cumbia villera en Argentina: un análisis crítico del discurso

de la posmodernidad, 83-95.

ReseñasDaniel Cassany, Tras las líneas. Sobre lectura contemporánea, reseñado por Cristina

D’Avolio, 97-103.Norman Fairclough, Language and globalization, reseñado por Viviane de Melo

Resende, 104-111.Teun A. Van Dijk, Dominación étnica y racismo discursivo en España y América Latina,

reseñado por Luisana Bisbe, 112-120.

VOLUMEN 7(1) 2007

GALLEGO MENGOD, Verónica, Metodología para el análisis de las publicaciones periódicas: los géneros discursivos como señales de cambio (Ensayo Literario 1872-1874), 5-30.

KALTENBACHER, Martín, Perspectivas en el análisis de la multimodalidad: desde los inicios hasta el estado del arte, 31-58.

SANTANDER, Pedro, Análisis Crítico del Discurso y análisis de los medios de comunicación: retos y falencias, 59-78.

XU, Shi, Reconstruyendo los paradigmas orientales de los estudios del discurso, 79-94.VIEIRA, Lenita, Humor en editoriales de TalCual: Texto e imagen en el discurso

político, 95-114.

ReseñasAdriana Bolívar (comp.), Análisis del discurso ¿Por qué y para qué?, reseñado por Francisco

José Bolet, 115-123.Neyla Pardo Abril, Cómo hacer análisis crítico del discurso. Una perspectiva

latinoamericana, reseñado por Alicia Carrizo, 124-132.Luis Alfonso Ramírez Peña, Comunicación y discurso. La perspectiva polifónica en los

discursos literario, cotidiano y científico, reseñado por Gonzalo Pubiano Bernal, 133-140.

136

12 (1)

VOLUMEN 7(2) 2007

ALVES, A., FERRAREZI, L. y SOUSA ROMÃO, L. M., Leitura de barraco: a semente da leitura, o discurso e os movimentos do sujeito, 5-20.

BISBE BONILLA, L., El amerindio venezolano en los textos escolares: una represen-tación discursiva desde la Gramática Sistémica Funcional, 21-48.

BOLET, F. J. Estrategias de divulgación de la ciencia en Venezuela a fines del siglo XIX: El Zulia Ilustrado (1889-1896), 49-72.

GUALDA, R., As Eleições Presidenciais de 2002 nas páginas de “Veja”, 73-90.MONTERO, A.S., Política y convicción. Memorias discursivas de la militancia se-

tentista en el discurso presidencial argentino, 91-114.

ReseñasLiliana Cubo de Severino (coord.), Los textos de la Ciencia. Principales clases del discurso

académico-científico, reseñado por Telma Piacente, 115-118.Martha Shiro, La construcción del punto de vista en los relatos orales de niños en edad

escolar. Un análisis discursivo de la modalidad, reseñado por Guillermina Piatti, 119-123.

Patricia Vallejos Llobet (coord.), Los estudios del discurso. Nuevos aportes desde la inves-tigación en la Argentina, reseñado por María Leticia Móccero, 124-128.

VOLUMEN 8(1) 2008

NÚMERO MONOGRÁFICO: HOMENAJE A LUIZ ANTÔNIO MARCUSCHI

Apresentaçao. Saito Monteiro De BarroS Kasue, Garcia Da Silva, Denize Elena y aGuiar, Marigia Ana M.

DE ARRUDA C. DA CUNHA, Dóris. Reflexões sobre as nocões de leitor, autor e polifonía no hipertexto, 9-18.

GARCIA DA SILVA, Denize Elena y RAMALHO, Viviane. Reflexões para uma abordagem crítica dos géneros discursivos, 19-40.

BOLÍVAR, Adriana. El informe de arbitraje como género discursivo en la dinámica de la investigación, 41-64.

SAITO MONTEIRO DE BARROS, Kasue. Estratégias de (im)polidez em interações acadêmicas virtuais, 65-76.

PARDO ABRIL, Neyla Graciela. El discurso multimodal en Youtube, 77-108.POSSENTI, Sírio. Um percurso: o caso “por qué no te callas?”, 109-118.

ReseñasLuiz Antônio Marcuschi, Produção textual: análise e compreensão. Reseñado por Cristina

Teixera, 119-121.Luiz Antônio Marcuschi, Cognição, Linguagem e Práticas Interaccionáis. Reseñado por

Judith C. Hoffnagel, 122-124.Luiz Antônio Marcuschi, Fenómenos da linguagem. Reseñado por Viviane de Melo

Resende, 125- 124.

137

Indice acumulado

VOLUMEN 8(2) 2008

BIANCARDI, Maria Silvia, La representación de los “recursos naturales” en la prensa. El uso de las nominalizaciones en crónicas de Clarín sobre Minera La Alumbrera, 5-23.

COLARES Virginia, JARDIM, Natalia, PEDROSA, Bruno, BARROS, Lívia y SIM-PLÍCIO Kamila, Buracos do Recife: estudo de uma decisão judicial, 25-44.

CORTÉS, Daniel F., Una mitigación reveladora: La Declaración de Principios de la Marina argentina (noviembre de 1955), 45-60.

RAMALHO, Viviane, Anúncio publicitário de medicamento: discurso e ideologia, 61-79.ROGERS, Rebecca, Entre contextos: un análisis crítico del discurso de la alfabetización

familiar, las prácticas discursivas y las subjetividades de la alfabetización, 81-132.

ReseñasPatrick Charaudeau, Entre populisme et peopolisme. Comment Sarkozy a gagné, Reseñado

por Karina M. Ibañez, 133-137.Beatriz Gabbiani e Irene Madfes, Conversación y poder. Análisis de interacciones en aulas

y consultorios, Reseñado por María Carolina Ferrari, 138-140.María Laura Pardo, El discurso sobre la pobreza en América Latina, Reseñado por María

Lucía de la Vega, 141-147.

EntrevistaClaudia Gabriela D’Angelo, Tendencias actuales de los estudios multimodales. Entrevista

a Martin Kaltenbacher, 149-156.

VOLUMEN 9(1) 2009

NÚMERO MONOGRÁFICO

SOTO, Guillermo, Introducción: Relaciones entre la gramática y el discurso, 5-10. CUCATTO, Andrea, Un enfoque lingüístico-cognitivo para trabajar la conexión en los textos

escritos. De la gramática al discurso, 11-43.CUCATTO, Mariana, Narrar para describir; describir para argumentar. La operación lingüís-

tico-cognitiva de la reificación en las secuencias penales de primera instancia, 45-65.GONZÁLEZ V., Carlos y JÉLVEZ H., Lorena, Peso pragmático y éxito de la discusión en

la argumentación oral en sala de clases, 67-85.OTEÍZA S., Teresa, De “la conspiración de silencio” al reconocimiento de voces alternativas.

Las violaciones a los derechos humanos en Chile según el Informe Valech (2003), 87-111.

PINUER R., Claudio A., La función focal en la gramática: implicancias teóricas y repercu-siones metodológicas, 113-134.

SABAJ M. Omar, Gramática, Pragmática y Discurso: antecedentes de un desamor y una reconciliación, 135-146.

ReseñasAndrea Cucatto, Introducción a los estudios del lenguaje y la comunicación. Teoría y prácti-

ca, Reseñado por Alejandro Martín Errecalde, 147-150. María José Serrano, Gramática del discurso, Reseñado por Yanira Becerra Ortiz, 151-156.

138

12 (1)

VOLUMEN 9(2) 2009

FERRARI Laura D., Marcadores de modalidad epistémica y evidencial en el análisis de las conclusiones de artículos de investigación de disciplinas distintas, 5-23.

DE FREITAS Ernani C., Blocos semânticos e a construção do sentido no discurso, 25-42.

LUI Gabriel Henrique e RIBEIRO DE ALMEIDA J. Antônio, O discurso sobre a gestão e a conservação da Amazônia em dois dos principais periódicos cientí-ficos internacionais, 43-61.

OLIVEIRA FARIA Daiana e SOUSA ROMÃO Lucília Maria, Che Guevara: sentidos em confronto no discurso midiático, 63-80.

PIATTI Guillermina, La función de la modalidad interrogativa en la conversación, 81-99.

ReseñasLourdes Molero de Cabeza y Julián Cabeza. El poder, el querer y el protestar, Reseñado

por Ana Mireya Uzcátegui Q., 101-110.Teun Van Dijk, Discurso y poder. Contribuciones a los estudios críticos del discurso, Re-

señado por Carlos del Valle Rojas, 111-114.

VOLUMEN 10(1) 2010

NÚMERO MONOGRÁFICO

BOLÍVAR, Adriana y CHUMACEIRO, Irma, Introducción: Crisis y cambios en la democracia venezolana, 3-7.

ADRIÁN S., Thays, La metáfora conceptual en el discurso político venezolano: Rómulo Betancourt y Hugo Chávez Frías, 9-33.

ÁLVAREZ, Alexandra y Chumaceiro Irma, ¡Con la Iglesia hemos topado…! Aspectos de una interacción polémica entre el Presidente Chávez y el Cardenal Urosa Savino, 35-63.

COURLEANDER HIDALGO, Vanesa, “El pueblo” en campañas electorales vene-zolanas: palabra e imagen en 1999 y 2006, 65-92.

D. ERLICH, Frances, Los cubanos en misiones de salud en Venezuela. Referencias contrapuestas y polarización discursiva, 93-110.

MOLERO DE CABEZA Lourdes, Crisis y cambio en el discurso político venezolano de la primera década del siglo XXI: estrategias lingüístico-discursivas, 111-133.

PALACIOS, Euclides, Discurso y cambio constitucional en el VIII Plan de la Nación del presidente Carlos Andrés Pérez 1989-1993, 135-152.

ReseñasRosa Graciela Montes y Patrick Charaudeau, El “tercero”. Fondo y figura de las personas

del discurso, Reseñado por Martha Shiro, 153-158.Sírio Possenti, Humor, lingua e discurso, Reseñado por Cellina Rodríguez Muniz,

159-162.

139

Indice acumulado

VOLUMEN 10(2) 2010

BONNIN Juan E., Dinámicas de la voz y producción de legibilidad en los Documentos Finales de Medellín (1968). Un análisis genético-discursivo, 7-28.

CAMEJO Estrella, Premio CAB Somos Patrimonio: construcción discursiva de la iden-tidad cultural venezolana en un contexto internacional, 29-53.

GÓMEZ C. Natalia, Violencia contra mujeres: voz y agencia en noticias de La Na-ción, 55-76.

OLIVEIRA A. Fábio, Análise do discurso e psicoanálisis: a questão do sujeito, 77-85.DE MELO RESENDE Viviane e FILIPE ALEXANDRE Marta, Representação

discursiva da pobreza extrema. Análise discursiva crítica de um testemunho publicado em editorial da revista Casi, 87-105.

ReseñasBeth Brait. Literatura e outras linguagens, Reseñado por Valdemir Miotello y Marina

Haber de F., 107-112.Lésmer Montecino. Discurso, pobreza y exclusión en América Latina, Reseñado por

Leda Berardi, 113-119.

VOLUMEN 11(1) 2011

NÚMERO MONOGRÁFICO: HOMENAJE A TEUN A. VAN DIJK

BOLÍVAR, Adriana, EMILSSON, Elin y FONTE, Irene, Introducción: La ALED y Teun van Dijk. Permanencia y fluir de un discurso, 3-8.

BOLÍVAR, Adriana y D. ERLICH Frances, La práctica del análisis del discurso en contextos políticos polarizados. Una reflexión crítica, 9-30.

CARBÓ, Teresa, Sobre la semiosis en textos verbales y visuales, 31-60.CERUTI, Emilio, La americanización del discurso historiográfico. Un análisis crítico

del discurso sobre el 1898 puertorriqueño en un texto de amplia circulación para la educación media superior, 61-77.

KOCH, Ingedore G.V., MORATTO, Edwiges M. y BENTES, Anna C., Ainda o contexto: algumas considerações sobre as relações entre contexto, cognição e práticas sociais na obra de Teun van Dijk, 79-109.

MONTECINO, Lésmer y VIDAL, Margarita, Representación del consumo de drogas en historias de vida de personas en situación de calle en Santiago de Chile, 93-

PARDO ABRIL, Neyla Graciela, Construcción de opiniones públicas: preservación y normalización de la dependencia, 111-127.

SHIRO, Martha, Usos del lenguaje evaluativo en el planteamiento del problema del artículo de investigación, 129-148.

140

12 (1)

VOLUMEN 11(2) 2011

AMADIO Débora, Las inocentes preguntas sobre el significado durante los testimonios, 5-22.

CÁRDENAS N. Camila, Análisis de tres modos de representación ideológica construi-dos en discursos especializados sobre juventud chilena producidos entre 1970 y 1990, 23-47.

De FREITAS Ernani C., Práticas de linguagem na atividade de trabalho: cenografia e ethos em discursos socioprofissionais, 49-68.

GARCÍA N. María Marta, Sin duda y en principio: Modalización, desdoblamiento enunciativo y heterogeneidad, 69-88.

LIBENSON Manuel, La configuración discursiva de efectos incitativos en rumores económicos, 89-111.

ReseñasBeth Brait. Literatura e outras linguagens, Reseñado por Valdemir Miotello y Marina

Haber de F., 107-112.Lésmer Montecino. Discurso, pobreza y exclusión en América Latina, Reseñado por

Leda Berardi, 113-119.

141

Instrucciones para las reseñas

· La reseña tendrá como encabezado el autor (o editor), el año, el título, el número de páginas, la casa editorial y el ISBN de la obra reseñada.

· En la introducción se identificará el tema y el problema central.· Se describirá la estructura de la obra (en capítulos, y partes, existencia de glosarios,

apéndices, etc.) y se hará una síntesis completa del contenido. Asimismo, se especificará quiénes son los lectores potenciales del libro reseñado.

· El texto de la reseña será evaluativo y expresará la posición del autor frente a la obra reseñada.

· El libro reseñado se pondrá en relación con otros trabajos sobre el mismo tema y/o del mismo autor y se situará en el contexto del momento y lugar en que aparece publicado.

· Se seguirán las convenciones de citas que se indican para el resto de las contribuciones a la revista de la ALED.

· El texto de la reseña tendrá un límite máximo de 3.000 palabras (aproximadamente diez cuartillas).

· Enviar dos copias en papel tamaño carta y una en disquete en formato de documento Word (o compatible) a: Sírio Possenti, e-mail: siriop@terra.com.br o Irene Fonte, e-mail: irenefz@yahoo.com

Instruções para as resenhas

· No encabeçado da resenha devem ser indicados o autor (ou editor), o ano, o título, o número de páginas, a casa editorial e o ISBN da obra resenhada.

· Na introdução serão indicados o tema e o problema central.· Descrição da estrutura da obra (em capítulos, ou partes, a existência de glossários,

apêndices, etc.) e apresentação de uma síntese completa do conteúdo. É importante a informação sobre os leitores potenciais do livro resenhado.

· O texto da resenha será avaliativo e expressará a posição do autor frente à obra resenhada.

· Comentar-se-á a relação entre o livro resenhado e outros trabalhos sobre o mesmo tema, alheios ou do autor considerado, e situar-se-á a obra no seu contexto temporal e espacial.

· Para as citações, serão seguidas as mesmas convenções que se indicam para o resto das contribuições da revista da ALED.

· O texto da resenha terá um limite máximo de 3.000 palavras (aproximadamente dez páginas).

· Enviar duas cópias em papel tamanho carta e uma em disquete em formato Word (ou compatível) a: Sírio Possenti. E-mail: siriop@terra.com.br e Irene Fonte, e-mail: irenefz@yahoo.com

142

Instruções para os autores

· Política Editorial. A Revista Latino-americana de Estudios del Discurso publica trabalhos originais e inéditos dos membros pesquisadores da Associação. Os trabalhos recebidos são submetidos à arbitragem por parte de especialistas de reconhecido prestígio. O Comitê Editorial reserva-se o direito de sugerir aos autores modificações formais aos artículos que forem aceitos, assim como publicá-los no número que considerar mais conveniente.

· Instruções para os autores: Os pesquisadores interessados em publicar seus trabalhos na Revista Latino-americana de Estudios del Discurso, deverão seguir as seguintes instruções:

1. Enviar seus trabalhos ao seguinte endereço postal:

Adriana Bolívar y Martha ShiroRevista Latinoamericana de Estudios del DiscursoApartado 47075, Los Chaguaramos, Caracas 1041-A, Venezuela.

Os trabalhos também podem ser enviados em attachment às seguintes direções eletrônicas:

revistaaled2004@yahoo.esshiromartha@gmail.comaled_edicion2006@yahoo.es

2. Os artículos deverão ser escritos em papel tamanho carta, com espaço duplo, de um só lado e ter uma extensão máxima de 25 laudas, incluindo notas e bibliografia.

3. O texto do artículo deve ser precedido por um resumo em espanhol, português (resumo) e inglês (abstract) de não mais de 150 palavras. Incluir-se-ão até seis palavras chave. Os títulos gerais e de seções devem ser breves e explícitos.

4. Todo artículo deve estar acompanhado por uma breve informação biográfica em numa extensão entre 50 e 100 palavras, onde se indique o nome completo do ou dos autores, instituição onde trabalha, telefone, fax e correio eletrônico. Do mesmo modo, dever-se-á proporcionar, de forma clara e completa, o endereço postal mais seguro para receber a correspondência.

5. As citações textuais de mais de 40 palavras devem insertar-se no texto com sangria de 1cm de cada lado. Sua referência far-se-á segundo o sistema autor-data. Ao final da citação, escreve-se entre parêntese o sobrenome do ou dos autores, o ano de publicação e o número de página. Exemplo: (Charaudeau, 2003: 25)

6. As notas devem enumerar-se consecutivamente e colocar-se ao final do texto, antes das Referências Bibliográficas.

7. Todas as referências bibliográficas devem ser ordenadas alfabeticamente depois das notas, e como se verá a seguir: Livros: Ruíz Ávila, D. (2003). Tejiendo discursos se tejen sombreros. Identidad y práctica discursiva. México: Fomento Editorial. Capítulo de libro: Wodak, R. (2003) ‘De qué trata el análisis crítico del discurso (ACD). Resumen de su historia, sus conceptos fundamentales y sus desarrollos’, en R. Wodak & M. Meyer (eds.) Métodos de Análisis crítico del discurso, pp.17-43. Barcelona: Gedisa. Artículos: Chumaceiro, I. (2004). ‘Las metáforas políticas en el discurso de dos líderes venezolanos’, Revista Latinoamericana de Estudios del Discurso, 4 (2): 91-112. As letras a, b, c, anexadas à data de publicação, podem ser usadas para referenciar trabalhos de um mesmo autor publicados no mesmo ano.

Revista Lationamericana de Estudios del DiscursoRevista Latinoamericana de Estudos do Discurso

Instrucciones para los autores· Política Editorial. La Revista Latinoamericana de Estudios del Discurso publica trabajos originales e

inéditos de los investigadores miembros de la Asociación. Los trabajos recibidos serán sometidos a arbitraje por parte de especialistas de reconocido prestigio. Como consecuencia, el Comité Editorial se reserva el derecho de sugerir a los autores modificaciones formales a los artículos que sean aceptados, así como publicarlos en el número que considere más conveniente.

· Instrucciones para los autores: Los investigadores interesados en publicar sus trabajos en la Revista Latinoamericana de Estudios del Discurso, deberán seguir las siguientes instrucciones:

1. Enviar sus trabajos a la siguiente dirección postal:

Revista Latinoamericana de Estudios del DiscursoAdriana Bolívar y Martha ShiroEditorasApartado 47075, Los Chaguaramos, Caracas 1041-A, Venezuela.

Los trabajos también pueden ser enviados en attachment a las siguientes direcciones electrónicas:

revistaaled2004@yahoo.esshiromartha@gmail.comaled_edicion2006@yahoo.es

2. Los artículos deberán ser escritos en papel tamaño carta, a espacio y medio en Times New Roman 12, por una sola cara y tener una extensión máxima de 25 cuartillas, incluyendo notas y bibliografía. Tanto las imágenes, gráficos o tablas deben anexarse en su formato original (jpg, tif, gif, png, excel, power point...)

3. El texto del artículo debe ir precedido por un resumen en español, portugués (resumo) e inglés (abstract) de no más de 150 palabras. Se incluirán hasta seis palabras clave. Los títulos generales y de secciones deben ser breves y explícitos.

4. Todo artículo debe estar acompañado por una breve información biográfica y académica escrita en una extensión entre 50 y 100 palabras, donde se indique con claridad el nombre completo del o los autores, nombre y dirección de la institución donde labora, teléfono, fax y correo electrónico. Asimismo, aparte se deberá proporcionar de forma clara y completa la dirección postal más segura para recibir correspondencia.

5. Las citas textuales de más de 40 palabras deben insertarse en el texto con sangría de 1cm a cada lado. Su referencia se hará según el sistema autor-fecha: al final de la cita se escribe entre paréntesis el apellido del o los autores, el año de publicación y el número de página. Ejemplo: (Romano y Sousa, 2004: 17), (Charaudeau, 2003:25).

6. Las notas deben numerarse consecutivamente y colocarse al final del texto, antes de las Referencias Bibliográficas.

7. Todas las referencias bibliográficas deben ser ordenadas alfabéticamente después de las notas, y como se muestra a continuación: Libros: Ruíz Ávila, D. (2003). Tejiendo discursos se tejen sombreros. Identidad y práctica discursiva. México: Fomento Editorial; capítulo de libro: Donaire, M. L. (2004) ‘La polifonía, una relación binaria’, en E. Arnoux & M.M. García Negroni (Comps.) Homenaje a Oswald Ducrot, pp. 117-133. Buenos Aires: Eudeba. Wodak, R. (2003). ‘De qué trata el análisis crítico del discurso (ACD). Resumen de su historia, sus conceptos fundamentales y sus desarrollos’, en R. Wodak & M. Meyer (eds.) Métodos de Análisis crítico del discurso, pp.17-43. Barcelona: Gedisa. Artículos: Chumaceiro, I. (2004). ‘Las metáforas políticas en el discurso de dos líderes venezolanos’, Revista Latinoamericana de Estudios del Discurso, 4 (2): 91-112. Las letras a, b, c, anexadas a la fecha de publicación, pueden ser usadas para referenciar trabajos de un mismo autor publicados en el mismo año.

8. Cada autor recibirá 2 ejemplares del número de la revista donde aparece su trabajo.

Adriana Bolívar y Martha ShiroEditoras de la Revista Latinoamericana de Estudios del Discurso

Apartado 47075, Los ChaguaramosCaracas 1041-A, Venezuela

Mercedes Duarte y Ricardo GualdaAsistentes editoriales

Email: aled_edicion2006@yahoo.es