Gestikulace ve sdíleném prostoru jako kooperativní utváření významu
Abstract
150
Full text
ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2, S. 150–169 Gestikulace ve sdíleném prostoru jako kooperativní utváření významu1 Eva Lehečková— Jakub Jehlička (Praha) THE USE OF SHARED GESTURE SPACE IN CO-OPERATIVE MEANING FORMATION The present study focuses on strategies which speakers employ when gesturing in ashared articulatory space. Using data from English and Czech multimodal corpora of spontaneous business meetings, we conducted aqualitative analysis of gestural patterns based on two strategies: alignment and elaboration of gestures representing abstract/conceptual objects. We show that speakers make use of both strategies in the context of co-operative meaning formation (with various pragmatic functions) and that the notions of alignment and elaboration provide useful analytic and descriptive tools for the study of human interaction from amultimodal perspective. KEYWORDS multimodal communication, co-speech gestures, gestural representation, elaboration, alignment KLÍČOVÁ SLOVA multimodální komunikace, gestikulace, gestická reprezentace, rozvíjení, sbližování DOI https://doi.org/10.14712/23366591.2019.2.2 1. ÚVOD Vposledním desetiletí vrůzných odvětvích lingvistiky iteoretických modelech narůstá systematické úsilí opropojování interakčního akognitivního pohledu na řečové chování mluvčích přirozených jazyků. Vprogramových teoretických iempirických studiích postupně vyrůstá ucelený socio-kognitivní model evoluce, osvojování, reprezentace izpracování jazyka, jehož jádrem ahybatelem na mnoha úrovních je princip sociální kooperace asním spojené intersubjektivní konstruování asdílení zkušenosti. Tato studie přináší kvalitativní sondu do kooperativního utváření významu prostřednictvím gestikulace účastníků interakcí včeštině aangličtině. Řadí se tak do oblasti zaměřené na studium gest doprovázejících promluvu (co-speech gestures),2 jež se etabluje přibližně od začátku 90.let 20.století pod názvem gesture studies. Při gestikulaci mluvčí využívají prostor ve svém dosahu kvytváření audržování fyzicky nepřítomných entit, jež jsou tématem promluvy (Streeck, 2009). Entitami ro1 Tato práce vznikla za podpory projektu Kreativita aadaptabilita jako předpoklad úspěchu Evropy vpropojeném světě (KREAS), reg. č.: CZ.02.1.01/0.0/0.0/16_019/0000734 financovaného zEvropského fondu pro regionální rozvoj. 2 Vtomto textu se budeme držet českého ekvivalentu gestikulace (viz Kaderka, 2017). OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 151 zumíme jak konkrétní předměty, tak osoby či abstraktní koncepty, děje či vlastnosti.3 Vdialogických interakcích se mohou gestické prostory různých mluvčích přibližovat až prolínat avytvářet tak komplexní adynamický sdílený prostor (shared space), což je pojem zavedený vlingvistice znakových jazyků. Vnaší analýze představíme různé způsoby, jak je ve sdíleném prostoru intersubjektivně konstruován význam skrze tělesné ukotvení konceptualizace (embodied intersubjectivity), konkrétně jak účastníci komunikace sbližují svou gestikulaci (alignment) ajak rozvíjejí (elaboration) takzvaná reprezentační gesta4 ztvárňující nepřítomné entity. Materiál představují úryvky anglických ačeských konverzací během pracovních jednání, které jsou součástí dvou multimodálních korpusů— veřejného anglického korpusu AMI anašeho vlastního českého minikorpusu dostupného na vyžádání pro badatelské účely.5 2. TEORETICKÁ VÝCHODISKA Základní teoretické východisko pro nás představuje propojení dvojího pojetí kognice. Dalším teoretickým konceptem, sjehož různými výklady zde pracujeme, je sdílený prostor. Konečně představíme pojmy sbližování (alignment) arozvíjení (elaboration), na nichž je založena analýza materiálu (oddíl 3). 2.1 kOGNICE JAkO vtĚLENÁ AkCE AJAkO SOCIÁLNÍ NÁStROJ Teorie embodimentu, tedy ukotvení kognice ve vnímané tělesnosti vlastní (propriocepci) iostatních, se různí vmíře začlenění mentální reprezentace. Některé znich, např.teorie simulované akce (simulated action, srov.Barsalou, 1999), vysvětlují mentální konceptualizaci jako více či méně abstrahované psychosomatické vzorce založené na vnímané činnosti azkušenosti vlastní tělesnosti. Vtéto perspektivě lze gestikulaci vysvětlit jako manifestaci tělesně ukotvené kognice (Hostetter— Alibali, 2008). Jiné teorie mentalismus odmítají zcela, typicky spoukazem na jeho redukcionismus: např.teorie distribuované kognice Edwina Hutchinse (2006). Hutchins chápe kognici nikoli jako entitu atribuovatelnou jedinci, ale jako komplexní azprincipu intersubjektivní systém (tzv.kognitivní ekologii), který zahrnuje jedince interagující mezi sebou, jejich situovanost vprostředí aveškeré objekty, snimiž vstupují do interakce. Podobným směrem, byť na základě odlišných teoretických kořenů, se vydávají socio-kognitivní přístupy (viz např.Geeraerts, 2016). Vjejich pojetí nejsou primár3 Nepřítomnými entitami myslíme fyzicky nepřítomné konkrétní objekty či osoby, popřípadě abstraktní entity— všechny jsou pochopitelně přítomné, tj.obsažené, ve verbální igestické složce komunikace. 4 Podle Kity (2000) tato kategorie zahrnuje ikonická ideiktická gesta. 5 Od začátku roku 2019 je vrámci projektu KREAS ve výstavbě větší multimodální korpus češtiny nazvaný Czech Interactional Corpus (CZICO), jenž by měl být pro badatelské účely přístupný od roku 2020. Podrobnější informace jsou dostupné zde: https://sites.google. com/view/epocc/czico [cit.25-01-2019]. OPEN ACCESS
152 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 ním předmětem zkoumání ani abstraktní aidealizovaný jazykový systém, ani individuální kognitivní schopnosti mluvčího samy osobě, ale jazyk jako komunikační nástroj kooperace (Tomasello, 2014). Úloha gestikulace je přitom reflektována izde: popis pragmatických aspektů, jako je ustavování sdílených znalostí (common ground) vkonverzačních situacích (Holler— Bavelas, 2017), ukazuje, že jazyk igestikulace tvoří integrovaný systém sloužící ke „sdílení afektivních, percepčních areflektivních zkušeností mezi dvěma či více subjekty“ (vymezení intersubjektivity podle Zlateva, 2008, s.215). Intersubjektivita je tak klíčovým pojmem sociálně motivovaných teorií kognice. Jürgen Streeck nahrazuje pojem intersubjektivity konceptem interkorporality (intercorporéité) převzatým od M.Merleau-Pontyho (1959). Chápe jej jako jednání „žitých těl“ (living body), která jsou determinována zkušeností sobjekty adalšími živými těly. Streeck tělesnost nechápe jako tělesné ukotvení „reprezentací vmysli, ale (…) dispozic reagovat na požadavky dané situace“ (Streeck, 2015, s.422). Vsouladu suvedenými soudobými přístupy pro nás gestikulace představuje vnější manifestaci kognice chápané nikoli jako individuální schopnost, nýbrž jako sociální (intersubjektivní/interkorporální) jev, který nelze abstrahovat od situačního kontextu. Na druhé straně si lze vduchu socio-kognitivního pojetí klást ikognitivně orientované otázky po tom, jak probíhá individuální osvojování či zpracování takto situačně ukotvených intersubjektivních významů sdílených verbálně či neverbálně. 2.2 SDÍLENÝ PROStOR vLINGvIStICE ZNAkOvÝCH JAZYkŮ AGEStURE StUDIES Znaky znakového jazyka igestikulace jsou realizací jazyka vjeho vizuálně-motorické modalitě. Vtéto modalitě je jazyk artikulován pomocí vizuálně percipovaných pohybů těla ve fyzickém prostoru, který bezprostředně obklopuje mluvčího: vlingvistice znakových jazyků se tento prostor označuje jako znakovací prostor (signing space, Klima— Bellugi, 1979), vgesture studies hovoříme ogestickém prostoru (McNeill, 1992). Během interakce dvou avíce mluvčích, vsituaci, kdy jsou účastníci interakce obvykle fyzicky blízko sebe, nutně dochází ktomu, že se individuální artikulační prostory překrývají amohou se tak vtomto smyslu stát „sdíleným prostorem“. Jindy ke sdílení individuálních artikulačních prostorů dochází, aniž by nastalo jejich fyzické prolnutí: vtakových případech mohou být sdíleny buď různé konceptuální entity, nebo různé mody orientace vprostoru: referenční rámce či perspektivy. Ve znakových jazycích může (ačasto má) práce sperspektivou gramatickou funkci (např.při tzv.střídání rolí). Ačkoli vpřípadě gestikulace nemají způsoby zaujímání perspektiv areferenčních rámců vgestickém prostoru gramatickou funkci, někteří badatelé zabývající se proměnami úhlu pohledu například vnaraci ukazují jistou míru konvenční signalizace igestikulací, apředpokládají tedy, že principy jejich fungování jsou vněkterých ohledech podobné těm vjazycích znakových (Dancygier— Sweetser, 2015). Karen Emmoreyová (2002) rozlišuje několik způsobů zaujímání perspektivy vrámci znakovacího prostoru na základě toho, jakým způsobem je využíván kreferenci kprostorovým entitám, včetně tzv.sdíleného prostoru (shared space). Ten OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 153 je definován přítomností fyzických referentů ve znakovacím prostoru či shodou na umístění fyzicky nepřítomného objektu. Zatímco při popisu nějakého prostorového uspořádání obvykle uživatelé znakových jazyků umisťují znaky reprezentující prostorové entity (ať už konkrétní či abstraktní) do znakovacího prostoru ze své perspektivy, při sdílení znakovacího prostoru je sdílena iperspektiva, jako by se všichni účastníci komunikace dívali na objekt ztéhož úhlu. OBRÁZEK 1.Gestický prostor (McNeill, 1992, s.89) Sdílení gestického prostoru ssebou rovněž nese sdílení perspektivy (Furuyama, 2000), ale na rozdíl od sdíleného znakovacího prostoru může docházet kpřizpůsobování některých parametrů gest (např.směru pohybu vzávislosti na uspořádání účastníků komunikace (Özyürek, 2000)). Vtomto příspěvku tedy chápeme sdílený gestický prostor jednak vsouladu svymezením ze znakových jazyků jako artikulační prostor, vněmž může docházet ke sdílení perspektivy při „manipulaci“ skonceptuálními objekty. Zároveň vsouladu spojetím gesture studies je pro nás sdílený prostor topologicky vymezený vpřípadě malé vzdálenosti protnutím dvou avíce individuálních artikulačních prostorů jednotlivých účastníků komunikace, vpřípadě větší vzdálenosti je hraničním prostorem, „zemí nikoho“, která se utváří mezi dvěma účastníky vokamžiku, když spolu vstoupí do interakce. 2.3 SBLIŽOvÁNÍ AROZvÍJENÍ Vnaší studii se zaměřujeme na dva fenomény spojené sgestikulací ve sdíleném prostoru: sbližování arozvíjení. Sbližování souvisí stermínem alignment, ato nikoli pouze ve smyslu koordinace perspektivy (vtomto smyslu termín užívá např.Özyürek, 2000, nebo Williams, 2011), ale především jako přijetí sdíleného konceptuálního objektu vrámci sdíleného prostoru, např.prostřednictvím deixe, nebo změnou místa artikulace ikonického gesta. Signálem sbližování je tak pro nás zpravidla deiktické OPEN ACCESS
154 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 gesto:6 ukáže-li účastník komunikace vreferenci na konceptuální objekt na místo, kam je jeho komunikační partner— typicky prostřednictvím ikonického gesta— vpředcházejícím diskurzu umístil. Pojem elaborace přejímáme zkognitivní gramatiky Ronalda Langackera. Elaborace (elaboration) je obecná kognitivní operace, která spočívá ve zvýraznění, adaptaci či dalším zpracování nějakého předem stanoveného východiska (baseline), přičemž elaborované východisko se samo může následně stát východiskem pro další elaboraci. Podle Langackera patří elaborace východiska kzákladním prvkům organizace konceptuálního systému amůže se uplatňovat na všech úrovních jazykové reprezentace (Langacker, 2016). Během gestikulace ve sdíleném prostoru účastníci komunikace často navzájem „kopírují“ gesta se sdílenou referencí, přičemž může docházet (azpravidla dochází) kmodifikaci formální podoby gesta, která může být spjata smodifikací konceptu samotného. Navrhujeme na takové případy pohlížet jako na manifestaci operace elaborace východiska— což nám zároveň umožňuje sledovat případné rozdíly mezi jazykovou agestickou reprezentací téhož konceptuálního obsahu. 3. ANALÝZA Zaměřili jsme se na to, jak mluvčí využívají sdílený prostor při gestikulaci. Konkrétně jsme sledovali, jak prostřednictvím gest ztvárňují fyzicky nepřítomné entity, jež jsou tématem promluvy. Tuto otázku zkoumáme na materiálu dvou srovnatelných vzorků anglických ačeských7 spontánních interakcí, jež se odehrály během pracovních jednání. Pracovní jednání jsme pro vytčený záměr považovali za vhodná ze dvou důvodů: jednak jsou zaměřená na řešení konkrétních otázek aproblémů, knimž všichni účastníci komunikace obvykle mají nějaký afektivní vztah ajejich vyřešení je jejich vlastním zájmem. Tato emoční apostojová východiska podporují spontánnost konverzace aintenci mluvčích se na ní aktivně podílet. Druhým relevantním rysem pracovních jednání je to, že se odehrávají ustolu. Stůl coby fyzický objekt splochým povrchem vbezprostřední blízkosti účastníků komunikace tak při pracovních jednáních může fungovat jako přirozené zhmotnění sdíleného prostoru mluvčích, atedy potenciálně jako cílový prostor, kde jsou realizována gesta (srov.Goodwin, 2007). Svyužitím terminologie kognitivní lingvistiky inspirované teoriemi vizuální percepce můžeme 6 Termíny ikonické gesto adeiktické gesto pocházejí ze standardní funkční typologie D.McNeilla (např.2005), vníž jednotlivé typy představují spíše funkční dimenze než diskrétní kategorie. Vběžné komunikaci nacházíme kombinace více funkcí vrámci jednoho gesta. Když někomu ukazujeme, že má odemknout dveře tak, že ukazujeme směrem ke dveřím azároveň utoho otáčíme zápěstím spomyslným klíčem vruce, jedná se odeiktické iikonické gesto zároveň. 7 Vtomto příspěvku necháváme stranou možné kulturně-specifické rozdíly vgestikulaci anglických ačeských mluvčích. Naším cílem je demonstrovat na relativně malém vzorku obecné amezijazykově sdílené strategie kooperativního utváření významu. Studie světším vzorkem by mohla ukázat případné jazykově či kulturně specifické strategie. OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 155 říct, že vrámci sdíleného prostoru stůl při pracovních jednáních funguje jako profil vstupující zpozadí, azároveň se vkonkrétních okamžicích interakce stává pozadím pro profilovaná gesta doprovázející řeč (Langacker, 1987; Ungerer— Schmid, 1996). 3.1 MAtERIÁL Analyzovali jsme anglický ačeský vzorek ze dvou multimodálních korpusů. Anglický materiál pochází zkorpusu AMI (Augmented Multiparty Interaction, Carletta, 2006), český materiál je náš vlastní, získaný účelově analogickým způsobem. Multimodální8 korpusy obecně stále představují poměrně omezeně dostupný typ korpusů. Analýzy multimodální komunikace tak běžně využívají ad hoc sestavené specializované korpusy. Pokud jde oveřejně dostupné zdroje, mnoho možností se nenabízí. Vsoučasnosti stále využívanějším zdrojem materiálu pro výzkum multimodálních specifik komunikace je internetový repozitář televizního vysílání Red Hen Archive,9 který zahrnuje obrovské množství záznamů především televizního zpravodajství adiskusních pořadů různého původu (včetně České televize). Je-li předmětem našeho zájmu spontánní jazyková interakce, narážíme na řadu problémů spojených se specifiky televizních žánrů (např.neprediktabilní záběry kamer, často nezachycující osoby, které právě mluví, prostřihy či záběry pouze na obličeje mluvčích, vedle toho také např.přítomnost školených mluvčích). Vpřípadě našeho výzkumu přesahují tyto aspekty televizního materiálu přijatelnou míru— ztoho důvodu není vtomto případě vhodný ani jediný vsoučasnosti dostupný český multimodální korpus, totiž korpus DIALOG (Kaderka et al., 2007). Korpus AMI (Carletta, 2006) je veřejně dostupný multimodální korpus obsahující přes sto hodin nahrávek pracovních jednání zachycených vpřirozeném (ale zároveň kontrolovaném) prostředí, ato jak jednání simulovaných, tak autentických. Anglický vzorek pochází zautentické části korpusu AMI atvoří jej 6 nahrávek pracovních schůzek vždy 3–4 mluvčích (celkem 9 unikátních mluvčích)10 ocelkové délce 3,5 hodiny. Jednotlivá sezení byla snímána zvětšího množství kamer, zároveň jsou kdispozici separátně snímané zvukové stopy pro každého mluvčího. Korpus obsahuje také transkripci řeči. Uspořádání je uvšech sezení stejné: mluvčí sedí ustolu adiskutují okonkrétním tématu, které je na programu jednání. Jejich účastníky jsou akademici astudenti edinburské univerzity, kteří diskutují orůzných projektech, přípravě konferencí ařešení technických problémů svyvíjeným softwarem. Podoba českého subkorpusu vychází přímo ze zaměření korpusu AMI. Jedná se oúčelový korpus, který byl sestaven vrámci kvantitativního výzkumu vztahu mezi gestikulací agramatikou včeštině avangličtině (ktomuto výzkumu srov.např.Jeh8 Zde jako multimodální chápeme takový typ korpusu, který kromě přepisu řeči obsahuje také audiovizuální materiál. Zdefinice (Allwood, 2009) může být za multimodální korpus považován ikorpus mluvený. 9 Přesněji UCLA NewsScape Library of International Television News. (http://newsscape.library.ucla.edu/) 10 3 ženy, 6 mužů. OPEN ACCESS
156 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 lička— Lehečková, 2017). Korpus obsahuje nahrávky pěti pracovních setkání 2–5 mluvčích ocelkové délce 3 hodiny, celkem zachycuje 9 unikátních mluvčích.11 Vznikl vletech 2016–2017 na FF UK astejně jako vjeho anglickém protějšku se vněm objevují akademici12 astudenti, kteří spolu hovoří ospolečných projektech, akademické administrativě či redakční práci. Na rozdíl od korpusu AMI pochází obrazový materiál pouze ze dvou kamer. 3.2 MIkROANALÝZA Provedli jsme kvalitativní mikroanalýzu dvaceti úryvků konverzací, po deseti zanglického ačeského korpusu. Pro účely tohoto příspěvku jsme se soustředili pouze na vztah verbální agestické složky, tj.odhlédli jsme jednak od prozodických kvalit promluvy, jednak od systematického popisu využití dalších neverbálních prostředků— pouze upozorňujeme na fixaci určitých oblastí sdíleného prostoru pohledem. Relevantní úryvky jsme extrahovali na základě následujících parametrů: (i) některý zmluvčích musel použít reprezentační gesto za účelem koartikulace některého ztémat, (ii) realizace tohoto gesta se nějakým způsobem promítla do projevu dalšího mluvčího (či mluvčích) vdané interakci— orůzných způsobech tohoto „promítání“ pojednáme podrobněji vanalýze jednotlivých ukázek, (iii) vpřípadě, že první mluvčí ve své gestikulaci vdalší replice situaci realizovanou ve sdíleném gestickém prostoru opět využil, byla do analýzy zahrnuta ita, anakonec (iv) zpodstaty sledovaného jevu apředchozích parametrů musely úryvky zahrnovat přinejmenším 4 repliky (turns) zdané interakce. Různé způsoby multimodálního jednání ve sdíleném interakčním prostoru dokládáme čtyřmi příklady pro náš vzorek typickými, po dvou zanglického apo dvou zčeského subkorpusu. Pro snazší orientaci jsme je pojmenovali podle nejvýraznějších prvků relevantní entity— toto pojmenování je vždy vyznačeno uvozovkami. Každý příklad je zastoupen transkripcí úryvku včetně gestikulace, fotografií relevantní scény aschematickou reprezentací gestikulačního sbližování arozvíjení. Transkripce řeči se řídí pravidly přepisu, která byla použita vkorpusu DIALOG (Kaderka— Svobodová, 2006). Záznam rozsahu gestického pohybu aněkterých formálních rysů gest je inspirován anotačními systémy D.McNeilla (2005) aJ.Bressem (2013).13 Schémata zachycují stůl jako vystupující objekt vprostředí, na němž se realizují gesta, mluvčí, kteří se účastní komunikace (A, B aC), jejich rozmís11 5 žen, 4 muže. 12 Jelikož byl český korpus koncipován zcela analogicky kanglickému korpusu AMI, ivněm vystupují badatelé, kteří se zároveň zabývají tvorbou korpusu, včetně autorky tohoto článku. Jakkoliv tím bylo dosaženo srovnatelnosti obou korpusů, nepovažujeme tento aspekt nahrávek za ideální, auvedená data proto chápeme jako pilotní— tento aspekt bude vpřipravovaném korpusu CZICO (viz poznámka 2) ošetřen. 13 Zápis gestikulace se řídí následujícími pravidly: Hranaté závorky značí rozsah gesta. Notace je utvořena zidentifikátoru zapojené ruky (např.LH, levá ruka), kombinace tvaru ruky ajejí orientace (např.PU, dlaň otevřená směrem nahoru) asměru, příp. trajektorie pohybu (např.down). Vzávorce může být fakultativně vpřípadě deiktických gest upřesněno místo, na které se ukazuje. Použité zkratky jsou vysvětleny vpříloze tohoto textu. OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 157 tění vprostoru ajejich gestický prostor (tučná kružnice či elipsa) isdílený vizuální prostor mezi gestickými prostory (přerušovaná čára), další účastníky komunikace vroli posluchačů ajejich rozmístění vprostoru (x), entity, knimž se pomocí gestikulace odkazuje, arůzné informace ojejich sbližování arozvíjení, jež jsou podrobně popsány vkomentářích kjednotlivým úryvkům. 3.2.1 „OBJEktY NA PAPÍŘE“ První příklad (zanglického subkorpusu) ukazuje situaci se 4 účastníky komunikace (2 muži a2 ženy), kteří hovoří ovyhovujících aproblematických vlastnostech softwaru, jejž vrámci projektu vyvíjejí apoužívají pro správu svých korpusových dat. Jednotliví účastníci sedí po dvou naproti sobě upodlouhlého stolu, všichni mají před sebou zápisníky adva znich vtomto úryvku drží pero. Uspořádání situace ukazuje fotografie č.1.Ve sledovaném úryvku hovoří mluvčí A(žena vbílém, na fotografii sedí vpravo nahoře) amluvčí B (muž vkrátkém tričku, na fotografii sedí vlevo dole)— jejich verbální projevy agestikulaci zachycuje příklad (1). FOTOGRAFIE 1.Anglický subkorpus, uspořádání situace „objekty na papíře“ (1) B: so one left click just highlights (.) that’s what you [mean] A: [highlights] um yeah. I mean a hiobviously highlights whatever (.) you’ve clicked [LH.finger.away (points at paper)_______________________] B: [oh just the uh] A: [on here] but also highlights B: =the transcript or whatever it is OPEN ACCESS
158 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 A: (..) um actually it’s difficult because (..) because (…) B: [because could you just] A: [you nyou don’t you only] ever have one meeting open and those results [LH.PTC.down_________] [LH_fingers.zigzag will be opI well I suppose if you have a (.) if you have a local search (points at paper)] [LH.PTC.left ________] then it could cross-highlight. B: yeah (.) that should be possible. A: because you know if you get back several different meetings here and [RH.fingers.away (points at paper)____________________] you’ve only got one meeting open then you can’t cross out anything. [BH.PU.down.arced_________________________][LH.PU + RH.fingers.towards+away__] B: =although yeah this this will uh this is actually different from how we [RH.fingers.away (points at paper)] [RH.fingers.away.up.down_____________] print it up here. like if we’re doing a global search then we are gonna do it [RH.fingers.circular] like how we said before and pop up a list of the various meetings (.) that [RH.fingers.up][ RH.fingers.down ] [RH.fingers.zigzag] found those terms. (…) and then we’ll either you know multi-select or you [RH.fingers.up_____] [RH.fingers.zigzag________________] know choose the one we wanna actually do this wiI think multi-select would make the most sense. A: what do you mean by multiselect B: well just um if there’s like three of the top meetings like like we said [RH.fingers.up_____ before language we’re looking for the lword language and get the highest_____________] [RH.PTC.right____] [RH.PTC.zigzag_____ rated ones. to actually look for the terms we’re not loading it on ___________] [RH_fingers_away (points at paper)][ RH.fingers.circular] Na začátku tohoto úryvku ksobě mluvčí Apřisune sešit. Mluvčí Asi tak zvolí prostor pro gestikulaci (dva šedé obdélníky ve schématu 1 představují gesta referující ktématům dialogu, oboustranná šipka signalizuje koreferenční vztah mezi oběma reprezentačními gesty). Je vhodné poznamenat, že jako takový si vybrala sobě vzdálenější objekt, tj.nikoliv sešit ležící blíže přirozenému gestickému prostoru. Tento akt lze interpretovat jako kooperativní snahu učinit gestikulaci (aporozumění konstruované situaci) viditelnější pro účastníky komunikace, atedy přístupnější jednak tím, že se gestikulace odehrává na konkrétním vizuálně profilovaném objektu (papír versus stůl jako pozadí), jednak tím, že se pro účely gestikulace profiluje objekt percepčně dostupnější všem účastníkům komunikace. Že byl tento návrh přijat, je zjevné znegativní (nikdo nenavrhuje jiné řešení) ipozitivní evidence— mluvčí B přijímá ztvárnění nepřítomných objektů na profilovaném papíře.14 Jelikož se tento pořád nachází poměrně daleko za jeho gestickým prostorem, realizuje své deiktické gesto na samém okraji svého přirozeného gestic14 Pokud by tato multimodální analýza zohledňovala idalší neverbální projevy, bylo by zjevné, že profilování uvedeného papíru zvýšilo frekvenci oční fixace daného objektu všemi účastníky komunikace. OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 165 (4) A: tak jesi tam nedat něco jako jak tam bylo ty učební obsahy tak jak by je [BH.PU.down________________________________] [BH.PU.right______] jako hodnotili je to užitečný nebo víceméně prostě ňáká škála. tak jesi tam BH.PU.circular____________________] [LH.PTC.down____][LH.PTC.left + RH.PTC.right] nedat něco z těch učebních obsahů. [LH.PD.down_____________________________] B: jo jo jo jako výčet učetníučebních obsahů a oni by: ohodnotili na škále [RH.PTB.circular_______] jak byly pro ně užitečné sjak sou pro ně. A: ee spíš jako jesi je tam (..) no možná jak by je potřebovali s ohledem na [LH.fingers.down______________] [LH.fingers. tu praxi a jestli tam byly. circular][LH.fingers.down_____] B: jasně (.) takže dva e dvě otázky. Vposledním úryvku jsou klíčovými entitami, které se koartikulují ivgestikulaci, učební obsahy ajejich struktura, škála ašířeji situace hodnocení učebních obsahů na škále, přičemž vprůběhu interakce se zpřesňuje součinností verbální ineverbální složky vztah mezi jednotlivými abstraktními entitami. Mluvčí Anejprve při první zmínce oučebních obsazích artikuluje jejich pozici vpravé horní periferii svého gestického prostoru (která je přirozená vzhledem kjejí pozici paží, atím iklidové pozici mezi jednotlivými gesty). Ve středu svého gestického prostoru poté umisťuje spomocí obouručně vyjádřeného ikonického gesta vpodobě papíru/dokumentu/stránky konceptuální objekt obsahující škálu, která bude zahrnovat něco ztěch učebních obsahů. Mluvčí B poté vyjadřuje verbálně to, jak porozuměla řečenému, přičemž (tak jako vpříkladu 2 „cesta“ zanglického subkorpusu) se snaží okooperativní sbližování smluvčí Ave verbálním ineverbálním ztvárnění (profilovaného) konceptuálního obsahu, srov.by ohodnotili na škále doprovázené gestem referujícím ke škále. Toto gesto přitom tak jako vpříkladu číslo (2) má jinou perspektivu než vpůvodní podobě reprezentované mluvčí A, tj.vztaženou ke středu těla mluvčí B, ale zároveň je artikulováno jednou (pravou) rukou adetailněji strukturováno do stupňů reprezentované škály podél vertikální osy. Mluvčí Asice vdalší replice opravuje tu část interpretace, která nebyla vsouladu sjejím původním záměrem (srov.jak byly pro ně užitečné [učební obsahy] vs. jak by je potřebovali sohledem na tu praxi ajestli tam byly), nicméně vgestikulaci jednak přejímá gestickou podobu pro škálu navrženou mluvčí B (jednoruční vertikální artikulace) azároveň ji reprezentuje levou rukou na hranici svého gestického prostoru co nejblíže gestickému prostoru mluvčí B.Zároveň reprezentaci škály dále rozvíjí tím, že po dokončení vertikálního pohybu artikulace škály pomocí pootevřené levé ruky směřující dolů vmomentě vytvoření kontrastu ve verbální složce mírně vytočí levou ruku hřbetem vlevo adlaní ksobě, aby igestem signalizovala dvoudílnost škály adotazovaných skutečností vzhledem kdruhému hlavnímu předmětu řeči, tedy učebním obsahům. OPEN ACCESS
166 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 SCHÉMA 4.Český subkorpus, schéma situace „škály“ 4. DISKUSE ASHRNUTÍ Vtomto příspěvku jsme představili různé způsoby, jimiž účastníci spontánních mluvených interakcí zaměřených na společné řešení problémů mohou využívat sbližování arozvíjení gestikulace ke kooperativnímu sdílení významu. Zanalýzy vyplývá, že sbližování arozvíjení gestikulace ve spontánních interakcích může být uchopeno prostřednictvím kooperativní intersubjektivity, vníž mluvčí nepředstavují individuální aktéry, ale tvoří sociálně konstruovanou skupinu, „která je kolektivně zapojena do společného projektu, jehož součástí je sdílená pozornost kurčité entitě“ (Verhagen, 2015, s.238). Ukázali jsme, že mluvčí se mohou ustatických objektů (srov.příklad „objekty na papíře“) shodnout na způsobu jejich gestické reprezentace stejně jako na jejich umístění vgestickém prostoru. Udynamických entit (srov.příklad „cesta“) mohou perspektivu měnit, ale typicky vsouladu se sdílenou zkušeností slidskou tělesností (jež usnadňuje dalším účastníkům komunikace mentální rotaci ainterpretaci gestikulace sproměněnou perspektivou). Jako nosné se ukázalo využití kognitivnělingvistické teorie profilování, které umožňuje propojit analogické procesy ve vizuální percepci stejně jako verbální aneverbální konstrukci konceptuálního obsahu (atím podpořit představu obecněkognitivních mechanismů ovlivňujících zpracování vnějších stimulů různého druhu). Profilování různých entit sdílených interagujícími mluvčími vrůzných fázích interakce prostřednictvím gest se ukázalo jako častý projev elaborace. Mluvčí se kněmu uchylovali zrůzných pragmalingvistických důvodů— gestikulace jim umožnila (vedle vlastní reprezentace nepřítomných entit) vyzdvihnout jejich relevanci, ato nejen pro sebe, ale idalší účastníky interakce, udržet či zvýšit jejich aktivaci vdiskurzu, vyjádřit svůj postoj kní. Kooperativní sbližování mluvčích se ve sledovaných situacích projevovala nejen přebíráním / respektováním navržených gestických reprezentací, ale ikooperací ohledně místa artikulace— zaznamenali jsme několik příkladů („objekty na stole“, „škály“) artikulace gest na hranici přirozeného gestického prostoru či za ním za účelem prostorové signalizace kooperativního jednání, tělesného inázorového sdílení apřiblížení se při řešení konkrétních společných úkolů. OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 167 Jsme si vědomi omezených možností zobecnění výsledků uvedené kvalitativní mikroanalýzy apotřeby dalších navazujících výzkumů včetně kvantitativních. Domníváme se však, že předložený výzkum ukázal soudobé možnosti zkoumání gestikulace vaktuálních teoretických rámcích amůže přispět krozvoji multimodálních výzkumů včeském prostředí vrůzných teoretických perspektivách. Jsme rovněž přesvědčeni, že podobně zaměřený lingvistický výzkum gestického ztvárňování nepřítomných entit ve sdíleném prostoru má využití nejen pro integraci multimodální perspektivy do lingvistického popisu, ale ipro interdisciplinární výzkumy pracovní či institucionální komunikace, jak ukazují například výzkumy multimodálních interakcí ve třídě (Steier— Kersting, 2019). PŘÍLOHA 1.ZKRATKY POUŽITÉ VTRANSKRIPCI GESTIKULACE RH pravá ruka LH levá ruka BH obě ruce finger tvar ruky = natažený prst fingers tvar ruky = spojené prsty PD dlaň otevřená směrem dolů PTB dlaň otevřená směrem ktělu PTC dlaň otevřená směrem ke středu gestického prostoru PU dlaň otevřená směrem nahoru away pohyb směrem od těla down pohyb směrem dolů left pohyb směrem doleva right pohyb směrem doprava towards pohyb směrem ktělu up pohyb směrem nahoru arced trajektorie pohybu zakřivená circular trajektorie pohybu kruhová zigzag trajektorie pohybu klikatá LITERATURA Allwood, J. (2009): Multimodal corpora. In: A.Lüdeling— M.Kytö (eds.), Corpus Lingusitics. An International Handbook. Berlin: De Gruyter, s.207–225. Barsalou, L.W. (1999): Perceptual symbol systems. Behavioral and Brain Sciences, 22, 4, s.637–660. Bressem, J. (2013): Alinguistic perspective on the notation of form features in gestures. In: C.Müller— A.Cienki— E.Fricke— S.Ladewig— D.McNeill— S.Tessendorf (eds.), Body— Language— Communication. Berlin: De Gruyter, s.1079–1098. Carletta, J. (2006): Announcing the AMI Meeting Corpus. The ELRA Newsletter, 11, 1, s.3–5. Dancygier, B.— Sweetser, E. (eds.) (2015): Viewpoint in Language. AMultimodal Perspective. Cambridge: Cambridge University Press. OPEN ACCESS
168 ČASOPIS PRO MODERNÍ FILOLOGII 101, 2019, Č.2 Emmorey, K. (2002): Language, Cognition, and the Brain: Insights from Sign Language Research. Mahwah, NJ: Lawrence Erlbaum Associates. Furuyama, N. (2000): Gestural interaction between the instructor and the learner in origami instruction. In: D.McNeill (ed.), Language and Gesture. Cambridge: Cambridge University Press, s.99–117. Geeraerts, D. (2016): The sociosemiotic commitment. Cognitive Linguistics, 27, 4, s.527–542. Goodwin, C. (2007): Environmentally coupled gestures. In: S.D.Duncan— J.Cassell— E.T.Levy (eds.), Gesture and the Dynamic Dimension of Language. Amsterdam: John Benjamins, s.195–212. Hassemer, J.— McCleary, L. (2017): The multidimensionality of pointing. https:// doi.org/10.13140/rg.2.2.31597.08166 Holler, J.— Bavelas, J. (2017): Multi-modal communication of common ground: Areview of social functions. In: R.Breckinridge Church— M.W.Alibali— S.Kelly (eds.), Why Gesture? How the Hands Function in Speaking, Thinking and Communicating. Amsterdam: John Benjamins, s.213–240. Hostetter, A.B.— Alibali, M.W. (2008): Visible embodiment: Gestures as simulated action. Psychonomic Bulletin— Review, 15, 3, s.495–514. Hutchins, E. (2006): The distributed cognition perspective on human interaction. In: S.C.Levinson— N.J.Enfield (eds.), Roots of Human Sociality: Culture, Cognition and Interaction. London: Berg, s.375–398. Jehlička, J.— Lehečková, E. (2017): Eventuality and gesture in Czech and English. Příspěvek na 14th International Cognitive Linguistics Conference, Tartu. Kaderka, P. (2017): GESTIKULACE. In: P.Karlík— M.Nekula— J.Pleskalová (eds.), CzechEncy— Nový encyklopedický slovník češtiny. Dostupné z: https://www.czechency. org/slovnik/GESTIKULACE Kaderka, P.— Havlík, M.— Svobodová, Z.— Peterek, N.— Havlová, E.— Klímová, J.— Kubáčková, P. (2007): Minulost, současnost abudoucnost korpusu DIALOG. In: F.Štícha— M.Fried (eds.), Grammar & Corpora / Gramatika akorpus 2007. Praha: Academia, s.181–189. Kaderka, P.— Svobodová, Z. (2006): Jak přepisovat audiovizuální záznam rozhovoru? Manuál pro přepisovatele televizních diskusních pořadů. Jazykovědné aktuality, 43, 3–4, s.18–51. Kita, S. (2000): How representational gestures help speaking. In: D.McNeill (ed.), Language and Gesture. Cambridge: Cambridge University Press, s.162–185. Klima, E.S.— Bellugi, U. (1979): The Signs of Language. Cambridge, Mass.: Harvard University Press. Langacker, R.W. (1987): Foundations of Cognitive Grammar. Stanford, CA: Stanford University Press. Langacker, R.W. (2016): Baseline and elaboration. Cognitive Linguistics, 27, 3, s.405–439. McNeill, D. (1992): Hand and mind: what gestures reveal about thought. Chicago, IL: University of Chicago Press. McNeill, D. (2005): Gesture and Thought. Chicago, IL: University of Chicago Press. Merleau-Ponty, M. (1959): Le philosophe et son ombre. In: J.Taminiaux— H.L.Van Breda (eds.), Edmund Husserl, 1859–1959. Den Haag: Nijhoff, s.195–220. Özyürek, A. (2000): The influence of addressee location on spatial language and representational gestures of direction. In: D.McNeill (ed.), Language and Gesture. Cambridge: Cambridge University Press, s.64–83. Steier, R.— Kersting, M. (2019): Metaimagining and Embodied Conceptions of Spacetime. Cognition and Instruction, 37, 2, s.145–168. Streeck, J. (2009): Gesturecraft: The Manu-facture of Meaning. Amsterdam: John Benjamins. Streeck, J. (2015): Embodiment in human communication. Annual Review of Anthropology, 44, 1, s.419–438. Tomasello, M. (2014): The ultra-social animal. European Journal of Social Psychology, 44, s.187–194. OPEN ACCESS
EvA LEHEČkOvÁ— JAkUB JEHLIČkA 169 Ungerer, F.— Schmid, H.-J. (1996): An Introduction to Cognitive Linguistics. London: Longman. Verhagen, A. (2015): Grammar and cooperative communication. In: E.Dabrowska— D.Divjak (eds.), Handbook of Cognitive Linguistics. Berlin: Mouton de Gruyter, s.232–251. Williams, R.F. (2011): Coordinating and Sharing Gesture Space in Collaborative Reasoning. Příspěvek na 3rd Conference of the Scandinavian Association for Language and Cognition, Copenhagen. Zlatev, J. (2008): The co-evolution of intersubjectivity and bodily mimesis. In: J.Zlatev— T.P.Racine— C.Sinha— E.Itkonen (eds.), Converging Evidence in Language and Communication Research. Amsterdam: John Benjamins Publishing Company, s.215–244. Eva Lehečková | Ústav českého jazyka ateorie komunikace, Filozofická fakulta Univerzity Karlovy | nám. Jana Palacha 2, 116 38 Praha 1 ORCID ID: 0000-0002-3064-6414 [email protected] Jakub Jehlička | Ústav obecné lingvistiky, Filozofická fakulta Univerzity Karlovy | nám. Jana Palacha 2, 116 38 Praha 1 ORCID ID: 0000-0001-8176-6873 [email protected] OPEN ACCESS