Como o Cérebro entende sentenças faladas e cantadas / How the Brain Understands Spoken and Sung Sentences

O presente desenho experimental foi desenvolvido para investigar se o significado é similarmente extraído de frases faladas e cantadas. The present experimental design was developed to investigate whether the meaning is similarly extracted from spoken and sung phrases.

Meu principal interesse nesse desenho experimental é que tenho muita dificuldade de entender inglês de músicas. My main interest in this experimental design is that I have a hard time understanding English of songs

N400 da eletroencefalografia (EEG) associado com sinais vasculares adquiridos com espectroscopia funcional de infravermelho próximo (fNIRS). Electroencephalography (EEG) N400 associated with acquired vascular signals with functional near-infrared spectroscopy (fNIRS)

Metodologia / Methodology

São adquiridos sinais de EEG e NIRS simultaneamente por 45 minutos durante uma tarefa de julgamento de correção. EEG and NIRS signals are acquired simultaneously for 45 minutes during a correction judgment task.

Passo 0 (Preparação): Preparar um material de áudio contendo 88 sentenças, sendo:
Step 0 (Preparation): Prepare an audio material containing 88 sentences, of which:

22 sentenças faladas e corretas / 22 spoken and correct sentences

22 sentenças faladas e incorretas / 22 spoken and wrong sentences

22 sentenças cantadas e corretas / 22 sentences sung and correct

22 sentenças cantadas e incorretas / 22 sung and wrong sentences

[tarefa de julgamento da correção] / [correction judgment task]

Tela com um emoticon triste e feliz. (a posição era alternada entre os sujeitos)
Screen with a sad and happy emoticon. (the position was alternated between the subjects)

1. Escutam umas das 88 sentenças selecionadas aleatoriamente (6 s).
   They listen to one of the 88 sentences selected at random (6 s).

2. Os sujeitos pressionam o botão que representa o emoticon feliz caso a frase esteja semanticamente correta ou o botão que representa o emoticon triste caso a frase não esteja correta (3 s).
   The subjects press the button that represents the happy emoticon if the sentence is semantically correct or the button that represents the sad emoticon if the sentence is not correct (3 s).

3. Intervalo (6 s)

Interval (6 s)

Pausa após cada 15 minutos

Pause after every 15 minutes

Resultados / Results: 

EEG: 

1. Sentenças incorretas tem um N400 maior para sentenças faladas ou cantadas. Incorrect sentences have a higher N400 for spoken or sung sentences.

2. Apesar disso, o N400 estava atrasado para sentenças cantadas (pode ter ocorrido devido ao maior tempo das sentenças cantadas)
   Despite this, the N400 was late for sung sentences (may have occurred due to the longer length of the sung sentences)

fNIRS: 

1. Ativações maiores para frases faladas do que para frases cantadas predominantemente no hemisfério esquerdo. (sugere maior familiaridade com o material falado)
   
   Greater activations for spoken phrases than for phrases sung predominantly in the left hemisphere. (suggests greater familiarity with the spoken material)

2. Ativação generalizada para sentenças corretas em comparação com as incorretas. (indicação do entendimento do significado da sentença)
   
   Generalized activation for correct sentences compared to incorrect ones. (indication of the understanding of the meaning of the sentence)

Os resultados combinados indicam um processamento similar para sentenças cantadas e faladas.

The combined results indicate similar processing for sung and spoken sentences.