BLACKBOX DI COMUNICAZIONE: 6 passaggi

2024 Autore: John Day | [email protected]. Ultima modifica: 2024-01-30 10:02

SCATOLA NERA DI COMUNICAZIONE

realizzato dalla squadra "에이조(Ajo)"

perché scatola nera?

1) Blocco della comunicazione esistente

2) Archivio dati di due persone che comunicano

Spesso viviamo pensando di "comunicare" con le persone intorno a noi. Ma viviamo con valori diversi e ognuno può avere sentimenti e pensieri diversi anche se parliamo dello stesso argomento nel processo. I problemi compaiono quando non capiamo le reciproche differenze, che possono anche portare a un'interruzione della comunicazione. Partiamo da questa consapevolezza del problema e visualizziamo i valori delle informazioni fisiche con cui comunichiamo. Vogliamo vivere di nuovo il processo di comunicazione presentandolo come un altro modo di comunicare.

Utilizzando FACE API, il sensore di impulsi di Arduino e RaspberryPi, questo progetto ha provato un nuovo modo di interagire tra le persone.

In ogni stanza separata, i due partecipanti hanno interagito tra loro attraverso un monitor, controllando i reciproci valori emotivi e le frequenze cardiache. Il nostro team li ha archiviati per analizzare come stanno andando le nuove conversazioni tra le persone attraverso i computer e l'intelligenza artificiale e come le emozioni possono essere misurate nel contesto della comunicazione

Scatola nera;1)기존의 소통방식을 차단

2)소통하는 2인의 데이터를 아카이브

우리는 흔히 주변의 사람들과 '소통'한다고 생각하면서 살아간다. 하지만 우리는 서로 다른 가치관을 가지며 살아가고, 그 과정에서 같은 주제에 대해 이야기해도 각자 다른 감정과 생각을 가질 수 있다. 문제는 서로의 다름을 이해하지 못할 때 나타나며, 이는 소통의 단절로까지 이어지기도 한다.이러한 문제의식에서 출발하여 소통을 통해 나타나는 신체 정보값을 시각화하고 이를 또다른 소통의 방식으로 나타내면서 소통의 과정을 새롭게 경험하고자 한다.

API FACE와 아두이노의 심박센서, 라즈베리를 사용하여 사람들 사이의 새로운 대화 방식을 시도해본 프로젝트입니다.이 프로젝트의 참가자 2명은 분리된 각각의 방에서 모니터를 통해 서로의 감정 값 8가지와 심박수를 확인 하며 서로 대화를 진행합니다. 팀 에이조는 이를 아카이빙 하여 컴퓨터와 인공지능을 통해 사람 사이의 대화가 어떻게 새롭게 진행되는지, 소통하는 상황에서 어떠한 감정들이 오고가며 이를 측정할 수 있는지를 분석하는 과정을 거쳤습니다.

Passaggio 1: cosa ti serve

*Pi lampone x 2

*picam lampone X 2

*Arduino X 2

*sensore di pulsazioni* 2

*monitor X 2

*cuffie X 2

*microfono X 2

*illuminazione X 2

*Amplificatore

*scrivania

*partizione

*panno nero

Passaggio 2: installazione

1.책상을 다른 책상 위에 올리고 네 면을 검은 천으로 막아 시야를 차단할 수 있는 작은 방을 만듭니다.

Posiziona la tua scrivania su un'altra scrivania e blocca i quattro lati con un panno nero per creare una piccola stanza che possa bloccare la vista dei partecipanti

2.가운데에 나무 판자로 만든 칸막이를 설치하여 상대방이 서로의 얼굴을 볼 수 없도록 합니다.

Nel mezzo, installa una partizione per impedire all'altra parte di vedere i volti dell'altro

3.라즈베리파이를 연결할 모니터를 각각 설치하고 뒷면에 라즈베리 파이와 카메라를 부착합니다.

** 이때 라즈베리 파이와 카메라는 모니터와 서로 반대가 되도록 붙입니다! 상대방의 데이터값을 볼 수 있도록!

Ogni monitor per collegare la torta di lamponi e attaccare la torta di lamponi e la fotocamera sul retro

** A questo punto, attacca la torta di lamponi e la fotocamera al lato opposto del monitor! Per consentire ai partecipanti di visualizzare i valori dei dati dell'altra persona

4.카메라가 표정을 잘 측정할 수 있도록 조명을 설치합니다

Installa le luci in modo che la telecamera possa misurare le espressioni facciali dei partecipanti

5.대화 시 사용할 헤드셋과 마이크를 각각 설치하고, 연결합니다.

Installa ogni cuffia e microfono da utilizzare nella conversazione e connettiti con l'amplificatore

Passaggio 3: il codice: API FACE

microsoft azure에서 face api를 사용하여 8가지 감정값을.

(체험판 계정을 통해 무료로 이용할 수 있습니다)

추출한 감정값에 따라 변화하는 그래프를 만듭니다

Estrai otto valori emotivi utilizzando l'API del viso fornita da Microsoft Azure. (microsoft azzurro)

(disponibile gratuitamente tramite il tuo account di prova)

Crea un grafico che varia in base ai valori estratti

Passaggio 4: il codice: sensore di pulsazioni

아두이노를 라즈베리파이와 연결합니다.

아두이노에 연결합니다 검은 전선은 GND에 빨간 선은 5V 핀에 보라색 선은 A0 핀에 심박수를 측정하기 위해서 라이브러리를 설치해야 합니다. 첨부된 링크를 통해 다운받을 수 있습니다. vnc에 IDE를 설치하고, 'Getting_BPM_to_Monitor'예제를. 프로세싱에서 받아온 심박수 값에 따라 사이즈가 변화하는 이미지를 출력합니다.

Collega l'arduino al lampone pi

Collega il sensore di impulsi ad Arduino

La linea nera è per il GND.

La linea rossa è 5V.

La linea viola è in A0

Installa la libreria per misurare la frequenza cardiaca. Puoi scaricarlo (pulse_library)

Connettiti a vnc, installa arduino IDE, esegui l'esempio 'Getting_BPM_to_Monitor' e collega l'elaborazione con Arduino tramite comunicazione seriale

Crea immagini che cambiano di dimensioni con i valori della frequenza cardiaca in elaborazione

Passaggio 5: modulazione vocale

1.텍스트 입력 - 변화 - 다운로드 (traduttore vocale)

2. 참가자들의 대화를 끊어줄 신호음 준비 (삡!)

3.로직을 이용한 트랙만들기 (1번, 2번, 안내맨트, 삡 소리 - 최소 4개트랙)

audio FX - pitch - pitch Shifter - mono (1, 2번 트랙 음성 변조)

1, 2번 트랙 녹음 버튼 활성화

모니터 화면녹화와 함께 시작.

1. Inserisci testo - Modifica - Scarica

2. Preparare un tono per interrompere la conversazione dei partecipanti (PIP!)

3. Creazione di una traccia utilizzando la logica (N. 1, 2, segno guida, PIP - minimo 4 tracce)

audio FX - pitch shift - mono (traccia 1, 2 modulazione voce)

Attiva i pulsanti di registrazione della traccia 1 e 2

Inizia con la registrazione dello schermo del monitor

Passaggio 6: prova

모든 것이 준비되면, 두가지를 경험할 수 있습니다.

1.커뮤니케이션 박스 안에 직접 들어가서 새로운 소통방식을 경험해볼 수 있습니다.

2.노트북으로 vnc접속하여 연결된 모니터를 관찰하며 두 사람이 소통하는 과정을 관찰할 수 있습니다.

Quando tutto è pronto, puoi sperimentare due cose

1. Puoi entrare nella casella di comunicazione e sperimentare una nuova comunicazione indossando le cuffie e parlando con gli altri

2. Lo schermo sul monitor può essere visualizzato tramite connessione Vnc sul laptop per osservare come stanno parlando i due partecipanti

?

Il nostro team ha condotto tre esperimenti, ponendo domande delicate di cui di solito non è facile parlare e osservando i partecipanti che ne parlano. Attraverso questi esperimenti, siamo stati in grado di osservare come i partecipanti simpatizzavano l'uno con l'altro nel processo di conversazione e come parlavano in modo diverso dalle loro menti. L'intenzione originale era di aiutarci a capirci meglio quando parliamo digitalizzando le emozioni e le frequenze cardiache che appaiono nel processo di comunicazione e visualizzandole in un modo migliore. Sebbene questo fosse interessante, non sembrava avere un impatto diretto sulla conversazione delle persone con le persone come si pensava sarebbe stato, poiché il risultato dell'esperimento è stato che puoi capire le emozioni, come i sentimenti e l'esitazione che sono difficili da osservare direttamente.

우리 팀은 3번의 실험을 진행했는데, 평소에는 쉽게 이야기할 수 없는 민감한 질문들을 주고 참여자들이 이에 대해 대화하는 모습을 관찰했습니다.

이러한 실험을 통해 우리는 대화를 하는 과정에서 공감하는 모습, 속마음과 다르게 말하는 모습 등을 관찰할 수 있었습니다.

처음에 계획했던 의도는 소통하는 과정에서 나타나는 감정과 심박수를 데이터화하여 잘 알아볼 수 있도록 시각화하여 대화를 할 때 서로 이해하고 소통하는 데에 도움을 주는 것이었습니다. 직접 실험을 진행해본 결과 가시적으로 공감, 망설임 등 여러 감정들이 나타나는 모습을 파악할 수 있어 이 점은 흥미로웠으나 생각했던 것 만큼 사람과 사람이 대화를 하는 상황에 직접적인 영향을 주지는 못했던 것 같기도 합니다.