笑いましたが、完全には笑いませんでした。あなたの脳は絵文字をどのように読み取るのでしょうか?

リヴァイアサンプレス:

同じ文ですが、例えば次のようになります。

それは良い。

私たちは皆、その微妙な違いを感じることができると思います。言い換えれば、この文章の文脈を知らなくても、基本的に話者が絵文字を通じて何を表現したいのかがわかります。

さらに重要なのは、絵文字は、さまざまな程度のからかいや皮肉など、言葉では十分に表現できない、より興味深い意味を伝えることができるということです。もちろん、年齢の異なる人々にとって、絵文字の使用は多少曖昧です。たとえば、「絵文字」は単に笑顔を意味すると考える人もいますが、多くの人は、この表現を無力感、わずかな恥ずかしさ、悲しみを暗示するためによく使用します。

20 年前、Microsoft のインスタントメッセージングプラットフォームに新しい機能が追加されました。ユーザーは、喜び、驚き、困惑、羊などを伝えるために、数十個の小さなアイコンをメッセージに挿入できるようになりました。最初は徐々に、そして突然、そして圧倒的なスピードで、絵文字が登場しました。絵文字はチャットプラットフォームからテキストメッセージ、電子メール、ソーシャルメディア、さらには学校の課題にまで広がり、多くの教師を困惑させています。

何年もの間、私は絵文字を使うことを拒否する人間でした。こうした小さな漫画のイメージを受け入れることは、言葉の美徳を侵害しているように感じられます。

ジェーン・オースティンやイサク・バベルを読んで育った、言語的に伝統的な魂を持つ私にとって、絵文字は安っぽくて不必要に露骨なものに思えます。これまでずっとアルファベットだけで十分スムーズに進んできた筆記コミュニケーションに、それらが忍び込んできたことに憤りを感じます。

しかし数年前、あらゆる場面でこれらのシンボルを使用する同僚と友達になってから、私の態度は変わりました。私たちの日常のおしゃべりは、絵文字が加える感情的なエネルギーと、絵文字が呼び起こすつながりの感覚によって、2倍楽しくなります。

最初、私はそれらをデジタルの談話に織り込むことに躊躇していました。今では、それらは私の人生における多くの人々とのコミュニケーションに織り込まれ、フレーズを強調したり、独立したメッセージとして機能したりしています。💥 や 🔥 や 🌟 は完全な返信になることがあります。

私が最も驚いたのは、アイコンベースのインタラクションによって日常のインタラクションに具体的な喜びがもたらされたことです。

その効果は、意味を生み出すカフェインのショット、つまり純粋な感情の注入のようなものです。

実際に、絵文字が私たちの思考にどのような影響を与えるかを研究している研究者もいます。その一人がアリゾナ大学の認知科学者、ヴァレリア・ファイファーです。彼女は、私が新たに見つけた喜びは正当なものだと私に言った。絵文字は「言葉では伝わりにくい、さらに複雑な意味を伝えてくれる」と彼女は言う。

新しい言葉を見つけて覚えるのが大好きな「言葉オタク」の多くは、絵文字が私たちや私たちのコミュニケーションを愚かにしていると心配しています。しかし、ファイファー氏や他の認知科学者や言語学者たちは、何が彼らを特別なものにしているのかを説明しようと取り組んでいる。

イギリスの認知言語学者ヴィヴィアン・エヴァンスは、『絵文字コード』という本の中で、絵文字を「議論の余地なく世界初の真に普遍的なコミュニケーション手段」と呼んでいます。これは、意味が変化する可能性のある、拡大し続ける記号のセットに対して、大胆な主張のように思われます。しかし、言語は常に進化しており、これらの表意文字はデジタル通信の共通語となっています。

絵文字の歴史は、インスタントメッセージングプログラムの初期の時代よりもずっと古くまで遡ります。これらのグラフィックで詳細なアイコンが簡単に表示できるようになる前は、より扱いにくい文字で構成された絵文字がそれらの代わりを務めていました。

カーネギーメロン大学のコンピューター科学者、スコット・ファールマンは、句読点から構成される最初のスマイルとウインクの絵文字を作成した人物として広く知られています。

彼は、初期のオンライン掲示板の投稿者が互いに衝突しているのを見て、例えば皮肉が誤解されることもある、と考えた。そこで彼は 1982 年に同僚たちに、投稿の口調を示すために「:-)」または「:-(」を投稿者自身が書き込む前に付け加えることを提案した。投稿者が冗談や皮肉を言っているときにそれを示せれば、読者はそれほど腹を立てなくなるだろうと彼は考えた。

ファーマンと彼の絵文字。 © WIRED

何十年もの間、作家や思想家たちは感情表現を句読点に置き換えることを提案してきたが、その多くは冗談でそうしているようだ。 1862年、エイブラハム・リンカーンは、スピーチ中に聴衆から起こった「拍手と笑い」を表現するために、手書きのメモの中で「;)」という記号を使用しました。このような初期の絵文字は、おそらく印刷上の誤りか、当時の句読点の基準が緩かったことの一例です。

言語と感情が交差するところに魔法が存在します。

しかし、これらの使用法が実際に定着したのは、初期のインターネットという肥沃な土壌ができてからのことでした。グラフィカルインターフェースが改良されるにつれて、現代的な絵文字が誕生しました。

もともと、絵文字は感情を効果的に伝えるために設計された「顔文字」ではありませんでした。 1999年、日本のアーティスト栗田成隆氏は、携帯電話会社のために最初の176個の絵文字セットを開発しました。それらのほとんどは、特定の感情を伝えることを意図したものではなく、家、耳、テニスラケット、ファックス記号など、人々が時々言葉の代わりに使用できると彼が想像した日常的なシンボルでした。

絵文字が本格的に主流になり始めたのは、2011年にAppleが初めてモバイルデバイスに専用の絵文字キーボードを搭載してからです（Androidも2年後に追随しました）。

2015年までに、インターネットユーザーの90%以上が「😂」を使用し、オックスフォード英語辞典は「😂」をその年の単語に選びました。現在、絵文字の管理団体である Unicode コンソーシアムは、3,500 を超える絵文字をリストしています。

「絵文字」という言葉は「エモート」と語源的なつながりはありません。

これは、日本語の「絵」と「文字」を組み合わせたものです。これは、アメリカで発明され、「感情」と「アイコン」を組み合わせた「emoticon」を意味する別の単語とは異なります。この起源と意図の違いは、これらの新しいコミュニケーションツールと、それが使用者に与えた影響に関する初期の科学的研究にも影響を与えました。

おそらく、これらの視覚表現がどのように脳を活性化するかについての最初の研究は、2006年の会議で発表されました[1]。当時東京電機大学のコンピューター科学者だった湯浅政英氏とその同僚は、人間の脳が顔の写真を解釈するのと同じように、顔の抽象的な記号表現（句読点で構成される顔文字）を解釈できるかどうかを知りたいと考えました。

研究者たちは大学生を脳スキャナー（機能的磁気共鳴画像法[fMRI]を使用）に入れ、幸せそうな顔と悲しい顔のリアルな写真、それらの画像をスクランブルしたもの、幸せそうな顔と悲しい顔の顔文字、そして短くランダムな句読点の組み合わせを見せた。

写真は顔に関連する脳領域を活性化したが、絵文字は活性化しなかった。しかし、人々が何かを感情的にポジティブかネガティブかを判断する方法に関係していると考えられる別の領域が活性化されました。研究チームはその後、2011年の研究[2]でこの発見をさらに発展させ、文末の顔文字によって脳の言語領域と非言語領域が書かれたテキストに対してより強く反応すると報告した。

「韻律が音声表現を豊かにするのと同じように、絵文字は意味とインパクトを増すようだ」と研究者らは初期の論文に記している。その効果は、意味を生み出すカフェインのショット、つまり純粋な感情の注入のようなものです。

句読点で作られたこれらの顔文字が、抽象的な顔文字として認識されることなく、読者の心に感情的な価値を伝えるのは驚くべきことです。

当時、多くの研究者は、人々がまず記号の線や点の中にある顔を認識し、それから「ボトムアップのプロセスで」その表情を推測すると想定していたと、湯浅氏はメールで説明した。しかし、この研究結果は、これらの絵文字が顔認識よりももっと根本的な何かと関係していることを示唆しており、コミュニケーションにおいて感情に反応するという原始的でさらに深い動機を示唆している。

数年後、オーストラリアの研究者らは、スマイリーの顔文字「:-)」を顔として認識する方が、スマイリーの顔文字の逆入力「)-:」を認識するよりもはるかに速いと報告しました[3]。主任研究者オーウェン・チャーチズ氏にとって、この研究結果は、急速に変化する世界に対して私たちの脳が驚くほど適応力があることを示している。「赤ちゃんは絵文字に対する生来の神経的反応を持って生まれてくるわけではない」と彼はオーストラリア放送協会に語った。「これは完全に文化によって引き起こされた神経反応です。」

視覚的に豊かな絵文字が普及し始めると、科学者は言語、コミュニケーション、感情のリアルタイムの統合を識別するために、さらに多くの概念を探求するようになりました。研究はすぐに興味深く、微妙なニュアンスを持つものになりました。

たとえば、皮肉を伝えようとするとき、絵文字とテキストは同じように機能しますか?皮肉の最も基本的な形は、主張を理解してもらうために、自分の言いたいことの反対のことを言うことです。それが伝える矛盾は、まさに言語にドラマと意味の層を加えるため、認知的に非常に満足のいくものなのです。

イリノイ大学アーバナ・シャンペーン校のベンジャミン・ワイスマン氏とダレン・タナー氏は、参加者が異なる絵文字で終わる簡単な文章を読んだときの脳の活動パターンを記録した。絵文字には、文章の意味に一致するもの、一致しないもの、そして明らかに皮肉を示すウインクの絵文字が含まれていた。

彼女が作ったケーキはひどいものだった。

2018年に発表された「言葉による皮肉と絵文字による皮肉の強いウィンク」[4]という気の利いたタイトルの論文で、研究者らは皮肉な言葉に対する脳の反応に関する過去の研究結果と比較し、脳に関する限り、絵文字とテキストはほぼ同じ効果をもたらすことを発見した。

「それは大体一貫していました」と、現在ニューヨーク州トロイのレンセラー工科大学の認知科学者であるワイスマン氏は言う。「何らかの形の皮肉が伝えられ、解釈されている限り、脳の反応は、従来の絵文字を使わない皮肉に対する反応と非常によく似ているように見えました。」

この研究結果は、ワイスマン氏とオランダのティルブルフ大学の認知科学者ニール・コーン氏による、まだ発表されていない新たな研究結果と一致している。この研究[5]では、意図された意味と一致している、あるいは一致していない単語や顔文字を含む文章を読んだときの脳の反応を調査しました。

写真の文の意味: 彼女の好きな動物は猿です (上)。彼女の好きな動物はアボカド（下）。

ここでも、絵文字に対する脳の反応は言葉に対する反応と非常に似ていました。予想された絵文字は、言語予測の成功に関連する脳活動パターンを引き起こし、一方、予想外の絵文字は、意味が間違った言葉の処理に関連する脳活動を生み出しました。

ワイズマン氏は、ある程度まで、概念を言葉から考えるかアイコンから考えるかは問題ではないと語る。全体として、脳は受け取った入力から複雑な意味を構築し、この高レベルの認知において、顔の表情や声のトーンなど、あらゆる種類の要素を統合することができると彼は言う。絵文字は、この入力の別の種類にすぎません。「意味を確立するプロセスは、おそらく様相そのものとは独立したレベルで機能する可能性がある」と彼は言う。

もちろん、絵文字を使ったことがある人なら誰でも、絵文字が単にテキストのカラフルで陽気な代替物以上のものであることを知っています。 41 年の歴史を持つその兄弟である絵文字と同様に、絵文字はより重要な役割を担うようになっている。感情を伝える能力は、言語との複雑な相互作用を生み出します。 **ファイファーにとって、この交差点に彼らの魔法が宿っているのです。

「絵文字には、同じ言葉をより感情的にしたり、より感情的でないようにしたりする力があります。時には文章が不安を煽るものに見えたり、全く普通のこと、あるいは冗談のようにも見えたりするのです」と彼女は語った。これらはすべて重要な社会的機能です。 「テキストベースのコミュニケーションに移行するにつれて、絵文字が今日提供できるこの追加の意味の層は失われました。」

私たち人類と、私たちが話す言語の多くは、イントネーション、声量、表情、身振り、姿勢、意味ありげな視線に満ちた、対面でのコミュニケーションの激しい洗礼から生まれました。文字が後になって出現したときでさえ（5,000年以上前の楔形文字など）、歴史の大半において、文字は主に政府、商業、宗教といった公的な目的で使用されていました。対人関係、社会関係、まとまりのあるコミュニケーションは、今でも対面で、そして大抵は必要に迫られて行われています。 1960年になっても、世界人口の半分以下しか読み書きができず、ロマンチックなラブレターがどこにでもあったオースティンの時代でさえ、14歳以上のイギリス人のうち手紙を書いたり読んだりできるのは半分程度に過ぎなかった。[6]

ポジティブな絵文字は「聞いてるよ」と伝えます。ネガティブな絵文字はまったく異なる効果をもたらします。

しかし、デジタル時代の素晴らしい新世界に移行すると、日常の社会や同僚とのコミュニケーションの大部分は書き言葉で行われるようになります。今日、私たちは社交的な訪問や携帯電話での通話よりも、テキストメッセージやダイレクトメッセージを使用しています。今日では、仕事の会議や電話は、Slack や Microsoft Teams でキーボードを軽くタップするだけで済むことが多くなっています。

自然は真空を嫌う。空白は埋められるでしょう。絵文字は、新しいコミュニケーション形式が切実に必要とされていた時代に登場したようです。「私たち全員がテキストメッセージやメールを送り始めたとき、コミュニケーションの方法に何かが欠けているように感じました。絵文字がその空白を埋めているように思えました」とファイファー氏は語った。

彼女と彼女の同僚は、さまざまな絵文字が文章に感情的な色彩を加えることで、社会の力学にどのような影響を与えるかにも興味を持っています。彼らは、ハートやスマイリーのような幸せな絵文字は、特定の「リフト値」を持たないにもかかわらず、メッセージに一般的にポジティブな感情効果を加えることを発見しました[7]。むしろ、これらの画像の手がかりは、接続を確立するためのマーカーとして機能します。

「ポジティブな絵文字は録音機器の点滅ライトのようなものだ」と彼女は言う。「おそらく私たちは、こうした絵文字を使って『聞いてるよ』とか『あなたの話に興味があるよ』と伝えているのでしょう。つまり、私たちの関係を肯定する方法なのです。」これらの絵文字は社会の結束を促進するのに役立つようです。

一方、ネガティブな絵文字は言葉や解釈にさまざまな影響を与える可能性があります。ファイファー氏は、この研究で被験者はしかめ面、怒った顔、涙を精神状態のより具体的な指標とみなし、これらのシンボルをより注意深く深く処理したと述べている。「送信者の視点から見ると、ネガティブな絵文字を送ることはポジティブな絵文字を送ることよりも多くのことを伝えます。」

さらに、ポジティブな感情は、たとえ絵文字の形で現れたとしても、私たちを結びつける社会的接着剤であるのに対し、ネガティブな感情は、関係性や共通の理解をより深く探求することで、その意図を明確にする必要があります。そして、対面でコミュニケーションをとるときと同じように、否定的な感情は誤解につながる可能性が高くなります。

絵文字は、デジタルライフスタイルへの移行に伴って生じたその他の社会的ギャップも埋めます。英国オームズカークのエッジヒル大学の心理学者リンダ・ケイは、顔文字に関する包括的な本を執筆しており、これらの普遍的なシンボルがどのようにして人の性格に関する貴重な手がかりを提供できるかを検討している。[8]

ソーシャルメディアプラットフォームでのやり取りは不透明であると考えられることが多く、実際、人間が互いを理解し、正確に判断するために頼りにする指標の多くが欠けています。ケイ氏は、人々がオンラインで絵文字を使用する方法が、他の人にその人がどのような人物であるか理解してもらうのに役立つかどうかをテストすることにした。彼女と彼女の同僚は、あるグループの Facebook ユーザーに対し、性格に関する書面によるアンケートに回答するよう依頼し、その後、別のグループにプロフィールのスクリーンショットを見せた。

研究者たちは5つの主要な性格特性を調べ、プロフィールで使用されている絵文字によって、閲覧者がそのうちの2つ（開放性と外向性）をかなり正確に評価できることを発見した。外向性は直接見て判断するのは簡単ですが、開放性は評価するのが困難です。「このことからわかるのは、実は私たちが第一印象を形成する際、相手のオープンさを理解する上で、オンライン環境の方がオフラインのターゲットよりも多くの行動を提供してくれる場合があるということです」とケイ氏は言う。

大量の絵文字が新たに点在する世界は、実はそれほど変わっていないことが判明しました。また、多くの人が考えるほど味気ないものではありません。「結局のところ、コミュニケーション、つまりコミュニケーションの目的とコミュニケーションの方法は本質的にはそれほど変わっていません」とケイ氏は説明する。「その影響は、私たちの境界を広げることに大きく関係していると言えるでしょう。」

私にとって、これは、絵文字でいっぱいの新しい道を歩み続ける上で、刺激的な考えです。なぜなら、この斬新な創作を嘲笑するのではなく、むしろ人間の脳の驚くべき適応力の勝利として見る必要があることを示唆しているからです。

私たち人間は、豊かな概念的、感情的な言語を使って『白鯨』のように心に響く文学作品を創り出せるだけでなく、それを絵文字🐳に完全に翻訳できるという事実を嬉しく思います。 [9]

参考文献:

[1]m-yuasa.net/chi2006_yuasa.pdf

[2]m-yuasa.net/pdf/brain/Brain_Activity_When_Reading_Sentences_and_Emoticons.pdf

[3]www.tandfonline.com/doi/pdf/10.1080/17470919.2013.873737#.Uv0F-EJdW52

[4]journals.plos.org/plosone/article?id=10.1371/journal.pone.0201727

[5]research.tilburguniversity.edu/en/publications/絵文字の文法とコミュニケーション上の制約

[6]ourworldindata.org/literacy

[7]www.sciencedirect.com/science/article/abs/pii/S0747563221003393

[8]www.sciencedirect.com/science/article/abs/pii/S0747563216302072

[9] www.emojidick.com