Research

Below are my research projects at Institute of Science Tokyo (formerly Tokyo Tech). For my previous research, please see my personal website.

Browse Projects by Research Theme Funded Projects

Kawaii Vocalics

Kawaii vocalics, or kawaii voice user experience (UX), is a new area of study aiming to explain the properties and effects of kawaii (Japanese "cute") voice phenomena. Kawaii vocalics fills the gap between the psychological study of kawaii and human-computer interaction (HCI) by considering how the design of virtual agents with kawaii voices can affect first impressions, trust, rapport, and compatibility. We will explore the nature and attributes of kawaii vocalics compared to kawaii visuals and emotion and behaviour elicitation through virtual agents with kawaii voices.

カワイイ・ヴォーカリクス、すなわちカワイイ音声ユーザー・エクスペリエンス(UX)は、カワイイ音声現象の特性と効果を説明することを目的とした新しい研究分野である。カワイイ・ヴォーカリクスは、カワイイ声を持つバーチャル・エージェントのデザインが、第一印象、信頼、ラポール、相性にどのような影響を与えるかを考察することで、カワイイの心理学的研究とヒューマン・コンピュータ・インタラクション(HCI)のギャップを埋めるものです。私たちは、カワイイビジュアルと比較したカワイイ・ヴォーカリックスの性質と属性、そしてカワイイ・ヴォイスを持つバーチャル・エージェントによる感情と行動の誘発について探求します。

Projects

Kawaii Computing

Kawaii computing explores the Japanese concept of cute in human-computer interaction contexts. We consider the socio-cultural features of kawaii in interactive experiences with computers.

カワイイ・コンピューティングは、ヒューマン・コンピュータ・インタラクションの文脈における日本の「カワイイ」の概念を探求している。我々は、コンピュータとのインタラクティブな体験における「カワイイ」の社会文化的特徴を考察する。

Modelling Kawaii Vocalics

Little is known about kawaii as a sound phenomenon. What features of visual kawaii transfer? What unique properties does kawaii sound have? We ask.

音の現象としてのカワイイについてはほとんど知られていない。視覚的なカワイイにはどのような特徴があるのか?カワイイ音声にはどんなユニークな特性があるのか?我々は問う。

Kawaii Game Voice UX

Kawaii game voice user experiences (voice UX) are characterized by visual and sound phenomena associated with characters and other diegetic agents.

カワイイゲーム音声UX(ボイスUX)は、キャラクターや他のダイスジェティックエージェントに関連する視覚的・音響的現象が特徴です。

Voice UX

Voice is a natural mode of communication. As an aural medium, voice is used to deliver information (speech) as well as express characteristics of the speaker (vocalics). Advances in sound production and machine learning alongside the proliferation of intelligent assistants and dictation interfaces have pushed voice user experiences (voice UX) to the forefront of modern human-computer interactions. We explore the paradigm of voice UX through systematic reviews, critical design studies, and controlled experiments.

音声は自然なコミュニケーション手段です。聴覚メディアである音声は、情報(内容)を伝えるだけでなく、話し手の特徴(パラ言語)を表現するために使用されます。音声生成と機械学習の進歩は、知的アシスタントやディクテーション・インターフェースの普及と並んで、音声ユーザー体験(音声UX)を現代の人間とコンピュータのインタラクションの最前線に押し上げました。私たちは、文献調査、クリティカル・デザイン調査、および人体実験を通して、音声UXの現象を探求しています。

Projects

Voice Against Bias

Can voice influence attitudes towards age? We aim to find out with MAKOTO, our “older adult” voice assistant.

音声は年齢に対する意識に影響を与えることができるのか?お年寄りぽい音声アシスタント「MAKOTO」を使って、それを明らかにすることを目指します。

Evaluating Voice UX

We're exploring ways to measure and evaluate interactions with voice-based agents, interfaces, and environments.

音声エージェント、インターフェース、環境とのインタラクションを測定・評価する方法を模索しています。

Morphologies in Voice and Body

What kinds of bodies should voice-based agents have, if any? We explore a range of modalities and morphologies.

音声ベースのエージェントは、どのような身体を持つべきなのでしょうか。私たちは、さまざまなモダリティとモルフォロジーを探求しています。

Interactions in the Negaverse

Are we living in a negaverse? Critical scholarship has drawn attention to a range of ways in which technology exploits, affords, or even celebrates negative experiences. Dark patterns and persuasive interfaces, misinformation and fake news, maldaimonic UX and dark participation … even gamification can have an adverse effects, whether intentionally or not. We explore how negative user experiences and orientations play out across a range of interactive systems, as well as how they can be disrupted.

私たちはネガバースに生きているのだろうか?批評的な研究は、テクノロジーがネガティブな経験を利用したり、与えたり、あるいは称賛したりするさまざまな方法に注意を向けてきた。ダークパターンや説得力のあるインターフェイス、誤報やフェイクニュース、maldaimonic UXやダークな参加…ゲーミフィケーションでさえ、意図的かどうかにかかわらず、悪影響を与えることがある。私たちは、様々なインタラクティブ・システムにおいて、ネガティブなユーザー体験や方向性がどのように展開されるのか、また、それらをどのように破壊することができるのかを探求しています。

Projects

ELEMI: Exoskeleton for the Mind

Exploring whether and how a metacognitive agent can help us grapple with misinformation on social media.

メタ認知エージェントがSNS上の誤報に対処するのに役立つかどうか、またどのように対処するかを探ります。

Trust in AI

What factors affect trust and reliance in AI-based agents, systems, and environments? Exploring layperson and expert perspectives.

AIを活用したエージェント、システム、環境に対する信頼や信用に影響を与える要因とは?一般人や専門家の視点を探ります。

Dark Patterns and Deceptive Design

Exploring dark patterns, deceptive interactions, and persuasive interfaces in Japan and elsewhere.

日本と海外のダークパターン、欺瞞的なインターアクション、説得力のあるインターフェイスを探ります。

  • Lab Members:
    Katie Seaborn
    Shun Hidaka
    Sota Kobuki
    Tatsuya Itagaki
    Mizuki Watanabe
    Jo Yukami
    Weichen Joe Chang
  • Publications:
  • Timeline: FY21~
Maldaimonic Game UX

Maldaimonic player orientations and experiences are all about having fun being bad without harming others.

マルダイモニックなプレーヤーの志向と経験は、他人を傷つけることなく、悪いことを楽しむことにあります。

  • Lab Members:
    Katie Seaborn
    Satoru Iseya
    Shruti Chandra
  • Publications:
  • Timeline: FY22~

AI and Intersectional Design

Intersectional design examines how power operates through design practice with respect to overlapping factors of social identity, such as gender, age, and race. Designers, knowingly or not, draw on social models of how we look and sound, think and behave, and interact with the world. Users, too, respond in kind. We approach this phenomenon from an intersectional perspective, focusing on whether human diversity is reflected in design and research practice as well as how user reactions are shaped by biases embedded in the design of intelligent agents and interactive experiences.

交差的デザインは、ジェンダー、年齢、人種といった社会的アイデンティティの重複する要素に関して、デザイン実践を通してどのように権力が作用するかを検証します。デザイナーは、知ってか知らずか、私たちがどのように見え、聞こえ、考え、行動し、世界と相互作用するかという社会的モデルを引き出します。ユーザーもまた、それに呼応するのです。私たちは、人間の多様性がデザインやリサーチの実践に反映されているか、また、ユーザーの反応が知的エージェントやインタラクティブ体験のデザインに組み込まれたバイアスによってどのように形成されているかに注目し、交差的な観点からこの現象にアプローチしています。

Projects

Gender Neutrality in Robots and AI

We’re exploring whether and how robots and other AI can be perceived as gender-neutral.

ロボットや他の人工知能がジェンダー中性と認識されるかどうかを探っています。

  • Lab Members:
    Katie Seaborn
  • Publications:
  • Funding:Engineering Academy Young Scientist Encouragement Award
  • Timeline: FY22~
Social Identity in Robots and AI

We're exploring how social identity affects human-agent interactions.

社会的アイデンティティが人間と人工知能の相互作用にどのような影響を与えるかを探検します。

  • Lab Members:
    Katie Seaborn
    Haruki Kotani
    Takao Fujii
  • Publications:
  • Timeline: FY22~
Biases in Robots and AI

We're approaching biases within and around us from an intersectional lens.

私たちの中や周りのバイアス・偏見に、交差点的なレンズを実施すると研究します。

  • Lab Members:
    Katie Seaborn
    Yeongdae Kim
    Shruti Chandra
  • Publications:
  • Funding:Engineering Academy Young Scientist Encouragement Award
  • Timeline: FY22~

Meta Operandi

Let us zoom out and consider the meta level of research practice. From meta-analysis and meta-synthesis to Open Science and Open Source to cross-cultural translation, we aim for aspirational rigour in pursuit of human knowledge.

研究実践のメタレベルを拡大して考えてみましょう。メタアナリシスやメタシンセシスから、オープンサイエンスやオープンソース、異文化間翻訳に至るまで、私たちは人間の知識を追求する上で、「アスピレーショナル」厳密さを目指しています。

Projects

Systematic Review-lution

We aim to increase awareness and rigour in systematic review work. Find out more on the homepage.

システマティック・レビューに対する認識と厳密性を高めることを目指しています。 HPで詳しく読めます

  • Publications:
  • Timeline: FY23~
Project Translate Japan

Our goal is to translate all Japanese research into Japanese for the Japanese public and provide these translations in Open Science venues like Jxiv.

私たちの目標は、すべての日本の研究を日本の人々のために日本語に翻訳し、これらの翻訳をJxivのようなオープンサイエンスの場で提供することです。

  • Lab Members:
    Katie Seaborn
    Suzuka Yoshida
    Yuto Sawa
    Mutsumi Kashiwabara
    Miu Kojima
  • Publications:
  • Timeline: FY24~
Seaborn, K., Fosch-Villaronga, E., Fedosov, A., & Li, G. R. (2025). My Body, My Exoskeleton: Co-Designing Intersectional Visions of Robotic Augmentations through Drawings. International Journal of Social Robotics. https://doi.org/10.1007/s12369-025-01252-3 Cite
Tanaka, H., & Michelle, H. (2025). Artificial intelligence’s sexual politics: Three modes and the case of Japan. In D. Nguyen, J. Zeng, & B. Mutsvairo (Eds.), Technology, Power & Society: Global Perspectives on the Digital Transformation (in press). Brill. Cite
Bohrer, R., Liang, S., Cormier, M. V., Fujii, T., Toups Dugas, P. O., Williams, R. M., Ko, A. J., Seaborn, K., & Haimson, O. L. (2025). Transnational lgbTq+ SIG. Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems, 1–5. https://doi.org/10.1145/3706599.3716287 Cite
Fabre, É., Seaborn, K., Koiwai, S., Watanabe, M., & Riesch, P. (2025). More-than-Human Storytelling: Designing Longitudinal Narrative Engagements with Generative AI. Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems, 1–10. https://doi.org/10.1145/3706599.3720135 Cite
Fujii, T., Seaborn, K., Steeds, M., & Kato, J. (2025). Inter(sectional) Alia(s): Ambiguity in Voice Agent Identity via Intersectional Japanese Self-Referents. Proceedings of the 2025 CHI Conference on Human Factors in Computing Systems, 1–18. https://doi.org/10.1145/3706598.3713323 Cite
Kato, J., Koyama, Y., Maejima, A., Mihara, R., & Seaborn, K. (2025). Anime SIG: Researching Japanese Animation From Technical, Cultural, and Industrial Perspectives. Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems, 1–3. https://doi.org/10.1145/3706599.3716296 Cite
Seaborn, K., Gray, C. M., Gunawan, J., Mildner, T., Schäfer, R., Sanchez Chamorro, L., & Nakamura, S. (2025). Global and Transdisciplinary Perspectives on Dark Patterns and Deceptive Design Practice: ダークパターンとひとをだますデザインに関する国際的かつ学際的な交流. Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems, 1–6. https://doi.org/10.1145/3706599.3716294 Cite
Mandai, Y., Seaborn, K., Nakano, T., Sun, X., Wang, Y., & Kato, J. (2025). Super Kawaii Vocalics: Amplifying the “Cute” Factor in Computer Voice. Proceedings of the 2025 CHI Conference on Human Factors in Computing Systems, 1–19. https://doi.org/10.1145/3706598.3713709 Cite
Mynatt, E. D., Kobayashi, M., Pradhan, A., Mathur, N., Vines, J., Seaborn, K., Buehler, E., Waycott, J., Rudnik, J., Zubatiy, T., & Rozga, A. (2025). Technology Mediated Caregiving For Older Adults Aging in Place. Proceedings of the Extended Abstracts of the CHI Conference on Human Factors in Computing Systems, 1–7. https://doi.org/10.1145/3706599.3706721 Cite
The Yomiuri Shimbun. (2025, March 15). Japan Fair Trade Commission Finds 10 Types of Dark Patterns May Violate Law; Annual Damage Could Be ¥1.7 Tril. The Yomiuri Shimbun. https://japannews.yomiuri.co.jp/society/general-news/20250315-243489/ Cite
Seaborn, K., Rogers, K., Altmeyer, M., Watanabe, M., Sawa, Y., Nam, S., Itagaki, T., & Li, G. ‘Rikaku.’ (2025). Unboxing Manipulation Checks for Voice UX. Interacting with Computers, iwae062. https://doi.org/10.1093/iwc/iwae062 Cite
Kojima, M., Seaborn, K., Kinoshita, Y., & Nakamura, S. (2025). ダークパターン・ディセプティブデザインに対する、日本の消費者のソーシャルメディアにおける反応について (Japanese consumer reactions on social media to dark patterns and deceptive design). 第 213回 ヒューマンコンピュータインタラクション研究会. 第 213回 ヒューマンコンピュータインタラクション研究会, Tokyo, Japan. https://www.sighci.jp/events/sig/213 Cite
Fabre, É., Seaborn, K., Verhulst, A. A., Itoh, Y., & Rekimoto, J. (2024). Juicy text: Onomatopoeia and semantic text effects for juicy player experiences. Proceedings of the 26th International Conference on Multimodal Interaction, 144–153. https://doi.org/10.1145/3678957.3685755 Cite
Gessinger, I., Seaborn, K., Steeds, M., & Cowan, B. R. (2024). ChatGPT and me: First-time and experienced users’ perceptions of ChatGPT’s communicative ability as a dialogue partner. International Journal of Human-Computer Studies, 194, 103400. https://doi.org/10.1016/j.ijhcs.2024.103400 Cite
Seaborn, K., Kotani, H., & Pennefather, P. (2024). From “made in” to mukokuseki: Exploring the visual perception of national identity in robots. ACM Transactions on Human-Robot Interaction. https://doi.org/10.1145/3681782 Cite
幸大横山. (2024). プログレスバーの性質が待機後のユーザの選択行動に及ぼす影響. 明治大学大学院 先端数理科学研究科 修士(理学). https://dl.nkmr-lab.org/papers/432 Cite
Seaborn, K., Gessinger, I., Yoshida, S., Cowan, B. R., & Doyle, P. R. (2024). Cross-cultural validation of partner models for voice user interfaces. Proceedings of the 6th ACM Conference on Conversational User Interfaces, 1–10. https://doi.org/10.1145/3640794.3665537 Cite
Compton, J. (2024). Inoculation theory. Review of Communication, 1–13. https://doi.org/10.1080/15358593.2024.2370373 Cite
Tang, F. (2024, June 21). More of Japan’s elderly are lonely and have fewer friends, white paper says. The Japan Times. https://www.japantimes.co.jp/news/2024/06/21/japan/society/aging-society-white-paper/ Cite
Knoth, N., Tolzin, A., Janson, A., & Leimeister, J. M. (2024). AI literacy and its implications for prompt engineering strategies. Computers and Education: Artificial Intelligence, 6, 100225. https://doi.org/10.1016/j.caeai.2024.100225 Cite
Chang, W. J., Seaborn, K., & Adams, A. A. (2024). Theorizing deception: A scoping review of theory in research on dark patterns and deceptive design. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 321. https://doi.org/10.1145/3613905.3650997 Cite
Seaborn, K., Itagaki, T., Watanabe, M., Wang, Y., Geng, P., Fujii, T., Mandai, Y., Kojima, M., & Yoshida, S. (2024). Deceptive, disruptive, no big deal: Japanese people react to simulated dark commercial patterns. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 95. https://doi.org/10.1145/3613905.3651099 Cite
Wang, Y., & Seaborn, K. (2024). Kawaii computing: Scoping out the Japanese notion of cute in user experiences with interactive systems. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 210. https://doi.org/10.1145/3613905.3651001 Cite
Li, G. “Rikaku,” & Seaborn, K. (2024). No joke: An embodied conversational agent greeting older adults with humour or a smile unrelated to initial acceptance. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 252. https://doi.org/10.1145/3613905.3650918 Cite
Seaborn, K., & Chang, W. J. (2024, May 12). Another subtle pattern: Examining demographic biases in dark patterns and deceptive design research. Mobilizing Research and Regulatory Action on Dark Patterns and Deceptive Design Practices Workshop at CHI Conference on Human Factors in Computing Systems. DDP CHI ’24, online. https://chi2024.darkpatternsresearchandimpact.com/ Cite
Oh, J., Kim, W., Kim, S., Im, H., & Lee, S. (2024). Better to Ask Than Assume: Proactive Voice Assistants’ Communication Strategies That Respect User Agency in a Smart Home Environment. Proceedings of the CHI Conference on Human Factors in Computing Systems, 1–17. https://doi.org/10.1145/3613904.3642193 Cite
Fujii, T., Seaborn, K., & Steeds, M. (2024). Silver-tongued and sundry: Exploring intersectional pronouns with ChatGPT. Proceedings of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 511. https://doi.org/10.1145/3613904.3642303 Cite
Seaborn, K., Iseya, S., Hidaka, S., Kobuki, S., & Chandra, S. (2024). Play across boundaries: Exploring cross-cultural maldaimonic game experiences. Proceedings of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 564. https://doi.org/10.1145/3613904.3642273 Cite
Mahmood, A., & Huang, C.-M. (2024). Gender Biases in Error Mitigation by Voice Assistants. Proceedings of the ACM on Human-Computer Interaction, 8(CSCW1), 60:1-60:27. https://doi.org/10.1145/3637337 Cite
Steinnes, K. K., Zickfield, J. H., Blomster Lyshol, J. K., Schubert, T., & Seibt, B. (2024). Kama muta: The cuteness emotion. In L. Al-Shawaf & T. K. Shackelford, The Oxford Handbook of Evolution and the Emotions (pp. 339–356). Oxford University Press. Cite
Seaborn, K., Urakami, J., Pennefather, P., & Miyake, N. P. (2024). Qualitative approaches to voice UX. ACM Computing Surveys. https://doi.org/10.1145/3658666 Cite
Seaborn, K., Sawa, Y., & Watanabe, M. (2024). Coimagining the future of voice assistants with cultural sensitivity. Human Behavior and Emerging Technologies, 2024, e3238737. https://doi.org/10.1155/2024/3238737 Cite
重善飯塚. (2024). サービスデザイン教育への倫理的観点の導入 大学のデザイン授業での試み. 研究報告インターネットと運用技術(IOT), 2024-IOT-64(8), 1–8. https://ipsj.ixsq.nii.ac.jp/ej/index.php?active_action=repository_view_main_item_detail&page_id=13&block_id=8&item_id=233028&item_no=1 Cite
Nakamura, M. (2024). The formation of the norm of gendered first-person pronouns in Japanese. KGU Journal of Business and Liberal Arts, 4, 21–47. Cite
Lieber-Milo, S., Amichai-Hamburger, Y., Yonezawa, T., & Sugiura, K. (2024). Cuteness in avatar design: A cross-cultural study on the influence of baby schema features and other visual characteristics. AI & SOCIETY. https://doi.org/10.1007/s00146-024-01878-3 Cite
拓海髙久, & 聡史中村. (2024). Web上での繰り返し選択実験における単調さが不適切な慣れに及ぼす影響. 情報処理学会 研究報告コラボレーションとネットワークサービス(CN), 2024-CN-121, 1–7. https://dl.nkmr-lab.org/papers/495 Cite
繁樹大山. (2024). 消費者799人に聞いた「ダークパターン」の実態・意識調査 46.1%に被害経験あり 問われる企業の倫理観. Nikkei design = 日経デザイン, 439, 72–77. https://cir.nii.ac.jp/crid/1520299061015646208 Cite
Lu, Y., Zhang, C., Yang, Y., Yao, Y., & Li, T. J.-J. (2024). From Awareness to Action: Exploring End-User Empowerment Interventions for Dark Patterns in UX. Proc. ACM Hum.-Comput. Interact., 8(CSCW1), 59:1-59:41. https://doi.org/10.1145/3637336 Cite
Krauss, V., Saeghe, P., Boden, A., Khamis, M., McGill, M., Gugenheimer, J., & Nebeling, M. (2024). What Makes XR Dark? Examining Emerging Dark Patterns in Augmented and Virtual Reality through Expert Co-Design. ACM Transactions on Computer-Human Interaction. https://doi.org/10.1145/3660340 Cite
Gray, C. M., Santos, C. T., Bielova, N., & Mildner, T. (2024). An Ontology of Dark Patterns Knowledge: Foundations, Definitions, and a Pathway for Shared Knowledge-Building. Proceedings of the CHI Conference on Human Factors in Computing Systems, 1–22. https://doi.org/10.1145/3613904.3642436 Cite
Schäfer, R., Preuschoff, P. M., Röpke, R., Sahabi, S., & Borchers, J. (2024). Fighting Malicious Designs: Towards Visual Countermeasures Against Dark Patterns. Proceedings of the CHI Conference on Human Factors in Computing Systems, 1–13. https://doi.org/10.1145/3613904.3642661 Cite
Wong, N., Jeong, S., Reddy, M., Stamatis, C. A., Lattie, E. G., & Jacobs, M. (2024). Voice Assistants for Mental Health Services: Designing Dialogues with Homebound Older Adults. Proceedings of the 2024 ACM Designing Interactive Systems Conference, 844–858. https://doi.org/10.1145/3643834.3661536 Cite
Sanchez Chamorro, L., Lallemand, C., & Gray, C. M. (2024). “My Mother Told Me These Things are Always Fake” - Understanding Teenagers’ Experiences with Manipulative Designs. Proceedings of the 2024 ACM Designing Interactive Systems Conference, 1469–1482. https://doi.org/10.1145/3643834.3660704 Cite
Sánchez Chamorro, L., Toebosch, R., & Lallemand, C. (2024). Manipulative Design and Older Adults: Co-Creating Magic Machines to Understand Experiences of Online Manipulation. Proceedings of the 2024 ACM Designing Interactive Systems Conference, 668–684. https://doi.org/10.1145/3643834.3661513 Cite
猛新村, 良介一刈, 隆史大隈, & 修一大浦. (2024). 配膳ロボットシステム導入による飲食サービス業の労働生産性改善に関する研究. 日本経営工学会論文誌, 74(4), 167–176. https://doi.org/10.11221/jima.74.167 Cite
Wang, Y., & Seaborn, K. (2024). Kawaii computing: Scoping out the Japanese notion of cute in user experiences with interactive systems. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 210. https://doi.org/10.1145/3613905.3651001 Cite
Social Science Statistics. (2024). P Value from Chi-Square Calculator. Cite
Fujii, T., Seaborn, K., & Steeds, M. (2024). Silver-Tongued and Sundry: Exploring Intersectional Pronouns with ChatGPT. Proceedings of the CHI Conference on Human Factors in Computing Systems. https://doi.org/10.1145/3613904.3642303 Cite
Social Science Statistics. (2024). P Value from Chi-Square Calculator. Cite
Wang, Y., & Seaborn, K. (2024). Kawaii computing: Scoping out the Japanese notion of cute in user experiences with interactive systems. Extended Abstracts of the 2024 CHI Conference on Human Factors in Computing Systems, Article No. 210. https://doi.org/10.1145/3613905.3651001 Cite

Independent

Discovering and Dismantling Dark Patterns in Everyday Interfaces

Dark patterns and deceptive designs (DPs), the tricky and coercive user interface elements found in everyday digital products, are a societal, economic, and ethical challenge. As a PRESTO・さきがけ fellow, I aim to untangle the nature of DPs in Japan, discover how are they perceived by professionals and the public, and explore how they can be redressed.

ダーク・パターンや欺瞞的デザイン(DP)は、日常的なデジタル製品に見られるトリッキーで強制的なユーザー・インターフェース(UI)要素であり、社会的、経済的、倫理的な課題である。さきがけフェローとして、私は日本におけるDPの本質を解き明かし、専門家や一般の人々がDPをどのように受け止めているのかを発見し、DPの「影」をどのように是正することができるのかを探ることを目的とする。

Timeline

October 2024 to March 2028

Principal Investigators & Collaborators

Prof. Katie Seaborn (Science Tokyo)

Funding & Web

JST PRESTO・さきがけProject Website

Discovering and Dismantling Dark Patterns in Everyday Interfaces
Kawaii Vocalics

Collaboration

Kawaii Vocalics

This project will focus on the novel concept of kawaii vocalics. The two research trajectories are: (i) what is the nature of kawaii vocalics compared to kawaii visuals, which comprises almost all work on kawaii science so far (theoretical extension); and (ii) what emotions and behaviour do kawaii voices elicit compared to kawaii visuals (methodological extension).

このプロジェクトでは、「カワイイ・ヴォーカリクス」という新しい概念に焦点を当てる。研究の軌跡は以下の2つである: (i)これまでのカワイイ科学に関する研究のほとんどを占めるカワイイビジュアルと比較して、カワイイ・ヴォーカリックスの本質とは何か(理論的拡張)、(ii)カワイイビジュアルと比較して、カワイイ・ヴォイスはどのような感情や行動を引き起こすのか(方法論的拡張)。

Timeline

April 2024 to March 2028

Principal Investigators & Collaborators

Prof. Katie Seaborn (Science Tokyo)
Prof. Mayu Koike (Science Tokyo)
Dr. Jun Kato (AIST)

Funding & Web

JSPS Grants-in-Aid for Scientific Research B (KAKENHI Kiban B)

Collaboration

Aromanoidics

We will explore people's mental models of robot scent. To this end, we will conduct exploratory human subjects research on scent-to-robot matching and controlled experiments of different scents for different robots. This work is sure to spark research on robot aroma and olfactory interaction. The results may be used in the design of robots that work closely with people, such as in the workplace, in the home, as (aroma)therapeutic robots, and in customer service settings, especially at storefronts.

ロボットの香りに関する人々のメンタルモデルを探る。そのために、香りとロボットのマッチングに関する探索的な人体実験と、さまざまなロボットにさまざまな香りを適用する対照実験を行う。この研究は、ロボットの香りと嗅覚インタラクションの研究に火をつけるに違いない。この成果は、職場や家庭、(香り)治療ロボット、接客(特に店頭)など、人と密接に働くロボットの設計に活用されるかもしれない。

Timeline

June 2023 to June 2024

Principal Investigators & Collaborators

Prof. Katie Seaborn (Science Tokyo)
Prof. Gentiane Venture (The University of Tokyo)

Funding & Web

16th Shiseido Female Researcher Science Grant

Aromanoidics
Voice Against Bias

Independent

Voice Against Bias

We will explore the use of "elder" voice assistants as a novel method of reducing negative cognitive biases like implicit ageism. Cognitive biases are natural functions of the human mind that are influenced by the external world in positive and negative ways. Through co-design methodologies, intergenerational user studies, and long-term "in the wild" evaluations, we will examine whether voice assistants with older adult voices can shift biases in prosocial directions.

暗黙のエイジズムのような否定的な認知バイアスを軽減するための新しい方法として、「年長者」の音声アシスタントの使用の研究。認知バイアスとは、人間の心が持つ自然な機能であり、外界の影響を受けてポジティブにもネガティブにも変化するもの。共同デザイン手法、世代間のユーザー研究、および長期的な「イン・ザ・ワイルド」評価を通じて、高齢者の声を持つ音声アシスタントが偏見を向社会的な方向にシフトできるかどうかを検証する。

Timeline

April 2021 to March 2025

Principal Investigators & Collaborators

Prof. Katie Seaborn (Science Tokyo)

Funding & Web

JSPS Grant-in-Aid for Early-Career Scientists (JSPS KAKENHI Wakate)

Collaboration

Project Elemi

Our goal is to create and study Elemi, an “exoskeleton for the mind.” Elemi will be an AI-based intelligent support system designed to augment metacognition in everyday situations. Built with and for the public, it aims to help people with a range of everyday challenges in the information age.

本プロジェクトの目標は,心の外骨格「エレミ」を開発し研究することである。エレミは,日常的な状況におけるメタ認知を増強するためのAIベースの知的支援システムである。情報社会における日常の課題について人々を支援することがねらいである。

Timeline

September 2020 to March 2022

Principal Investigators & Collaborators

Prof. Jacqueline Urakami (Science Tokyo)
Prof. Hiroki Oura (Science Tokyo / Tokyo University of Science)
Dr. Yeongdae Kim (Project Researcher, Science Tokyo)

Funding & Web

DLab Challenge Grant

Project Elemi