
交互设计、增强现实AR、虚拟现实VR
Intro: The major of digital media design in the school of design of NUA focuses on the research of interactive media art, video media art and digital image art. We explored various possibilities of the intersection of science and art, such as the application of digital media in the space environment, the interactive design in the protection of cultural heritage, interactive media application of scientific information visualization. Our works reflect the characteristics of integration, cross-border and experimental.
作 者 / 郄立云 指导老师 / 童 芳 关键词 / 数据可视化 参与式文化 情感设计 Web2.0参与式的网络环境,每个人都拥有属于自己的发声渠道,但也因此为网络暴力的产生提供了温床。网络暴力作为网络社交中一种极具伤害性的暴力方式,因网民的不断参与,发展态势愈演愈烈。 课题围绕网络暴力这一主题展开,将网络暴力相关数据进行可视化呈现,探索数据的情感化表达形式,展现受害者的内心情感变化,让人们意识到网络参与、网络围观的强大力量,以此反思自身网络社交行为。 01 背 景 02 相关研究 03 案例分析 04 数据可视化的情感设计 05 教师点评 01 背景 现阶段自媒体的普及和社交应用的发展,让每个人都可以在公共平台中发声,但是与传统媒体相比,新媒体虽为大众提供了可以发表言论的平台,但是由于用户文化水平的不同,导致信息输出质量降低,而网络的匿名性也让用户们更加“畅所欲言”,虽然网络暴力已经引起越来越多国家的关注。但由于网络作为新生事物,且涉及范围较广,内容较丰富,相应的法律法规仍然存在疏漏,至此,网络暴力仍未网络社交中的一大难题。 联合国用善意终结网络暴力公益广告 本课题的目的在于通过设计研究,展现出网络暴力对当事人产生的中内心创伤,呼吁人们关注自身网络社交行为,认识到网络参与、网络围观所产生的强大力量,从而提升网络素质,营造良好网络环境。 02 相关研究 1.群体概念与参与式文化 社会学科为群体概念进行了详细的定义,即社会群体是人们通过某种社会关系联结起来进行共同活动和感情交流的集体。 亨利·詹金斯最早在《文本盗猎者:电视粉丝与参与式文化》一书中提出”参与文化“。在数字化时代到来以前关于参与的研究中,“参与”指的是成为共享的社会实践的一部分。当人们有共享、传播的这一行为便可将其定义为参与。在参与式的网络社交环境中,网名在社交平台的点赞、评论、转发这一系列的将信息分享给大众的行为可称其为参与行为。网络暴力事件的发生与网民的参与行为密不可分。 2.网络群体心理 古斯塔夫·勒庞在《乌合之众:大众心理研究》中指出,群体中的个人会被群体的情绪和行为所感染。而情绪的高涨往往会使得群体脱离理性,呈现出无意识的行为。在互联网的环境中更明显的呈现出以下几种特征: 1.群体成员更容易轻信。互联网碎片化的信息接收,更易让网民只看到事件表象就开始口诛笔伐。 2.群体中成员的情绪更明显的呈现出夸张和单纯的特点。在群体热议的氛围中,不自觉听信,陷入群体感情的狂暴。 3.群体情绪是多变的。群体中的个人表现出非常明显从众心理。个体借助“数量即正义”之名,作出不负责任的行为。 03 案例分析 美国社会活动家莫妮卡·莱温斯基针对网络暴力这一社会现象推出了《The Epidemic》广告片,与以往广告片的不同在于,广告片设置了互动环节,让用户参与其中。在影片中间提示观众输入自己的手机号码,探索故事更多的信息,并且在观看更多信息的同时,活动方会向输入的手机号发送带有语言暴力的信息,让观众亲身感受遭遇网络暴力时的心情,真切了解到网络暴力对受害者的影响。使观者更易产生情感上的共鸣。 《The Epidemic》广告片 04 数据可视化 的情感设计 根据微博热搜的话题热议程度,以及社会性、典型性和大众熟知度,网络暴力数据可视化围绕以下六个事件展开设计: ■ 四川德阳安医生 ■ 陕西榆林孕妇坠楼 ■ 袁姗姗无端被黑 ■ 周琦扣篮未进 ■ 网红saya殴打孕妇 ■ 武汉新冠肺炎疫情 区别于以往相对理性的数据可视化,网络暴力这一主题下的数据可视化更注重情感层面的表达,即从网络暴力事件当事人角度,可视化将其在网络暴力过程中无助、无奈的情感进行呈现,从设计者角度,将事件中的人与物的关系进行梳理并转化为图形,呼吁人们对网络暴力引起重视,从观者角度,希望能够通过此种表现形式令观者产生情感上的共鸣,以此达到情感化设计研究的目的。 设计亮点 数据向图形的转化 网络暴力数据可视化的设计亮点在于视觉图形设计以及数据的转化。 视觉图形方面 基于网络信息碎片化呈现的现状,将碎片化的这一特征与图形进行结合,将相关的人与事凝炼为情感化的图形符号,将其作为基础图形。 数据的转化方面 数据采集器从微博平台获取大众与事件互动的真实数据,并将数据值转化为对基础图形的“干扰与破坏”,发帖量、转发量、评论量、点赞量分别对应一种图形效果,图形最终变形至不可辨识。因数据较为庞大,所以通过等比例缩放的方式进行数据表现,因每个事件的数据差异不同,所以选择的比例尺不能一概而论,针对每个事件的数据,需要采取合适的比例尺(以上涉及数据表格详见文末)。 「四川德阳安医生网络暴力事件」 「陕西榆林孕妇坠楼网络暴力事件」 「袁姗姗网络暴力事件」 「周琦扣篮未进网络暴力事件」 「网红saya和孕妇网络暴力事件」 除去网络暴力事件外,还增加了武汉新冠肺炎疫情的内容,在国家的危难时刻,全国人民心系灾区,共同对抗疫情。在疫情事件中选取确诊人数、死亡人数、医疗救援人数、医疗人员感染人数四组数据进行表现,展示对抗新冠肺炎疫情之艰。 「武汉新冠肺炎疫情事件」 05 教师点评 作品关注了全民媒体时代背景下的个体情感,通过动态视觉设计让大众替代性感受个人在网络暴力下可能面对的深层影响与持续性创伤。当公共平台的客观信息与个人私密情绪表达、真实与数字社区的边界日益模糊之际,这件作品提醒我们,每一位网络事件的旁观者同时也是参与者,在传播信息的同时以各种方式给“元信息”附加、创造了新的信息,而累积、迭加后的数据所具备的能量非普通人所能抗衡,当参与的众人散去,对当事个体的“精准”攻击始终留有印记。作品将真实采集的数据以影像符号的破碎过程展示,所有旁观者/参与者的行为不再被隐匿,而是被表征,从而呼吁每个网络用户反省自我、自律情绪。 滑动查看更多图片
设计/谭智涛亮点/三维影像、沉浸式体验指导教师/童芳简介 此作品以人体细胞作为切入点进行探索,来表现出人体的生命活动进程。作者希望人们通过游戏娱乐的方式,带给观众沉浸式的视觉体验,轻松了解基本的生物学知识,进而对人体生理健康的情况有着更加深刻的理解。 作者通过三维建模,从微观的角度进行再创作。其中主要包含以下几个场景:分别是基因配对,物质交换,能量传送以及细胞分裂。每一场景以艺术的手法展现出科学之美,同时向大众传递出简单的生物学知识。 亮点 作品通过三维的语言来呈现人体内部物质的形态,伴随动画的展示带来沉浸式的观赏效果,吸引观者的好奇心。人们可以共同参与到自然科学的探索当中。 图形 主场景的视觉风格以白色调为主,没有额外的装饰。在整体氛围上,清晰明了,简洁直白,给人以视觉上的冲击力。配合动画的演示,主体对象给人以新奇的感觉。 影像 在影像创作的过程中,作者通过对内在物质不同颜色材质的尝试与探索,赋予其不一样的质感和影像效果,力求达到沉浸式的观赏体验。 终 本作品目的在于如何将细胞内部的生理进程通过艺术视觉化呈现,将科学之理融入艺术之美,以一种简单易懂的方式,将复杂的科学信息传授给群众。游戏是一个很好的形式,它能很好地吸引大众的好奇心,在玩的过程中学到有趣的内容。此作品更加注重的是玩家的探索过程,因为科学本身就是一个不断试错的过程,充满了挑战性和不确定性。此作品基于生物学知识对细胞的内容进行主观化视觉设计,能很好地激发用户的好奇心和强烈的探索欲望,避免深奥的科学知识引起人们的担忧与害怕。
豌豆的基因乐园 设计/杨雅竹亮点/ iPad互动游戏、Kinect空间交互指导老师/童芳简介 这是一款针对青少年用户的APP,以游戏形式阐述了遗传学奠基人孟德尔提出的基因分离定律和自由组合定律。基因支持着生命的基本构造和性能,环境和遗传的互相依赖,演绎着生命的繁衍的重要生理过程。 作品分为游戏和科普两大环节,游戏部分展现了一个自然生长的植物世界,六个场景中的豌豆基因形象创作为抽象的豌豆角色,用户通过将可爱动感的“豌豆人”进行配对,学习基因分离定律和自由组合定律。科普部分与游戏部分的活泼色调不同,画面强调真实感,向用户传递准确的科普信息。 亮点 在展示形式上,除了基于ipad的交互游戏,Kinect的跨屏幕的投影交互形式增强了游戏的娱乐性。《豌豆的基因乐园》旨在用娱乐游戏的方式科普豌豆的基因自由组合定律和基因重组定律,Kinect通过动作捕捉,使投影屏幕上的豌豆人作出相应的动作,以投影交互形式加深参与者对豌豆基因的印象。 图形 孟德尔实验主要通过对豌豆进行实验,在场景设计的构思上选择植物元素营造一个唯美的植物空间,以可爱的形式打破传统人们对于孟德尔的豌豆实验的印象,通过对豌豆元素的再创作创造出呆萌可爱的豌豆人的形象,增强画面的趣味性。 交互 iPad的游戏部分包含拆分重组、信息呈现、气泡功能、配对等交互功能,其中配对功能中详细的展现了豌豆的基因自由组合和分离定律。借助ipad自身的性能调动用户的视觉、听觉,打破传统科普的简单形式。 终 《豌豆的基因乐园》力求将复杂的知识系统化、娱乐化,达到有效地教育作用。在决定设计方向为孟德尔的豌豆实验后,便进入了调研阶段, 由于设计方向具备较强的学术性,传统的科普方法一定是事倍功半的,对于艺术设计而言也毫无意义,因此将科普与娱乐相结合成为设计的关键方向。在科普部分的内容比较简洁,基于需达到较好的科普效果,游戏部分丰富的图形设计以及色彩更易吸引用户。
作 者 / 许冉冉内 容 /《针对听障人士的交互设计研究》 移动医疗APP设计—医声 手语动态海报—Sign Language指导教师 / 童 芳 该课题为针对听障人士的交互设计研究。通过相关的理论阅读与设计案例分析,总结出针对此类人群生理、心理和差异性特征,以及适合的交互设计方法与策略。此外,设计实践内容为针对听障人士的移动医疗应用和针对普通人的手语动态海报,让设计与日常生活的贯通,引发公众对听障人士的关注。- 引言- 相关理论和技术- 案例分析- 听障人士交互设计方法探析- 交互设计实践引言 信息技术的发展,给人们带来更加便捷、更加智能的生活方式和服务体验。各类特殊人群同样经历着科技发展的变革。交互设计为其提升生活质量,更好的融入社会生活具有重要意义。 论文《针对听障人士的交互设计研究》以听障人士为交互设计的研究对象,通过文献阅读、案例查找、问卷调查、设计实践等方式,发现听障人士在生活中的痛点和需求,归纳总结出相关的设计案例,为针对此类用户的交互设计提出一些建议和设计思路。相关理论和技术 听障人士的认知特征1. 知觉的缺失2. 视觉的发展3. 基于手语的交流方式 听障人士生理上的特征是听觉信息的缺失、视觉的补偿发展和基于手语的交流方式。他们听觉功能上的障碍,对声音的感知较弱,所以更加依赖用眼睛去观察身边的事物,大约90%的外界刺激输入来自于视觉,手语是基于视觉的传达信息和交流情感的语言。适合听障人士的交互设计理论1. 信息无障碍设计 2. 感官代偿理论3. 以用户为中心的设计4. 情感化设计 信息无障碍设计指利用现代信息技术手段,满足所有人无障碍的获取信息的需求。感官代偿设计是根据用户生理机能的特殊需求,选择和强调感官代偿的方式,使得产品不仅能被用户理解,还能锻炼他们的感官代偿功能。1986年唐纳德·诺曼提出的以用户为中心的设计对于特殊人群同样也是适用的,产品的设计要满足用户的需求和使用经验。最后强调用户情感要素在产品开发中的作用和价值。 适合听障人士的人机交互技术 1. 多点触控技术 2. 语音识别技术 3. 手势识别技术 4. 虚拟现实交互技术 在人机交互技术方面,基于屏幕端的多点触控技术,是目前市场上主流的交互技术手段。语音识别技术实现了语音和文本之间的无缝转化,改善听障人士和普通人之间的交流处境。手势识别技术可以极大的应用在手语的交流中,是趋向于自然的交互形式。虚拟现实技术能够提供沉浸式的互动体验,目前更多的是视觉的包围,也是适合这类人群的人机交互技术。案例分析 根据前期的调查和资料的收集,整理和归纳出三大类适用于听障人士生活的交互设计方式:- 基于触控式交互的无障碍设计- 基于手势识别技术的手语识别设计- 基于虚拟现实技术的教学设计以下是一些案例分享:Deaf 杂志 德国《Deaf》杂志是针对听障人士所发行的期刊杂志,该杂志结合了手机和平板 APP应用,用户扫描书中的图像或者单词,移动端便会出现手语视频介绍,符合听障人士的认知习惯,实现手势语与书面语无障碍的连接。 Apple 官网 美国Apple公司的产品为残障人士提供了许多创新的解决方案,将辅助技术作为标准功能内置于产品之中,其辅助功能涉及到听觉障碍、肢体残疾、视觉障碍等人士的需求。以下是以苹果iPhone产品中针对听障人士的一些辅助功能选项。- Made for iPhone助听器- FaceTime- 视觉和振动提示- 键入以使用Siri- 隐藏式字幕Assistant Glasses Set眼镜 Assistant Glasses Set辅助眼镜是一款为听障人士提供日常生活服务的产品,该产品的亮点是将声音可视化,并以震动的形式提示听障人士声音的来向,其获得2017iF金质奖。 手语识别设备对比图 数据手套的优点是识别的准确率较高,能够识别的动作较多。缺点是这种输入设备价格比较昂贵,便携性差,在视觉上也不太美观。基于视觉的手语识别可以解放用户的双手,但容易受环境的干扰,目前识别率较低,开发难度大。 MotionSavvy 听障人士交互设计方法探析 听障人士交互设计的特征:- 基于听障人士生理上的感官障碍需要加强视觉与触觉的可感知性,弥补听觉信息的缺失。- 针对听障人士心理上的特征,确保产品的使用能够保护用户的隐私和操作安全。- 对于差异性特征,交互产品要简单、易学、易用,减少用户记忆负担,并提供高效精准的服务。 “用户体验之父”唐纳德·诺曼:只有当设计模型与用户模型相吻合时才能使系统表象被用户接受,设计师才能设计出用户满意的产品。 听障人士交互设计的方法考虑到用户生理上的特殊性、满足用户的产品使用经验和心理需求以及在不同场景下产品的适用性。-----------------------------------------------------------------------------------------------------------------------------------------交互设计实践 医 声 听障人士在公共场合中难免要与普通人接触,那么沟通方式将是影响社交体验的障碍,所以设计实践选取医院作为目标用户交互的场景,设计一款针对听障人士的移动医疗应用,目的是改善患者与医生的交流困境,提升听障人士医疗就诊体验。 《医声》APP导航分为首页、问诊和我。首页的内容主要是一些常规的线上医疗服务,如预约挂号、查找医院、预约手语翻译等。问诊的模块结合了四种问诊方式,包括:图文问诊、实时语音、视频问诊和手写板,把听障人士的沟通需求整合到产品设计中。第三部分是针对用户个人信息的管理。 《医声》产品定位是一款能够帮助听障人士快速问诊,整合专业手语翻译和医生资源的移动医疗应用。 -----------------------------------------------------------------------------------------------------------------------------------------Sign Language Sign Language 是手语的意思,这组动态海报是针对普通人群的主题设计。海报对听障人士手语二十六个字母和一些常用词汇的手势形象进行再设计,以动态海报的方式呈现在屏幕端,强调视觉感官,目的是让更多人关注听障人士,增加普通观众学习手语的乐趣,传播手语文化。 此课题的设计,目的是希望社会上更多人士关注听障人士,为丰富相关的理论研究和无障碍设计,利用新媒体、新技术、新设备通过视觉、触觉、听觉等多种感官通道的交互,为听障人士带来多感官的交互体验。为改善听障人士等特殊人群的生活质量和生活水平,实现他们无障碍的健康生活而尽一份力量。
设计:王钰莹VR科学信息交互指导教师:童芳 作品简介 - 这款基于vr的清洁能源主题应用富有教育意义,共介绍了核能、海洋能、太阳能、风能、氢能、生物质能、地热能、水能、飞轮储能九种清洁能源,是基于能源发电原理设计的学习型游戏,用户通过趣味游戏了解九种能源有四种发电原理。视觉风格采用概括提炼的的几何状模型,游戏环节设置了四个游戏场景,分别表现了九种能源利用的方式。运用vr的交互形式,将科学原理与教育相结合,用户可以融入虚拟实验室中,去了解我们生活中所经常用到的清洁能源,去探寻大自然的奥秘。 作品亮点 - 在虚拟环境中,通过VR的体感交互,结合视觉听觉触觉的感官认知,并且加入趣味动效演示,以及简易的交互方式,相对于其他形式的数字化应用,增强了人机之间的交互性,大大提升了人们对于学习科学信息的兴趣,在这类环境下,人们学习了解到了清洁能源的基本原理,也对现社会提倡的减少能源使用,多使用清洁能源的重要性有了一定了解。 场景设计 - 将九种清洁能源发布在四个场景中。场景一包括太阳能、地热能、生物质能;场景二包括海洋能、水能;场景三包括氢能、核能;场景四包括风能、飞轮储能。场景主要呈现各个能源的能量转换方式,通过对科学信息可视化的研究,进行三维化图形设计。场景一:太阳能、地热能、生物质能场景二:海洋能、水能场景三:核能、氢能场景四:风能、飞轮储能场景地图 展示效果 - VR体感交互配合手柄进行操作,可实现选取,抓取,抛,扔等动作,把数字媒体作品与虚拟现实结合,使作品的交互性更强,拉近与用户间的距离,进一步加强用户体验感。
设计:赵雅婷VR科学信息交互指导教师:童芳作品简介- 这是一款基于VR展示的科学信息类教育应用,介绍了生态系统中的物质循环。用户通过它了解我们所处的生态环境如何正常运转,当物质失去平衡造成的危害以及保护环境的重要性。作品展示了碳、氮、硫、磷四种主要物质,代表气体、水、沉积性物质等三大类循环。作者希望用户通过作品中简易的游戏方式,探索自然背后隐藏的奥秘。作品亮点- 在这个数字化的时代,将自然科学的信息与媒体技术相结合,不仅增强了用户的使用兴趣,同时也带来了新奇的感官体验。作品利用VR技术,可分为两种交互方式,一是通过VR头显体验一种异世界的沉浸式感受;二是采用简易的投掷游戏了解物质循环的原理。场景设计- 根据对生态功能的研究,选取了最具代表性的物质作为4个主场景——碳、氮、硫、磷四种物质。这些物质将生态中的大气圈、生物圈、水圈以及岩石圈连接为一个整体。以圆盘式的结构,抽象偏几何的风格为主体。碳场景碳元素是构成生命的基本氮场景氮是许多生物生长过程中的基本元素硫场景硫是生物必须的大量营养元素之一磷场景磷是植物主要营养元素之一展示效果- 基于手柄操作,影像投影实时输出VR头显中的图像,为没有参与到体验中的观者营造一种沉浸式体验。