屏幕上的生活

作者:斯坦福大学沟通部的博士候选人和Scopomics Lab成员的博士学位。

走入李解释说人类剧情项目斯坦福大学(Stanford University)的一个跨学科研究项目,通过实时追踪人们在屏幕上看到和做的一切,制作并分析一个人的数字体验的综合记录。Jihye讨论了这种跨学科的努力如何有助于捕捉反映在屏幕上的广泛生活体验,并为社会科学家、用户和决策者提供关键的机会。

主要研究人员:布莱恩·里夫斯、尼兰·拉姆和托马斯·罗宾逊


由于技术对我们所做的一切变得更加积分,我们在智能手机和计算机等屏幕前花费的时间继续增加。屏幕时代的普遍性提高了研究人员,政策制定者,教育工作者和医疗专业人员对数字技术对福祉的影响的担忧。尽管对数字福祉产生了越来越担心,但科学家对科学家来说,衡量我们习惯如何通过我们的屏幕驾驭数字景观是一项挑战。例如,尽管调查了受访者的最佳努力,但仍然有充分的报告媒体使用的自我报告通常是不准确的。只要了解在各个应用程序上花费的屏幕时间都没有完全捕捉一个人的数字设备的使用。有些人可以在YouTube看着人们玩电子游戏的时候花一个小时,而其他人可能花费相同的时间观看深夜电视谈话表演,以了解最新的新闻。即使屏幕时间与相同的应用程序相同,某些类型内容的意图和消耗的值也可以在用户中大不相同。 

斯坦福大学的人体剧情项目通过集体努力进行弥合这一差距,为人们看到和在他们的屏幕上看到并做的一切。简而言之,研究软件在参与者手机的背景中运行,并在每5秒内每隔5秒拍摄电话屏幕上出现的所有内容的屏幕截图。在延长时期收集的密集型横截面截图捕获了在我们的屏幕上反映的生活经验,解锁了帮助促进个人在数字设备上独特经验的新的研究循环的新的数据来源的宽度。在这篇文章中,我将解释人类剧情方法如何了解一个人的数字经验,以及社会科学家,用户和政策制定者的关键机会。更好地了解数字媒体使用可以使个人用户能够以适应他们的需求和对人们的类型的方式负责他们的技术使用,并提供人们实际上是暴露的,确保更知情,准确,以及相关的研究和政策制作。

screenomes:示例,数据收集和数据安全性

人类屏幕组项目利用跨学科的科学,通过实时跟踪人们在智能手机上的每一个部分,来生成一个人的数字体验的综合记录。由于基因组学试图了解一个人的独特特征的结构、功能和表达,个人的数字体验通过屏幕截图图像序列(“screenomes”)和随后的分析心理、认知和行为维度从数字记录中提取。 

例子

以下是一个人的智能手机使用的样本视频,由人体筛网综合体方法收集。该视频的屏幕图像代表了一个人在大约两个小时的一天(通过用户许可共享)的一个人使用的15分钟。它展示了数字内容是彻底多样化的,并且用不同的内容分段为序列,其中个人屏幕上的平均任务仅持续秒。例如,用户从消息传递到音乐播放器到手机设置,然后在35秒内返回消息传递。

请注意。颜色栏代表不同的手机应用类型。颜色条外侧的“fuzz”表示每个截图上的字数与最大字数的比例(视频由Sarah Chey制作;斯坦福大学屏幕组学实验室的Nilam Ram制作的可视化,https://screenomics.stanford.edu/

数据收集

智能手机截屏的基本流程如下。当志愿者表示对我们的研究感兴趣并同意隐私和安全协议时,他们将被要求在手机上从谷歌Play Store下载研究应用程序。然后,当应用程序在后台运行时,参与者只需像往常一样使用他们的设备。研究应用程序仅以一个小图标的形式出现在屏幕上,以尽量减少对参与者手机使用的干扰。因此,屏幕集是不引人注目的,并且出现在自然环境中。通过智能手机设备的不同模式,研究人员已经开发出与各种Android设备兼容的研究软件,并从广泛的人口统计数据中收集了大量的智能手机屏幕,包括全国代表性的家庭样本,青少年,以及美国和全球(包括中国和缅甸)的低收入人群。

数据安全

FinteMes已收集并根据严格的数据安全性和隐私协议进行加工,包括在安全的研究服务器上加密和存储。通过大学审查和批准的程序。获得原始截图图像的访问受到有限数量的大学研究人员,他们已经完成了研究道德教育,并经过认证以进行人类受试者的研究。研究人员监控数据丢失预防数据。

社会科学家如何使用屏幕

屏幕可以详细分析个人日夜在不同情况下对智能手机的独特使用情况。在这里,我将使用从两个青少年收集的智能手机屏幕的例子,涉及一些选定的功能Reeves, Robinson, & Ram, 2020年 。

会话

屏幕组分析有助于理解一个人一天中数字体验的时间模式每时每刻的变化。下图显示了智能手机屏幕在每个5秒间隔内是否打开,而柱状图的颜色代表了在每个间隔内使用的不同类型的应用程序。这些小组强调了智能手机的使用在两个人之间有很大的差异,以及每个人在几天或几个小时内的差异。当一个会话被定义为屏幕亮起和再次变暗之间的间隔时,顶部的参与者a有更多和更短的会话,每个会话平均持续1.19分钟。处于底部的参与者B的测试次数更少、时间更长,平均每次测试持续2.54分钟,并且在下午和晚上比参与者A更频繁地使用智能手机。

资料来源:斯坦福大学屏幕学实验室Nilam Ram, https://screenomics.stanford.edu/sample-screenome-analysis-2/

智能手机21天的两青少年来源:尼尔姆RAM,Stanford ScurloMics Lab,https://screenomics.stanford.edu/sample-screenome-analysis-2/

请注意。应用程序被编码成10个类别

请注意。应用程序被编码成10个类别

应用程序使用

该研究软件每5秒截屏一次,当用户切换到一个新的应用程序时就会记录下来。这些应用程序日志说明了个人如何浏览不同的平台和参与不同的内容(例如,娱乐,新闻故事,对话)。例如,当我们放大从晚上10点(左)到午夜(右)的两个小时时,参与者a在前15分钟快速切换不同类型的应用程序,然后主要使用社交媒体(橙色;主要是Snapchat和Instagram)。对于参与者B,观看YouTube的时间延长了(紫色),然后在最后30分钟内快速切换并产生大量内容。 

文本

从屏幕中提取的文本还可以帮助研究人员探索语言使用背后的情感和认知维度。通过自定义的OCR模块,截图图像首先从RGB转换为灰度,解析为二进制对应(即黑色和白色),并分类为文本块和图像块。文本的结果集合可以通过自然语言处理方法进行进一步分析。

屏幕ome的机会 

用户

屏幕的分辨率和全面性可以帮助用户更好地了解自己的智能手机使用情况,并平衡使用,以增强自己的数字幸福感。我们的研究之一表明筛查中反映的药物和疾病相关信号与糖尿病有关。这个例子说明了屏幕组参数可以更好地跟踪健康状况,最终促进更健康的生活方式。对每个屏幕上反映的情绪进行细致的分析,也有助于更好地理解用户与内容相关的情绪状态,促进心理健康。受这些发现,一群博士在斯坦福大学人类Screenome工程分公司一直致力于创建一个用户友好的仪表板基于Screenome分析希望授权用户提供更准确的描述他们的智能手机使用,帮助他们更好的平衡他们的生活——他们被授予2019-2020 Brown媒体创新研究所的魔法授权

政策的好处

虽然从移动设备中提取的大量信息引起了隐私和监视等政策关注,但当这些信息用于研究和符合用户利益时,屏幕经济学可能帮助决策者有效地保护在线公民。例如,政策制定者可以了解消费者是如何通过不同渠道(如短信、机器人电话、电子邮件和社交媒体广告)受到虚假声明或欺诈内容的影响。这有助于制定更有效的政策,制止网上不公平和欺骗行为,保护弱势群体。

在这篇文章中,我概述了屏幕经济学分析可以提供的令人兴奋的机会——从推动知识前沿到为用户和决策者提供见解。

关于

走入李

李智惠,斯坦福大学传播系博士研究生,屏幕组学实验室成员。她的博士论文探讨了技术领域的不平等问题,基于屏幕组学的分析,关注弱势群体如何在数字环境中生存。这篇博客文章是基于题为“屏幕组学:理解数字空间信息不平等的新方法(作者:Jihye Lee, James T. Hamilton, Nilam Ram, Thomas Robinson, Byron Reeves)