以技术为核 打造全球影响力:
GAC 的演变过程
GAC前身为Google Art Project (GAP) ,是Google于2011年2月1日上线的一个艺术平台。 在上线初期,GAP只打通了17家博物馆,但包括最知名的MoMA和Tate,于是迅速引发关注。 Google借助其搜索、地图、地理定位服务优势,使用街景360度全景图技术,呈现博物馆的内外景观,让用户能随时随地进行线上参观,打造交互体验; 使用其超高像素镜头,发布高像素名画,缩放功能 (micro-scope view) 让用户可以仔细贴近艺术作品详细观摩,因为“十亿像素级图片”可以提供画布的纹理、笔触、灰尘等面对原作时肉眼难以发现的细节,革新艺术观看方式。 Google又与联合国科教文组织合作,使得这一技术在世界文化遗产地开始使用,游客也可以经由Google上传遗产地的实景照片。
2016年GAP更名为GAC,通过网站、手机APP、YouTube等平台进行多元呈现。 作为一个非盈利计划,GAC的定位或者说目标在于“上线全世界的文化艺术,带给每一个人”,力图打破地理的限制,建立全球数字博物馆,实现全人类文化财富的资源开放与共享,目前收录了八十个国家超过两千多家博物馆和艺术机构的逾六百万件艺术藏品。 它的目标用户,一类是合作伙伴,也就是全球主要的博物馆和艺术机构; 一类是普通受众,也就是受过高等教育的城市中产阶级和艺术研究者,对艺术和遗产有一定兴趣和认知。
而对于Google来说,搭建 GAC意在通过不同的创意计划“来提升Google的品牌和创新能力” [2] 。 也就是说,在对全球艺术和文物进行数字化保存之外,GAC的主要作用是为Google搭建文化和科技的新桥梁,同时吸引用户通过创意的方式参与到这一过程中。 虽然不通过GAC直接获利,但这种模式既提升了Google的公众形象,加强了Google与各国公共文化事务的连结,也帮助其搭建了庞大的数据库和基于数据库的技术提升。
在过去五年中,GAC通过各种不同的艺术实验,借助包括Google vision AI、Giga pixel AI (超高像素处理) 、Google AR core、Google VR Cardboard、t-SNE数据可视化算法等技术,革新了线上观看和展览的技术与潮流,在全球范围内取得广泛影响力,同时获得对不同国家不同类型文化的推广权和选择权。
2019年GAC中国版本上线,名为观妙中国 (Wonders of China) ,与包括故宫博物院、中央美术学院美术馆在内的四十余家博物馆合作。 但事实上合作力度并不大,比如故宫只收录了19个故事和173件艺术品,相比于故宫浩瀚的藏品来说只是沧海一粟。 虽然在中国的试水不温不火,但无可否认的是, GAC已经是全球最有影响力的数字文化平台,并且不断扩张,获得艺术话语权和全球关注度。
剖析GAC:
优势与可借鉴之处
1、无所不在的全球数字博物馆
上线初期,GAP的功能相对简单,主要通过街景技术拍摄展厅场景、传播高清像素艺术品图片 (各博物馆挑选少量藏品让Google进行70亿像素级Giga Pixel的拍摄) ,同时整合Google map、YouTube等不同的应用程序。 随着十年的发展,GAC的功能越来越成熟多元,致力打造多重感知的沉浸体验和多元艺术内容的超媒介,一个全球超级数字典藏 (digital archive) 平台,一个博物馆的博物馆。 在数字世界中,汇聚全人类的艺术精华,并且提供无时无刻无处不在的艺术体验。
平台有极为强大的分类标签系统,按照作者、风格、时代、色彩、材质等等任意分类都可以检索出优质内容,并且平台会把历史上的艺术事件和艺术风格进行详细专业的解读,因为拥有一批非常稳定的学术和艺术爱好者受众。
GAC展示的主题不仅仅是纯粹的艺术,并且通过艺术与旅游、科技、美食、时尚等产生联动,特别是与各国官方机构联合进行区域文化和旅游推广,打造线上与线下的交互,同时也与Google map等其他程序产生联动。 而这种建构方式,也让Google有超越其他平台的内容优势和庞大的数据库,成为全人类的数字遗产 (digital heritage) 库,Google因此得到更多跨区域的的文化权力和平台权力,打造出极为庞大的数字资产。
2、文化科技融合的应用与提升
GAC成为Google进行文化与科技融合的一个试验场,持续通过技术演进对文化进行分类整合,而庞大的文化数据又帮助Google的数字技术进一步进化,特别是以下几个方面。 同时,Google把自己的文化数字化转向,变成行业标准和最佳案例。
1 / AI
主要是图形AI和强化学习AI。 比如Google vision AI,可以把大量图片迅速分为几千个种类。 Gigapixel AI通过恢复图像中的真实细节来提高放大照片的实际清晰度,这只有通过训练并暴露于数百万张测试图像中才能实现。 平台内的有些小游戏体现了图像分析和强化学习AI的结合,比如auto draw (用户手绘图像,AI会迅速匹配相似的手绘简笔图) 与quick draw (绘图答题游戏) ,就是图像分析与机器学习技术的绘图应用。
2 / AR、VR
GAC在2018年12月推出pocket galley, 这个AR虚拟美术馆是Google用自己的ARCore 以及苹果的ARKit在移动装备上所提供的AR展示技术,号称可以把大师作品放进口袋里随身携带。 ARcore是不需要在装有位置探测和动作追踪双镜头的手机上使用的,是Google对抗苹果ARkit的利器。
通过一些应用程序编程接口,比如说Maps places API,谷歌实验中也不断上线新的AR实验,在不同的场景中展开,比如说AR与绘画、AR与声音的多种实验。
而对VR的应用,主要是通过与Google VR Cardboard、Google Tilt brush和Google Daydream的结合,从软件和硬件层面推动VR技术与艺术的结合。
3 / t-SNE数据可视化算法
Google不仅通过机器学习去分析所有图片/艺术品的视觉相似度,也运用t-SNE算法和机器学习,根据文物的关联程度进行分类,去创建可以导航的互动虚拟空间地图。 GAC通过t-SNE建立了不同视觉效果下的漫无边际的艺术地图,随便点开一张就能看到艺术品及艺术史关联。 如下图,因为数据库极度强大,数据可视化的呈现效果就较为震撼。
3、艺术创意与人工智能的交互
GAC在过去十年已经几乎打通了全球艺术领域,完成了数据库的建设,加下来会加大多元应用和交互体验的探索,也就是谷歌实验 (experiments with Google) 的一系列产品。 在这个过程中,Google借助这些文化数据和文化场景,更进一步提升了技术能力。
最有代表性的探索之一是加强艺术家与人工智能工程师的合作,打造artist+machine intelligence的模式 (也在YouTube上线了关于这个项目简介的详细视频) 。 Google提供尖端开源技术,组织艺术家进驻计划,由艺术家与工程师通过实验创造人工智能与艺术的不同可能,比如通过AI进行艺术创作、写hiphop歌词等等。 而且鼓励用户提交自己的实验,创新、开源是主要的要求。
x度分隔 (x degree of separation) 就是由艺术家和程序员共同打造的产品,同时也是机器学习的实验测试。 这一应用主要引用了六度分隔的理论,只需要六个人就可以连接起两个陌生人,在这个应用中,只要用户选择两张图片,算法会通过视觉相似度,从数据库中找到串联其结构关系的其他图片。 算法可以随时通过海量数据库,给两个毫无关系的艺术建立一些关联,以及分析它们在整个艺术体系中大概处在什么位置。 这种创意与技术的结合,也是一个很好的范本,指引更多不同专业的创意人才与人工智能进行多重合作。
4、游戏化的设计、体验模式
为了更好地吸引用户,GAC一直致力打造互动性与多媒体内容的结合,同时采用游戏化的设计模式。 所谓游戏化设计模式,是指为了让用户停留在游戏中而采取的不同奖励模式,如成就制、关卡制、勋章制等等。 [3] 用户使用GAC的不同功能,就可以获得不同的勋章奖励,比如使用放大镜观赏艺术作品,就可以获得“艺术侦察员”这个勋章; 使用街景功能就可以获得探索者勋章等等。
同时GAC还不断叠加各种互动小游戏和文化实验,特别是一些知识整合的小游戏,比如看图猜作者、根据两张图来比较时代前后等,通常可以吸引用户在网站上停留很长时间。 这些互动游戏也在不断尝试虚拟和现实的结合。 比如笔者经常玩一个叫做街头画廊 (street galleries ) 的游戏,可以通过360度虚拟场景转换,在全球十个城市的街头或者是大楼外部,设置自己喜欢的画作。
2017年之后逐步上线的艺术自拍 (Art selfie) 、艺术填色 (art coloring book) 、艺术拼图 (puzzle party) 等为GAC带来流量激增。 特别是艺术自拍,在社交媒体上引发风潮,成为GAC第一款为大众熟知的交互产品。 用户上传自己的自拍,平台通过人工智能从百万藏品中挑选与该用户最为相似的艺术人像,进行匹配。 现在还有宠物肖像这个产品,上传宠物照片,系统会从海量数据中寻找相似的历史画像。
打造中华数字遗产平台的价值
1、数字文化基础设施
2、中华文明的整合性保存
3、模块化策略以节约成本
4、面向全球的数字化展示
多元协作共助遗产数字化