3D重建曼哈顿街景!谷歌开源Kartta Labs,使用深度学习和众包再现历史街景

  • 时间: 2020-09-19 09:25:51

  新智元报道

  来源:Google

  编辑:雅新

  【新智元导读】谷歌今日启动了 Kartta Labs,可以创建带有可探索时间轴的地图,从历史地图和照片中重建过去的城市。「2020 创新之源大会将于 9 月 22 日在中关村软件园召开,详细信息见文末海报,欢迎报名!」

  穿越到 20 世纪 90 年代,感受一下曼哈顿如何?

  Kartta 能够让我们来一场「光的旅行」。

  谷歌今天开源了 Kartta Labs,这是一个基于 Google Cloud 和 Kubernetes 的开源可扩展系统,可从历史地图和照片中重建过去的城市。

  作为一套工具,Kartta 可以创建带有可探索时间轴的地图,从而使用户可以使用历史上准确的信息填充日期。


地址:https://github.com/kartta-labs

  Kartta:能够在「时间维度」上标记地图

  Kartta Labs 于去年在用于地理知识发现的 AI 国际研讨会上首次引入。

  创作者认为,这样做的动机是组织世界历史地图,同时使其易于使用。历史地图可以帮助识别文化和社会趋势,不仅是公民研究而且是规划和宣传的宝贵资源。

  十多年前,美国前任副总统 Al Gore 曾使用谷歌地球的历史图像显示了极地冰盖的融化。

  Kartta Labs 包含 3 个主要部分:

  1、时间地图服务器,显示地图如何随时间变化;

  2、众包平台,允许用户上传城市历史地图,对其进行地理校正和矢量化(即将其与现实世界中的坐标相匹配);

  3、还有一个即将上线的 3D 体验平台,该平台在地图上运行,通过使用深度学习从有限的历史图像和地图数据重建 3D 建筑物,从而创建 3D 体验。

  Kartta 已经超越了简单的数据收集功能,不仅能够收集数字档案中历史地图,还能够在时间和空间维度上标记地图。

  时间地图服务器显示地图如何随时间变化,而众包平台允许用户上传城市历史地图并将其与真实世界坐标相匹配。还有一个体验平台在地图上运行,通过 AI 重建建筑物来进行 3D 体验。

  众包平台允许用户上传历史地图,手动矫正

  众包平台的切入点是 Warper,Warper 是基于 MapWarper 开源的 Web 应用程序,它允许用户上传地图的历史图像,并通过在历史地图上找到控制点,以及底图上的对应点来对它们进行地理校正。

  用户上传扫描的历史地图后,Warper 会通过从地图中提取文本信息来对地图的地理位置进行最佳猜测。

  其初始猜测将会把地图放在大概的位置上,并允许用户通过在历史地图和参考地图上放置成对的控制点来对地图像素进行参照标记。

  Warper 使用许多开源地理空间库和技术可以像 Ruby on Rails 应用程序进行运行,其中就包括 PostGIS、GDAL。

  它可以将生成的地图导出为 PNG,GeoTIFF 和其他开放格式。

  Warper 还运行栅格图块服务器,该服务器在图块 URL 提供每个已经进行了地理校正的地图。该栅格图块服务器用于编辑应用程序中,将地理校正后的地图加载为背景。


带有时间滑块的 3D 重建曼哈顿切尔西鸟瞰图

  编辑器同样是一个开源 Web 应用程序,它是 OpenStreetMap 编辑器的自定义版本。编辑器补充了 Warper,该工具支持时间维度,并与 Kartta 套件中的其他应用程序集成。

  它允许用户加载经过地理校正的历史地图并跟踪其地理特征,比如,建筑、道路等等。其跟踪的数据以矢量格式存储。

  矢量格式的提取的几何图形以及元数据,例如地址,名称以及开始或结束日期,都存储在地理空间数据库中,可以对其进行查询,编辑,样式化并呈现到新地图中。


3D 重建的曼哈顿切尔西街景

  Kartta 的前端工作方式类似于 Google Maps,但带有用于选择地图年份的时间滑块。移动时间滑块可显示地图中的要素如何随时间变化。

  谷歌即将推出的 3D 模型将重建历史建筑的详细完整 3D 结构,将图像与地图数据相关联,并在存储库中正确组织这些 3D 模型,并将其呈现在具有时间维度的地图上。

  谷歌研究高级软件工程师 Raimondas Kiveris 在博客中写道,「我们开发了这个工具,以促进众包并应对历史数据不足的主要挑战」。

  参考链接:

  https://venturebeat.com/2020/09/15/google-launches-kartta-labs-to-recreate-historical-maps-in-3d/

  https://opensource.googleblog.com/2020/09/recreating-historical-streetscapes.html