中国IDC圈2月22日报道:华盛顿——美国航空航天局(NASA)及其几十个使命项目每天传回的数据犹如奔涌的河流。航天器监测从我们的地球家园到遥远星系的一切,将图像和信息传回地球。所有这些数码记录都需要储存、索引和处理,以便世界各地的工程师、科学家和其他人员可以使用这些数据来理解地球及其以外的宇宙。

使命项目策划者和软件工程师正在寻找管理如此庞大复杂而且不断增大的数据流的新策略,这样的数据流在信息技术行业中被称为“大数据” (Big Data)。

“大数据”有多大?美国航空航天局的各项使命每小时收集数百TB数据。仅1TB就相当于在50,000棵树制成的纸张上打印的信息。

位于加利福尼亚州帕萨迪纳(Pasadena)的美国航空航天局喷气推进实验室(Jet Propulsion Laboratory)的美国航空航天局太阳系可视化项目(Solar System Visualization project)的负责人埃里克·德容(Eric De Jong)说:“科学家们将大数据用于各种目的,从预测地球的天气到监测火星上的冰盖再到搜索遥远的星系。我们是数据的保存者,而数据使用者则是需要图像、拼图、地图和影片来寻找模式并验证理论的天文学家和科学家。”太阳系可视化项目可将美国航空航天局使命项目的科学成果转化为研究人员可以使用的可视化产品。

德容解释说,应对来自太空使命的数据涉及三个方面:储存、处理和访问。第一项任务——储存或存档数据,对于更大量的数据来说自然更具挑战性。平方千米阵(Square Kilometer Array)是计划部署在南非和澳大利亚的由数千个望远镜组成的阵列,预计每天产生700TB图像数据,相当于因特网每两天的所有数据流量。工程师们正忙于开发更好地储存信息的创新软件工具,而不是创造更多硬件。

美国航空航天局“大数据”计划的一位项目负责人克里斯·马特曼恩(Chris Mattmann)说:“我们不必做无谓的重复劳动。”美国航空航天局一直在加大对开源软件(Open-source Software)的整合,为太空使命提供经改进的数据处理工具。而后,美国航空航天局的这些工具可供世界其他人用于不同的应用领域。

德容和他的团队正在开发信息可视化的新方式。例如,美国航空航天局火星勘测轨道飞行器(Mars Reconnaissance Orbiter)上一个摄像机拍摄的每个图像含有120兆像素。除了制作电脑图像和动画使科学家和公众能够近距离了解这颗红色星球,他的团队还用这类数据来制作影片。

德容说:“数据不只是越来越大,而且越来越复杂。我们在不断努力寻找使创建可视化产品过程自动化的方式,以便于科学家和工程师使用这些数据。”

“大数据”领域另一项重要的工作是使用户容易从数据存档中获取所需信息。

美国航空航天局红外处理和分析中心(Infrared Processing and Analysis Center)负责人史蒂夫·格鲁姆(Steve Groom)说:“如果你有一个巨型书架,你仍必须知道如何找到需要的书籍。”有时候用户希望一次访问所有数据,以寻找全局模式,这是“大数据”存档的一个好处。格鲁姆说:“天文学家还可以同时浏览我们库存的所有‘书籍’,这在他们自己的电脑上是无法做到的。”

美国航空航天局说,最终,“大数据”潮流将继续猛增,美国航空航天局将开发出新的策略来管理数据流以惠及全球。原文发表于13.10.21

关注中国IDC圈官方微信:idc-quan 我们将定期推送IDC产业最新资讯

查看心情排行你看到此篇文章的感受是:


  • 支持

  • 高兴

  • 震惊

  • 愤怒

  • 无聊

  • 无奈

  • 谎言

  • 枪稿

  • 不解

  • 标题党
2023-08-24 09:38:00
大数据资讯 关注县域数据能力建设,抢占产数业务发展先机
2023年《数字中国建设整体布局规划》正式发布,数据能力已成为我国区域发展的底座和创新引擎。 <详情>
2023-03-30 11:15:07
云资讯 分布式时代已至,数据如何更有价值?
无论是连通各大集群内大型超大型数据中心,还是连接边缘侧小型、边缘数据中心,分布式云计算都已成为这张算力网络最重要的支撑。在此背景下,云计算步入分布式时代。 <详情>
2023-03-01 19:27:00
市场情报 FlagOpen大模型技术开源体系,开启大模型时代“新Linux”生态
大数据+大算力+强算法=大模型”是当前人工智能发展的主要技术路径。语言大模型ChatGPT成为现象级应用,人工智能进入普及应用的新时期。 <详情>
2023-01-09 09:36:46
大数据资讯 我国互联网广告数据匿名实施服务正式上线
《指南》形成的“技术保障、评估规制、过程控制”的互信制衡机制,适用于各类互联网广告业务,包括广告投放、程序化交易、广告监测等应用场景下的数据匿名化处理。 <详情>
2022-12-30 10:10:19
大数据资讯 中国移动磐维数据库正式发布
未来,随着数据库功能和稳定性等进一步增强,磐维数据库将在中国移动内外部的广泛应用中积累更多复杂业务场景实践经验,进一步提升数据库产品的核心技术能力,助力数智化转 <详情>