美国政府大数据计划的中文译稿
博客 赵国栋 发表于:12年04月16日 17:00 [转载] DOIT.com.cn
国土安全部(DHS)
卓越研究中心和可视化数据分析(CVADA),罗格斯大学和普渡大学(以及另外三个伙伴大学)的研究人员之间进行协作,通过对大量的异构数据进行研究,使得急救员可以发现人为或自然灾害、恐怖事件,需要执法的边境安全问题,网络威胁的爆炸物。
能源部 (DOE)
科学办公室
高级科学计算研究办公室(ASCR)提供数据管理,可视化和数据分析的社区,包括数字化保存和社区访问。套件程序里包括广泛使用数据管理的技术,如 开普勒科学的工作流程系统;存储资源管理标准;各种数据存储管理技术,如BeSTman,大容量数据移动器和适应式的IO系统(ADIOS); FastBit数据索引技术(雅虎使用)和两个主要的科学可视化工具,ParaView 和 VisIt。
高性能存储系统(HPSS)是对磁盘和磁带系统上PB级数据进行管理的数据管理软件。 由美国能源部和IBM开发的HPSS在世界各地的大学和实验室的使用,用在数字图书馆,国防应用和包括纳米技术,基因组学,化学,磁共振成像,核物理,计算流体力学,气候在内的一系列学科,以及诺斯罗普·格鲁门公司,美国国家航空航天局(NASA)和美国国会图书馆。
对千万亿次的数据分析处理从庞大的科学数据集提取信息,发现其主要特征,并理解其间的关系。研究领域包括机器学习,数据流的实时分析,非线性随机的数据缩减技术和可扩展的统计分析技术,广泛适应于从能源部到电网,包括宇宙学和天气数据,传感器数据等。
下一代网络方案支持工具,使得合作研究在能够进行重大发现,包括2001年的Globus中间件项目大量数据的移动和使用, 2003年的GridFTP的数据传输协议, 2007年的地球系统网格(ESG)的工具。今天的GridFTP的服务器开放科学网格,ESG,和生物社区的科学数据每月超过1 PB的移动。 Globus中间件也被得克萨斯大学,软件公司,石油公司利用并一起合作,培养学生能够使用先进的石油工程方法和集成的工作流程。
