Chadoop云计算框架
中国(长沙)科技成果转化交易会官方网
2011-10-21 16:49:30
成果名称: Chadoop云计算框架
成果拥有单位:复旦大学
成果简介: MapReduce是一种新型并行编程模型,目前MapReduce已在大规模计算机集群上得到广泛应用,主要用于进行海量数据处理的计算。本项目基于开源项目Hadoop实现了Chadoop并行云计算框架,极大地提高了整个系统的任务处理速度。Chadoop使用C语言实现单节点上的作业处理逻辑,以实现原有Java虚拟机之上很难乃至无法实现的任务并行和数据局部性优化;对应于一般的集群环境中的双层并行架构,采用层次化的MapReduce架构,在单个计算节点上也应用MapReduce模型以实现多核架构上的并行处理。Chadoop同时实现了一套支持跨任务数据复用的缓存系统,能够保存任务已读取的数据,使其不随子作业的结束而销毁,提高了数据复用性,从而大大减少额外的网络数据传输开销。
知识产权及获奖情况:发明专利一项。
合作方式:技术开发。
联系人:李利梅 电话:021-65642667
上一条:没有了!
下一条:电子警察系列产品(BHU-EPOLICE-V1)
下一条:电子警察系列产品(BHU-EPOLICE-V1)
