- 无标题文档
查看论文信息

中文题名:

 数据编排系统Alluxio的性能测试工具的设计与实现    

姓名:

 赵子豪    

保密级别:

 公开    

论文语种:

 chi    

学科代码:

 080901    

学科专业:

 计算机科学与技术    

学生类型:

 学士    

学位:

 理学学士    

学位年度:

 2023    

校区:

 北京校区培养    

学院:

 人工智能学院    

研究方向:

 系统软件    

第一导师姓名:

 马郓    

第一导师单位:

 北京大学人工智能研究院    

第二导师姓名:

 肖明忠    

提交日期:

 2023-06-20    

答辩日期:

 2023-05-11    

外文题名:

 Design and implementation of performance testing tools for data orchestration system Alluxio    

中文关键词:

 存算分离 ; 性能测试 ; 数据编排 ; 大数据存储 ; 数据驱动应用 ; 监控系统    

外文关键词:

 separation of storage and calculation ; performance testing ; data orchestration ; big data storage ; data-driven applications ; monitoring system    

中文摘要:

近年来面向存算分离场景的大数据应用获得极大的关注,Alluxio作为首个数据编排系统,解决了数据驱动应用与存储系统之间的数据访问困难的问题,并在提升系统性能、降低运营成本方面有显著效果,但目前缺少一套性能测试工具,可对数据编排软件各方面性能进行定量化描述。文章针对数据编排系统Alluxio设计并实现了一套性能测试工具,集成了主流大数据软件、基准测试以及监控系统,对Alluxio的性能进行全方面的测试,即能比较不同版本、不同运行模式下的Alluxio以及其配套软件的性能差别,同时为宣传产品竞争力提供数据支撑。测试工具及相关文档已发布至Alluxio开源社区,为研发人员提供灵活的测试方法和监控方案。

外文摘要:

In recent years, big data applications for storage-computing separation scenarios have gained significant traction. As the first data orchestration system, Alluxio solves the problem of difficult data access between data-driven applications and storage systems, and improves system performance while reducing operating costs. There is a significant effect in terms of cost, but currently there is a lack of a suite of performance testing tools that can quantitatively describe the performance of all aspects of data orchestration software. This article designs and implements a suite of performance testing tools for the data orchestration system Alluxio, which integrates mainstream big data frameworks, benchmark tests, and monitoring systems to test the performance of Alluxio in all aspects. That is, it can compare the performance differences of Alluxio and its supporting software in different versions and different operating modes, and provide data support for promoting product competitiveness. The test tools and related documents have been released to the Alluxio open-source community, providing developers with flexible testing methods and monitoring solutions.

参考文献总数:

 41    

优秀论文:

 北京师范大学优秀本科论文    

作者简介:

 赵子豪,北京师范大学人工智能学院2019级本科生,推免至北京大学攻读计算机硕士,研究方向是系统软件、软件工程,在Alluxio有一段实习经历,此论文是于Alluxio实习期间创作。    

插图总数:

 20    

插表总数:

 5    

馆藏号:

 本080901/23006    

开放日期:

 2024-06-19    

无标题文档

   建议浏览器: 谷歌 360请用极速模式,双核浏览器请用极速模式