蚁群算法的大数据计算引擎均衡部署数学建模研究
Research on Mathematical Modeling of Balanced Deployment of Ant Colony Algorithm Big Data Computing Engine
摘要: 随着大数据技术的迅猛发展,大数据计算引擎的性能优化和均衡部署问题成为研究热点。蚂蚁算法是一种模仿自然界中蚂蚁觅食的方法,它具有良好的全局寻优能力和较强的鲁棒性,非常适合求解复杂的优化问题。在此基础上,提出了一种基于蚁群算法的大规模数据挖掘方法,研究面向大数据计算引擎平衡配置问题的蚂蚁算法,通过建立数学模型,对计算资源进行优化配置。本项目的研究成果将为大数据处理引擎的平衡部署提供新的研究思路与方法。
Abstract: With the rapid development of big data technology, the performance optimization and balanced deployment of big data computing engine have become a research hotspot. Ant algorithm is a method that mimics ants foraging in nature. It has good global optimization ability and strong robustness, which is very suitable for solving complex optimization problems. Based on this, we propose a large-scale data mining method based on ant colony algorithm, studies the ant algorithm for the balanced configuration problem of big data computing engine, and optimizes the allocation of computing resources by establishing a mathematical model. The research results of this project will provide new research ideas and methods for the balanced deployment of the big data processing engine.
文章引用:肖丽丽. 蚁群算法的大数据计算引擎均衡部署数学建模研究[J]. 运筹与模糊学, 2024, 14(3): 969-978. https://doi.org/10.12677/orf.2024.143332

参考文献

[1] 张令涛, 赵林, 张亮, 等. 配用电大数据分布式计算集群负载均衡框架[J]. 电网技术, 2019, 43(1): 259-265.
[2] 黄哲学, 何玉林, 魏丞吴, 等. 大数据随机样本划分模型及相关分析计算技术[J]. 数据采集与处理, 2019, 34(3): 373-385.
[3] 王龙晖. 基于并行计算的调节阀大数据智能分析及建模方法研究[D]: [博士学位论文]. 济南: 山东大学, 2020.
[4] 王超. 大规模异构传感通信大数据智能调度仿真[J]. 计算机仿真, 2019, 36(4): 445-448, 473. [Google Scholar] [CrossRef
[5] 杨蕴睿. 网络通信软件共享资源均衡调度仿真研究[J]. 计算机仿真, 2019, 36(5): 333-336.
[6] 塔娜. 大数据平台网络数据库云计算技术优化与平台搭建研究[J]. 办公自动化, 2023, 28(11): 62-64.
[7] 滕飞, 刘洋, 曹芙. 基于节点实时负载的开源大数据负载均衡优化算法[J]. 吉林大学学报(信息科学版), 2023(6): 1106-1111.
[8] 邓国宝, 查晓文, 刘涛, 等. 试飞数据查询引擎设计[J]. 计算机测量与控制, 2023, 31(10): 208-213.
[9] 戚雄伟. 杭钢“平台 + 生态”打造产业数字化新引擎[J]. 企业管理, 2023(9): 110-114.
[10] 朱琳, 沈杨, 周川, 等. 基于粒子群的工业大数据雾计算多目标优化任务调度算法[J]. 南京理工大学学报, 2023, 47(1): 48-55.
[11] 杨阳, 凌东, 马杰宏, 等. 一种跨异构引擎的大数据生产任务调度框架[J]. 信息技术, 2023, 47(3): 29-34.
[12] 李海霞. 基于规则引擎的数据计算方法装置设备及存储介质[P]. 中国, CN202211559415.3. 2024-04-20.
[13] 程盛阳. 流式计算引擎中密集滑动窗口的性能优化研究[J]. 软件工程, 2023, 26(4): 42-45.
[14] 谢蒂, 顾小刚. 基于规则引擎的数据计算方法装置设备及存储存质[P]. 中国, CN202310618809.X. 2024-04-20.
[15] 张子浪, 刘海滨, 李小言, 等. 计算引擎选择模型的训练方法计算引擎选择方法及装置[P]. 中国, CN202310274395.3. 2024-04-20.
[16] 郑春辉. 计算机大数据分析与云计算网络技术研究[J]. 信息记录材料, 2023, 24(8): 146-148.
[17] 李磊. 分布式计算引擎的集群管理及负载均衡策略研究[D]: [硕士学位论文]. 成都: 电子科技大学, 2024.
[18] 乔颖 葛景晓, 王宏安, 等. 一种基于负载均衡的流式计算引擎调度方法及系统[P]. 中国, 202110790363. 2024-04-20.
[19] 迟建春, 郑伟, 王克敏. 负载均衡引擎客户端分布式计算系统以及负载均衡方法[P]. 中国, CN201710526509.3. 2024-04-20.
[20] 吴志敏, 吕慧伟, 陈明宇. 一个针对并行模拟引擎的性能评测实例[J]. 计算机科学, 2013, 40(3): 41-45. [Google Scholar] [CrossRef