IBM Spectrum LSF:让超级计算不再"超级难"
何金池, IBM科技事业部资深架构师
面向分布式高性能计算 (HPC) 的工作负载调度系统和资源管理平台。
北京 2025年6月4日 /美通社/ -- 现在搞大模型,GPU芯片就是命根子,没有高性能的GPU芯片,大模型跑不动,大模型的应用也玩不转。所以高性能芯片的研发就变得非常关键,就拿一个7nm芯片的仿真来说,每分钟能喷涌出,几千个甚至上万个作业,可能会瞬间挤爆计算资源。那如何把成千上万个作业有序的调度到大规模的集群中呢?这时候,就得请出HPC(高性能计算)调度界的"大宗师"——IBM Spectrum LSF!
视频:高性能计算调度届的"大宗师"——IBM Spectrum LSF
在大模型 时 代 , 电 子半 导 体是当前技 术 攻 坚 的关 键领 域 , IBM Spectrum LSF 如何助力半 导 体企 业应对 AI 时 代的高性能芯片需求?
作为HPC调度领域的扛把子,LSF经过三十年的发展,但凡你想到调度的这种需求,基本都能满足。LSF有一系列的智能调度策略,可以让作业在最合适的资源,以最快的速度来完成。比如说对一些关键的作业,LSF会开绿灯,保证高优先级的作业插队完成,低优先级的作业先靠边站。也可以根据作业的一些依赖关系编排工作流。同时,LSF还会实时的扫描整个集群的状态,然后发现哪个服务器在偷水摸鱼就会立刻抓出来,给他安排上合适的作业。
这里我分享一个半导体客户的案例。他在芯片仿真过程中,遇到了作业不能及时完成、资源利用率低的情况,导致产品的上市周期非常长。用了LSF之后,他的资源利用率暴增40%,芯片仿真的验证周期几乎缩短到了原来的一半。原来一个作业要等很长时间才能出结果,现在可以说,温酒斩华雄,工程师泡的咖啡还没凉,作业已经算完了。
LSF如何助力企业降本增效?
LSF不光可以帮企业增效,也可以降本。比如说,在EDA(Electronic Design Automation,电子设计自动化)软件里,有一些商业的许可证非常昂贵,贵到让人怀疑人生。曾经有一个半导体客户,他每年购买EDA的软件的商业许可证,要花费几千万的美金。对于普通的调度器来说,他只管硬件资源,不管像许可证这样的一些其他资源的调度。而LSF作为调度界的"瑞士军刀",它有一个功能模块叫做 Licenses Scheduler,是业界唯一具备的功能,可以帮助企业去调度商业许可证,按需分配,不用的时候及时收回,还可以跨项目的去调度这个许可证。就拿刚才的案例来说,这个半导体企业利用LSF Licenses Scheduler功能模块,它的许可证利用率暴涨了38%,还避免了因为没有License的时候,经常导致作业失败的情况。所以LSF帮助企业省钱的同时,还提高了工作效率,真正做到了一举两得。
IBM Spectrum LSF的独特优势有哪些?
首先,LSF被称为"瑞士军刀",就是因为它强悍的性能和丰富的功能。LSF同时可以支持几千个用户向它提交作业,可以同时管理几百万个作业。LSF的功能也非常齐全,基本上我们看到在HPC这种场景下看到的需求,不管是作业管理、作业编排、作业调度、作业监控,LSF都可以满足。其他这种调度软件,它可能只满足一些基本的调度需求,对于一些高性能的策略,更智能的策略,它是没有的。还有一些,比如说商业许可证调度功能,其他调度软件也是没有的。
另一方面,IBM具有全世界范围内7x24小时的专业支持团队。如果您在使用LSF过程中遇到问题,您随时可以登录我们的系统或拨打电话去寻求解决方案。这种贴身的专业支持,一些开源软件也是不具备的。
IBM Spectrum LSF的应用场景有哪些?
LSF的应用场景非常广泛。比较常见的,比如刚提到的芯片EDA的仿真,还有生命科学和生物制药,一些高端制造的CIE的场景,还有石油、天然气、天气预报、人工智能,以及一些超级的计算中心。
目前在芯片电子半导体企业,不管是大型的企业还是微创的企业,基本上我们看到百分之七八十已经在用了。还有一些医疗行业,因为我们跟一些医疗的软件可以无缝的集合起来,能做这种基因的检测,或者蛋白质的仿真。
在新冠期间,LSF是幕后英雄。它在新冠疫苗研发里起了非常大的作用。国外某家新冠疫苗研发企业,它使用了LSF来做它的作业调度,使得它的疫苗尽快的推上市场。
我们每天看精准的天气预报,比如说要刮大风,要下雨了,也是离不开LSF在幕后帮我们做的高性能的资源编排、作业的调度。
最后,我用14个字来总结 IBM Spectrum LSF:智能调度快如风,资源管理准又精。如果您遇到"作业算不过来" "资源管不过来"等问题,欢迎联系我们,IBM Spectrum LSF让您的超级计算不再"超级难"。
- 花皙蔻祛斑亮白多效精华液耀目上市,纯净美妆产品锦上添花
- 浪潮信息发布企业大模型开发平台"元脑企智"EPAI,加速AI创新落地
- 罗氏七赴进博,深耕中国三十周年,聚力共筑健康未来
- 第十五届中国光电子产业博览会开幕 自动化网受邀出席
- KANEKA UBIQUINOL™亮相亚洲国际营养保健食品展荣获2024年度最佳健康老龄化成分大奖
- 2025年全国就业力X未来商业创想大赛全面启动,ACCA深化产教融合培养数智时代财会人才
- 希尔顿集团奢华及生活方式品牌迎来全球第1,000家酒店里程碑
- 立邦获评"2024 亚太地区十佳工业涂料服务供应商"
- SUMATONA推出手掌大小的超轻无线卷发棒"SUMATONA Smart Mini"
- Supermicro推出搭载NVIDIA超级芯片的新型千兆全闪存存储服务器
- 艾罗能源成为多特蒙德足球俱乐部合作伙伴
- 众合云科厦门公司战略升级,落地专业雇主服务业务总部
- MIC2597-2BTS: Redefining Power Management for Tomorrow's Electronics | ChipsX
- 泰勒•斯威夫特( Taylor Swift )、李小龙( Bruce Lee )、Lady Gaga、勒布朗•詹姆斯( LeBron James )、BTS和爱马仕•伯金( Hermès Birkin
- 国有大型现代化企业「鲁泰控股」携手企企通,以全链路数字化采购重塑竞争力
- 舒华体育前三季度研发费用同比增长约51%
- 宝理塑料与Selex Motors携手推动电动两轮车电池盖的发展
- 来自印度的全球奢侈生活方式品牌BEAUTIFUL India宣布成为2024年巴黎奥运会印度之家的官方合作伙伴
- 【315特别见证】维朵涂料海关抽检全合格,真环保无惧“质检风暴”!
- 环旭电子推出创新型150KW功率模组,适用于电动车驱动逆变器
- 国产兆瓦级高功率密度航空发电系统AGS1000发布,性能达到国际一流水平
- 软通动力子公司鸿湖万联参与揭幕中部首个鸿蒙生态创新中心
- 爱尔兰梅努斯大学成立中国办公室:共绘全球精英培育蓝图
- 拉赫蒂市代表团访问张家口:携手深化合作,共赴冰雪运动新未来
- ATFX伦敦盛宴:与爱丁堡公爵爱德华王子共聚温莎城堡
- 新华丝路:中国药都樟树举办第55届全国药材药品交易会
- 驯鹿生物伊基奥仑赛注射液治疗中枢神经系统免疫性疾病的单细胞多组学分析学术成果在《Science Immunology》发表
- 百世影视五周年回馈活动来袭
- “汇智全球,AI共赢” | 十余家人工智能领军企业共话中国AI企业出海之路
- 丹巴县2024"花开丹巴•为梨而来"梨花春赏季活动精彩开启
推荐
-
我们时常把创业想得太过简单,认为获得成功轻而易举 我们时常把创业想得太过简单,认为获得成功 财商
-
日股盘中再破34年新高,今年还涨得动吗? 今年日股开局强势,1月5日以来开启连涨行情,日 财商
-
供应“安全感”超过红海“危机感”?欧洲天然气价格大跌 虽然冬季极寒天气来临,而且卡塔尔似乎已经暂 财商
-
春节将至,抢票再次成为广大网友关注的热门话题 春节将至,抢票再次成为广大网友关注的热门话 财商
-
娃哈哈这艘商业巨舰将驶向何方,我们试目以待 2月25日,娃哈哈集团在官网发布讣告,娃哈哈创 财商
-
为何娃哈哈纯净水线上会卖断货? 随着网络上关于娃哈哈和农夫山泉之争的持续 财商
-
广东省药监局调研恒昌医药集团,聚焦药品流通产业高质量发展 日前,广东省药品监督管理局党组成员、副 财商