97国产精品视频|欧美国产偷国产精品三区|在线欧美成人网站网址|亚洲在线色情日本无码视频网|高潮喷水在线日韩精品操|真真操逼视频国产免费啪啪片|超大波少妇欧美亚洲精品日韩一区|久久视频精品91午夜视频|亚洲无码成人动漫精品一区二区|中文字幕久久成人

您當(dāng)前位置:采招網(wǎng) > 文檔下載 > 人工智能應(yīng)用與算力1期硬件及平臺(tái)清單.xlsx

人工智能應(yīng)用與算力1期硬件及平臺(tái)清單.xlsx

下載文件(11.29KB)
江門市 2025-11-05 11.29KB 業(yè)主:江門市中心醫(yī)院
內(nèi)容簡介

設(shè)備名稱參數(shù)單位數(shù)量算力服務(wù)器CPU:配置CPU數(shù)量≥2,主頻≥21GHz,每顆CPU核數(shù)≥48核內(nèi)存:配置≥16根96GB5600MHzDDR5硬盤:配置≥2塊192TBSASSSD,≥4塊384TBNVMeSSD網(wǎng)卡:配置≥8個(gè)200Gb/s以太網(wǎng)光口,≥2個(gè)25Gb/s以太網(wǎng)光口光模塊:配置≥8個(gè)200G以太網(wǎng)多模光模塊,≥2個(gè)25G以太網(wǎng)多模光模塊GPU:配置≥8張GPU算力卡,單卡顯存容量≥96GBHBM3,單卡顯存帶寬≥20TB/s,單卡FP8算力≥296TFLOPS,單卡FP16算力≥148TFLOPS,單卡TF32算力≥74TFLOPS,單卡FP32算力≥44TFLOPS,單卡FP64算力≥1TFLOPS,單卡L2緩存≥60MB臺(tái)4管理服務(wù)器CPU:配置CPU數(shù)量≥2,主頻≥21GHz,每顆CPU核數(shù)≥32核內(nèi)存:配置≥16根64GB5600MHzDDR5硬盤:配置≥2塊192TBSASSSD,≥4塊768TBNVMeSSD網(wǎng)卡:配置≥2個(gè)25Gb/s以太網(wǎng)光口,≥4個(gè)1Gb/s以太網(wǎng)電口光模塊:配置≥2個(gè)25G以太網(wǎng)多模光模塊電源:≥2個(gè)1600W交流&240V高壓直流電源模塊GPU:配置≥1張GPU算力卡,單卡Tensor核心數(shù)≥368個(gè)(支持第四代TensorCore),單卡RT核心數(shù)≥92個(gè)(支持光線追蹤),單卡顯存容量≥48GBGDDR6,單卡顯存位寬≥384-bit,單卡顯存帶寬≥864GB/s,單卡顯存類型:單卡ECC糾錯(cuò)內(nèi)存(支持?jǐn)?shù)據(jù)完整性校驗(yàn)),單卡FP32算力≥5935TFLOPS,單卡FP8推理算力≥239TFLOPS,單卡INT8推理算力≥362TOPS(支持稀疏性加速)臺(tái)1參數(shù)網(wǎng)交換機(jī)(200G)交換架構(gòu):集中轉(zhuǎn)發(fā)架構(gòu)  交換容量≥16Tbps包轉(zhuǎn)發(fā)率≥5400Mpps電源:配置≥2個(gè)交流電源模塊風(fēng)扇:配置≥6個(gè)風(fēng)扇模塊接口:配置≥40個(gè)200GQSFP56端口光模塊:配置≥32個(gè)200GQSFP56多模光模塊支持RoCE(PFC/ECN/ETS)臺(tái)1業(yè)務(wù)&管理交換機(jī)(25G)交換架構(gòu):集中轉(zhuǎn)發(fā)架構(gòu)  交換容量≥48Tbps/96Tbps包轉(zhuǎn)發(fā)率≥2000Mpps接口:配置≥48個(gè)1G/10G/25GSFP28,≥8個(gè)40G/100GEQSFP28端口電源:配置≥2個(gè)交流電源模塊風(fēng)扇:配置≥4個(gè)風(fēng)扇模塊支持RoCE(PFC/ECN/ETS)支持AIECN/INOF/IPCC支持微分段支持M-lag臺(tái)2AI業(yè)務(wù)平臺(tái)1、一站式大模型全生命周期服務(wù)平臺(tái)。平臺(tái)覆蓋數(shù)據(jù)處理、模型開發(fā)、評(píng)估、管理、推理、應(yīng)用部署及數(shù)據(jù)回流等全流程,高效構(gòu)建與部署AI應(yīng)用,全面管理AI解決方案生命周期。2、AI基礎(chǔ)服務(wù):支持多元異構(gòu)算力統(tǒng)一管理與調(diào)度,配備高品質(zhì)RoCE網(wǎng)絡(luò),可擴(kuò)容增配高性能存儲(chǔ),全面釋放AI基礎(chǔ)設(shè)施潛能,保障推理及應(yīng)用業(yè)務(wù)的高效穩(wěn)定運(yùn)行。通過算力平臺(tái)的統(tǒng)一資源調(diào)度對(duì)GPU資源進(jìn)行隔離分配,能對(duì)單GPU卡進(jìn)行算力調(diào)度、切片。3、模型推理:兼容異構(gòu)算力、支持多元模型推理服務(wù),提供全生命周期管理。通過多種優(yōu)化手段提升推理性能,實(shí)現(xiàn)高并發(fā)、低延時(shí)服務(wù),顯著降低Token響應(yīng)時(shí)延。4、模型評(píng)估:內(nèi)置Opencompass模型評(píng)估工具,支持超10萬道測評(píng)題目,覆蓋多場景、多維度評(píng)估需求,支持意見生成模型評(píng)估可視化報(bào)告,助力模型選型與迭代優(yōu)化。5、應(yīng)用服務(wù):提供端到端的AI應(yīng)用開發(fā)平臺(tái),集成豐富開發(fā)組件與調(diào)試工具,支持快速探索與持續(xù)優(yōu)化,賦能客戶構(gòu)建可擴(kuò)展、可演進(jìn)的AI應(yīng)用,助力行業(yè)智能化轉(zhuǎn)型。數(shù)字資產(chǎn)管理6、數(shù)字資產(chǎn)管理:通過元數(shù)據(jù)統(tǒng)一管理平臺(tái)數(shù)據(jù)集、模型、算法、鏡像、插件、知識(shí)庫、應(yīng)用、提示詞等數(shù)字資產(chǎn),實(shí)現(xiàn)數(shù)字資產(chǎn)集中管理與高效共享,提升協(xié)同效率,簡化操作流程。套1

  • 同地區(qū)推薦