Rekwiżiti tal-Cableing taċ-Ċentru tad-Data AI għal 400G/800G

L-intelliġenza artifiċjali qed tfassal mill-ġdid id-disinn taċ-ċentru tad-dejta. Il-biċċa l-kbira tal-attenzjoni tmur għall-GPUs, l-aċċeleraturi u t-tkessiħ, iżda s-saff li jiddeċiedi bil-kwiet jekk il-bqija tal-bini jirnexxix huwa l-cabling. F'raggruppament AI, is-saff fiżiku jiddetermina jekk tistax fil-fatt tilħaq 400G u 800G, jekk il-links ta' veloċità għolja-joqogħdux nodfa biżżejjed biex jgħaddu t-traffiku, jekk il-fluss tal-arja jibqax ħaj minn rack b'popolazzjoni sħiħa, u jekk il-qabża tal-veloċità li jmiss tiegħek hijiex skambju ta' kards jew upgrade tal-forklift.

Din il-gwida hija miktuba għal timijiet ta' infrastruttura u-netwerk ottiku. Jispjega x'jagħmel il-kejbils tal-AI differenti, ir-rekwiżiti li huma importanti man-numri reali, kif tqabbel id-DAC, l-AOC, u l-fibra strutturata, fluss tax-xogħol tal-ippjanar pass{2}}b'-pass, x'għandek tipprepara qabel migrazzjoni 400G jew 800G, u lista ta' kontroll li tista' fil-fatt tuża. Ir-referenzi tekniċi hawnhekk huma bbażati fuq l-istandards attwali IEEE 802.3 u ANSI/TIA-942.

Għaliex il-Ħidma tax-Xogħol tal-AI Bidlu r-Rekwiżiti tal-Cableing taċ-Ċentru tad-Data

Iċ-ċentri tad-dejta tal-intrapriżi tradizzjonali nbnew madwar traffiku tal-applikazzjonijiet pjuttost prevedibbli, ħafna minnu fit-tramuntana-in-Nofsinhar, li jiċċaqlaq bejn utenti, applikazzjonijiet, u netwerks esterni. Ir-raggruppamenti tal-AI jaqilbu dak il-mudell. Waqt it-taħriġ u l-inferenza ta'-skala kbira, il-fluss dominanti huwa lvant-punent: GPUs kontinwament jiskambjaw gradjenti u attivazzjonijiet ma' xulxin permezz ta' operazzjonijiet kollettivi bħal kull-inaqqas, ġeneralment fuq drapp ta' aċċess remot għall-memorja diretta (RDMA).

Dan huwa viżibbli fid-disinji ta 'referenza tal-bejjiegħ. NVIDIA tibni n-netwerk tal-komputazzjoni tal-GPU bħala drapp tas-sinsla tal-weraq-ibbażat fuq RDMA bl-użu ta'rail-topoloġija ottimizzata sabiex kull GPU tkun l-iktar hop wieħed minn kwalunkwe ieħor, li huwa dak li jżomm il-komunikazzjoni multi-GPU effiċjenti fuq skala kbira. Il-konsegwenza tal-kejbils hija għadd kbir ta 'portijiet: nodu wieħed ta' tmien-GPU jista 'jippreżenta tmien portijiet ta' 400G (jew 800G) fil-lvant-tal-punent, u pod ta 'taħriġ b'diversi swiċċijiet tal-weraq għal kull rack jimmultiplika l-fibra tat-tronk u l-patching malajr ħafna.

Meta s-saff fiżiku ma jkunx ippjanat taħt-, il-problemi ma jidhrux fl-ewwel jum. Jidhru aktar tard, bħala mogħdijiet konġestjonati li jifgaw il-fluss tal-arja, bħala iżolament tal-ħsara li jieħu sigħat minflok minuti, u bħala xogħol mill-ġdid matul l-ewwel ċiklu ta 'aġġornament. Dettall li jidher trivjali, bħal polarità MPO maqluba jew endface ikkontaminat, jista 'jieħu ferrovija sħiħa offline. Għall-infrastruttura AI, il-kejbils jappartjenu fl-arkitettura mill-bidu, mhux bħala l-aħħar kompitu qabel il-kummissjonar.

Kejbil taċ-Ċentru tad-Data Tradizzjonali vs AI-Let

Id-distakk bejn il-kejbils tradizzjonali u AI-lesti huwa bidla fil-prijoritajiet tad-disinn, mhux biss għadd akbar ta' kejbils. Disinji tradizzjonali jottimizzaw għall-konnettività tal-lum; Disinji lesti għall-AI-jottimizzaw għall-migrazzjoni tal-veloċità, id-densità, il-kwalità tal-link prevedibbli, u s-servizz fuq ċikli multipli ta' aġġornament.

L-għan huwa impjant tal-fibra li jista 'jassorbi mill-inqas qabża waħda tal-veloċità u espansjoni waħda tal-kapaċità mingħajr disinn mill-ġdid.

Rekwiżiti Ewlenin tal-Cableing għal Ċentri tad-Dejta AI

Ippjana s-Saff Fiżiku għal 400G u 800G, mhux biss il-veloċità tal-lum

Il-clusters tal-AI jimxu 'l fuq is-sellum tal-veloċità malajr, minn 100G għal 400G, 800G, u eventwalment 1.6T. L-interfaces 400G u 800G issa huma formalment standardizzati:IEEE 802.3df, approvat fl-2024, jiddefinixxi l-MAC, is-saff fiżiku, u l-parametri tal-ġestjoni għal 400 Gb/s u 800 Gb/s Ethernet, inklużi tipi fiżiċi tal-midja bħal 800GBASE-SR8 u 800GBASE-DR8. Min-naħa tat-tagħmir, 400G tipikament jgħix f'fatturi tal-forma QSFP-DD jew QSFP112, filwaqt li 800G juża OSFP jew QSFP-DD800. Jekk qed tqabbel l-ippakkjar tat-transceiver u l-immappjar tal-karreġġjata, danQSFP-DD ħarsa ġenerali teknikahuwa punt tat-tluq utli.

Ir-regola prattika: it-tip tal-fibra tad-daqs, l-għadd tal-fibra, u l-bażi tal-konnettur sabiex l-impjant jgħix il-qabża li jmiss. Trunk dimensjonat biss għall-veloċità tal-port tal-lum isir l-ostaklu l-mument swiċċ silikon u ottika jimxu 'l quddiem.

Uża -Fibra MTP/MPO ta' Densità Għolja għall-GPU-Konnettività tal-Cluster

Il-links AI ta'-veloċità għolja huma ottiċi paralleli, u ottiċi paralleli jimmappaw direttament fuq l-għadd tal-fibra. Link 400G-DR4 juża erba' korsiji, jew tmien fibri, komunement terminati f'MPO-12 ferrule. Link 800G-SR8 jew 800G-DR8 juża tmien korsiji, jew sittax-il fibra, ħafna drabi MPO-16 b'tarf APC. Bagolli MTP/MPO bażi 8 u bażi 16 imqabbda ma 'cassettes jikkonsolidaw mijiet ta' dawn il-links għal kull rack u jibdlu l-iskjerament f'movimenti ripetibbli u ttestjati fil-fabbrika aktar milli splicing fuq il-post. Pre-terminatKejbils tat-trunk MTP/MPOu assemblaġġi ta 'tbegħid (MPO għal LC jew MPO għal MPO) huma s-sinsla ta' dan l-approċċ.

Id-densità għad trid tiġi ppjanata, mhux massimizzata. L-ippakkjar tal-fibra f'rack mingħajr ma wieħed jaħseb dwar il-mili tal-mogħdija u l-fluss tal-arja joħloq lura-pressjoni fuq l-egżost tat-tagħmir u jagħmel il-portijiet impossibbli li jiġu sserviti. Issettja l-proporzjonijiet tal-mili u r-regoli ta' ġestjoni-slack qabel, mhux wara, l-ewwel installazzjoni.

Immaniġġja Telf ta 'Inserzjoni, Indafa tal-Konnettur, u Polarità

L-ottiki tal-AI ta'-veloċità għolja huma inqas tolqot mill-links li ġew qabel. Is-sinjalar PAM4 użat f'400G u 800G jaħdem fuq baġits ta 'telf ta' kanali aktar stretti minn links NRZ eqdem, u kull par MPO jew LC imgħammrin iżid telf ta 'inserzjoni, ħafna drabi ftit minn għaxra ta' decibel għal kull konnessjoni. Madwar kanal strutturat b'diversi punti ta 'konnessjoni u tul ta' fibra, dak il-baġit jisparixxi malajr, għalhekk l-għadd tal-konnetturi huwa varjabbli tad-disinn, mhux ħsieb wara. Id-distinzjoni bejn telf ta 'inserzjoni u telf ta' ritorn, u għaliex it-tnejn jimpurtaw fuq l-ottika parallela, ta 'min jifhem qabel ma tiffinalizza kanal; dan spjegat fuqtelf ta 'inserzjoni fin-netwerks tal-fibratkopri l-mekkanika.

Il-kontaminazzjoni hija waħda mill-kawżi ewlenin tal-fallimenti tal-link tal-kamp, ​​għalhekk kull endface għandu jiġi spezzjonat u mnaddaf qabel it-tgħammir. Il-polarità teħtieġ skema espliċita (Metodu A, B, jew Ċ), u links paralleli ta'-modalità waħda ġeneralment jużaw konnetturi APC angolati biex jikkontrollaw it-telf tar-ritorn. Ir-raġġ tal-liwja huwa importanti f'pannelli densi, fejn il-fibra insensittiva tal-liwja -tixtri l-marġni. L-affidabbiltà hawnhekk hija dixxiplina ta 'installazzjoni u manutenzjoni daqs kemm għażla ta' komponent.

Iddisinja Arkitettura tal-Kabling Modulari u Skalabbli Strutturata-

L-infrastruttura tal-IA tinbidel fuq ċiklu qasir, għalhekk impjant li huwa diffiċli biex jiġi mmodifikat inaqqas kull skjerament futur. Il-kejbils strutturati, mibnijin minn bagolli, cassettes, kompartimenti, u mogħdijiet definiti, iħallu timijiet iżidu l-kapaċità jew jerġgħu -binarji drapp mingħajr ma jerġgħu jiġbdu l-kejbil.ANSI/TIA-942 jispeċifika r-rekwiżiti minimi tal-infrastruttura tat-telekomunikazzjoni għaċ-ċentri tad-dejtau topoloġija tal-kejbils maħsuba biex takkomoda applikazzjonijiet futuri, li hija eżattament il-qagħda li għandha bżonn tibni AI. B'din il-pedament, il-biċċa l-kbira tal-aġġornamenti tal-veloċità jsiru kwistjoni ta 'skambju tal-ottiki u kasetts aktar milli bini mill-ġdid tas-saff fiżiku.

Kejbils tar-Rotot għall-Fluss tal-Ajru u t-Tkessiħ fi Xtillieri ta'-Densità Għolja

L-ixkafef tal-AI jaħarqu. Id-densità tal-enerġija fl-ixkafef tal-GPU l-aktar densi tista 'taqbeż il-100 kW, u f'dawk il-livelli kejbils konġestjonati jikkawża direttament ċirkolazzjoni mill-ġdid u hot spots lokalizzati.Il-gwida ASHRAE TC 9.9 tifforma kontroll termali madwar id-daħla tat-tagħmir tal-IT u separazzjoni nadifa tal-korsija sħun-kiesħa-, u l-cabling jew jappoġġja dak jew jaħdem kontrih. Fil-prattika dan ifisser mogħdijiet ta 'fibra overhead fejn possibbli, separazzjoni ċara ta' enerġija u data, maniġers vertikali u orizzontali daqs għall-għadd reali tal-kejbil, slack dixxiplinat, u rotta li qatt ma timblokka l-egżost ta 'wara jew kabinett taċ-ċmieni. Il-ġestjoni tal-kejbil li żżomm ir-rabtiet traċċabbli wkoll tnaqqas l-iżball uman waqt iċ-ċaqliq u l-bidliet.

DAC, AOC, jew Fibra Strutturata? Matriċi tal-Għażla tal-Cableing taċ-Ċentru tad-Data tal-AI

M'hemm l-ebda mezz uniku uniku għal cluster AI; l-għażla t-tajba hija mmexxija mill-firxa u r-rwol. Ġewwa xtilliera, ir-ram b'firxa qasira-għadu jirbaħ fuq l-ispiża, il-qawwa, u l-latenza. Hekk kif il-links jifirxu fuq ringieli u swali, il-fibra b'modalità unika ssir is-sinsla skalabbli. Il-matriċi hawn taħt tqabbel l-għażliet komuni bil-mod kif reviżjoni tad-disinn fil-fatt tiżenhom.

Dan huwa wkoll għaliex dikjarazzjoni ġenerali bħal "il-fibra hija dejjem preferuta" teħtieġ twissija: il-fibra hija l-pedament skalabbli għad-drapp, iżda DAC passiv għadu l-aħjar għażla ta 'inġinerija għal ħops ta'-metru ġewwa xtilliera.

Kif tippjana l-kejbils taċ-Ċentru tad-Data AI, pass pass

Pass 1: Ippjana l-Impjiegi tax-Xogħol tal-AI u t-Topoloġija tan-Netwerk

Ibda bl-ammont tax-xogħol. Pod kbir ta' taħriġ, flotta ta' inferenza ta' rendiment għoli-, cluster HPC, u skjerament qawwi ta' ħażna-ma jaqsmux l-istess profil tat-traffiku. Imbagħad immappja fejn il-GPU tikkalkula (lvant-punent), il-ħażna, it-tramuntana-in-nofsinhar, u l-barra-minn-netwerks ta' ġestjoni tal-banda. Skjerament ta' inferenza pura jista' ma jkollu bżonn drapp kbir tal-lvant-punent, filwaqt li pod ta' taħriġ b'ħafna-rack se jkun. Disinn għall-fluss tat-traffiku attwali, mhux biss l-elevazzjoni tar-rack.

Pass 2: Lock il-Miri tal-Veloċità Kurrenti u Futuri

Iddefinixxi kemm l-ewwel fażi kif ukoll dik li jmiss. Jekk pod imexxi 400G illum u 800G is-sena d-dieħla, l-impjant tal-fibra għandu jkun daqs 800G issa. Lil hinn minn dak l-orizzont, ix-xogħol fuq l-Ethernet tal-klassi terabit-diġà għaddej: ilIEEE P802.3dj task force qed tiddefinixxi operazzjoni ta' 200G, 400G, 800G, u 1.6 Tb/s billi tuża sinjalazzjoni ta' 200 Gb/s-kull-korsija. Li tkun taf fejn sejjer il-pjan direzzjonali jgħidlek kemm tgħodd il-fibra u l-kapaċità tal-mogħdija biex tirriżerva.

Pass 3: Agħżel Media u Konnetturi B'Marġni

Il-mistoqsija OS2-versus-OM4 hija l-aktar mistoqsija li tintlaħaq. OM4 huwa tajjeb għal sub-links ta 'sinsla tal-weraq ta' sub-100 m, iżda jilħaq tiċkien hekk kif tiżdied il-veloċità, għalhekk ladarba torbot ringieli jew swali jaqsmu, jew ladarba trid 800G DR/FR headroom, OS2 b'mod wieħed huwa l-pedament aktar sigur. Ir-reviżjoni tal-limiti ta 'distanza ta' fibra multimode OM1 permezz OM5jagħmel il-kompromess-konkrit. Qabbel il-bażi MPO (12 kontra 16) mal-mappa tal-fibra ottika, u ppjana l-polarità kmieni; għal pannelli ta'-densità għolja danGwida tal-għażla MTP vs MPOtkopri d-differenzi li huma importanti. Fejn transceiver u veloċità tal-port ma jingħaqdux, ippjana breakouts (MPO għal LC) aktar milli improvising fil-ħin tal-installazzjoni.

Pass 4: Ippjana d-densità tar-rack, il-mogħdijiet u l-fluss tal-arja flimkien

It-tqassim tar-rack, ir-rotot tal-kejbils, u t-tkessiħ huma deċiżjoni waħda f'ambjent AI ta'-densità għolja, mhux tlieta. Qabel l-installazzjoni, għodd kemm kejbils jidħlu u joħorġu minn kull rack, iddeċiedi fejn joqogħdu l-patch panels, ippjana slack, u kkonferma li tekniku jista 'jilħaq u jissostitwixxi port mingħajr ma jfixkel il-links ħajjin. Ħalli spazju għar-ras tat-tkabbir fi trejs u imla l-proporzjonijiet. Xtilliera li tidher nadifa waqt il-kummissjonar ma tkunx tista' tintuża wara żewġ ċikli ta' aġġornament jekk il-mogħdijiet kienu massimi fl-ewwel jum.

Pass 5: Ittestja, Iddokumenta, u Żomm għall-Ispeċ

Ittestja kull link għall-ispeċifikazzjoni tal-proġett, li għal-fibra b'veloċità għolja tfisser ittestjar ta' inserzjoni-telf, OTDR fejn xieraq, verifika tal-polarità, u spezzjoni ta' l-aħħar. Iddokumenta kull port, trunk, cassette, u mogħdija, inklużi l-iskema tal-polarità, it-tul, u t-telf imkejjel, b'tikketti li jimmappaw għal kif-tpinġijiet mibnija. Il-manutenzjoni mbagħad issir rutina: tindif tal-wiċċ tat-tarf, verifiki perjodiċi, u kontroll tat-tikketta u l-bidla. Ħoss li ġejprattika ta 'installazzjoni tal-kejbil tal-fibra ottikagħat-tensjoni tal-ġbid u r-raġġ tal-liwja jipproteġi l-baġit tat-telf li ttestjajt għalih.

X'għandek tipprepara Qabel Migrazzjoni 400G jew 800G

Il-migrazzjonijiet ifallu fuq is-saff fiżiku aktar spiss milli fuq l-ottika. Qabel ma taqta ', aħdem minn dan li ġej:

• Ikkonferma t-tip u l-għadd tal-fibra, u vverifika li l-OM4 eżistenti għadu jilħaq il-veloċità fil-mira, minħabba li d-distanza appoġġjata tonqos hekk kif ir-rata tal-linja togħla.
• Iċċekkja li l-bażi tal-konnettur taqbel mal-ottika l-ġdida (MPO-12 kontra MPO-16) u li l-iskema tal-polarità għadha żżomm tarf sa tarf.
• Ikkalkula mill-ġdid il-baġit tat-telf tal-link għal PAM4, imbagħad naqqas l-għadd ta' konnessjonijiet fejn tista' u erġa-spezzjona kull endface.
• Ikkonferma l-mogħdija u l-kapaċità tat-trej għall-kejbils miżjuda, u kkonferma l-ispazju termali tar-rack għal ottiċi ta'-qawwa ogħla.
• Cassettes tal-palk, bagolli, tikketti, u pjan tat-test bil-quddiem sabiex il-cutover ikun tpartit-in, mhux re-pull.

Żbalji Komuni li għandhom jiġu evitati

Daqs biss għall-bandwidth tal-lum.Impjant mibni għall-veloċitajiet attwali jmur malajr. Ibni fi triq realistika għal veloċità ogħla u densità ogħla tal-port.

It-trattament tal-ġestjoni tal-kejbil bħala kożmetiċi.Il-kejbils puliti huma utli, iżda l-ġestjoni hija verament dwar il-fluss tal-arja, l-aċċess u l-iżolament tal-ħsarat, mhux id-dehra.

Sagrifiċċju ta 'aċċess għall-manutenzjoni għad-densità.Id-densità-għolja mhix "kompatta kemm jista' jkun." Jekk tekniku ma jistax jittraċċa u jissostitwixxi konnessjoni b'mod sikur, id-disinn jiswik waqt operazzjonijiet reali.

Ix-xiri ta 'komponenti b'mod iżolat.Kejbils, konnetturi, pannelli, transceivers, xtillieri, u mogħdijiet jiffurmaw kanal wieħed. Parti li tidher irħisa waħedha tista 'tgħaqqad id-drapp kollu meta tiskala.

AI-Lista ta' Kontroll tal-Prontezza tal-Cableing Lest

Aħdem permezz ta 'dawn qabel skalar GPUs. Kull oġġett għandu kundizzjoni ta 'pass konkreta, mhux iva jew le vaga.

• Spazju ras tal-veloċità:Tista' l-fibra installata tappoġġja mill-inqas qabża waħda ta' veloċità (pereżempju 400G sa 800G) mingħajr ma terġa' tiġbed, u l-għadd tal-fibra huwa daqs il-mappa tal-karreġġjata tal-ottika (tmien jew sittax-il fibra)?
• Baġit tat-telf:Kull kanal ta'-veloċità għolja ġewwa l-allokazzjoni ta' telf ta' inserzjoni-PAM4 tiegħu, bl-għadd ta' konnessjonijiet u l-ispezzjoni tal-wiċċ tat-tarf huwa vverifikat?
• Densità versus servizz:Jista 'tekniku jilħaq, jittraċċa, u jissostitwixxi kwalunkwe port mingħajr ma jfixkel ferrovija ħaj?
• Fluss tal-arja:Il-mogħdijiet iżommu l-egżost ta' wara u t-trażżin tal-korsija ċari, u l-enerġija u d-dejta huma separati?
• Dokumentazzjoni:Kull link hija ttestjata u rreġistrata bl-iskema tal-polarità, it-tul u t-telf tagħha, u ttikkettata biex taqbel ma'-tpinġijiet mibnija?
• Skala:It-topoloġija ottimizzata tal-werqa-sinsla, tal-binarji-testendi għall-pod li jmiss mingħajr disinn mill-ġdid?
• Media fit:Il-mezz ta' kull link jintgħażel skont il-firxa, il-veloċità, l-impatt termali, u s-servizz, b'DAC fir--rack u OS2 madwar is-swali?

Jekk diversi tweġibiet huma le, iddisinja mill-ġdid is-saff fiżiku qabel l-iskala tax-xogħol tal-AI, mhux wara l-ewwel espansjoni.

Takeaways Ewlenin

Il-piżijiet tax-xogħol tal-AI qed jiktbu mill-ġdid ir-rekwiżiti tal-kejbils taċ-ċentru tad-dejta madwar bandwidth ogħla, fibra parallela aktar densa, baġits ta' telf stretti, routing konxju tal-fluss tal-arja-, u ċikli qosra ta' aġġornament. Is-saff fiżiku mhux se jagħmel il-GPUs aktar mgħaġġel waħdu, iżda dak żbaljat jillimita l-prestazzjoni, l-affidabbiltà u l-veloċità tal-aġġornament tal-ambjent kollu.

Il-prinċipju tad-disinn l-aktar sikur huwa li tippjana l-impjant tal-fibra, il-kapaċità tal-mogħdija, l-arkitettura tal-patching u l-mudell tad-dokumentazzjoni qabel l-art tal-GPU xtillieri, mhux wara l-ewwel ċiklu ta 'espansjoni. Ibni għal mill-inqas qabża waħda tal-veloċità, agħżel il-midja skont ir-rwol aktar milli skont il-vizzju, u ttratta l-indafa, il-polarità u l-fluss tal-arja tal-konnettur bħala restrizzjonijiet tad-disinn tal-ewwel-klassi. Qabel ma tuża jew tespandi, irrevedi l-kejbils attwali tiegħek mal-lista ta 'kontroll hawn fuq; għal kejbils strutturati u komponenti MTP/MPO, tesplora tagħnasoluzzjonijiet tal-fibra ottika.