BuildKit: Islendik zady diýen ýaly gurup bilýän dokeriň gizlin daşlary

BuildKit: Islendik zady diýen ýaly gurup bilýän dokeriň gizlin daşlary

Döredijileriň köpüsi Dockeri programma üpjünçiliginiň iberilişini üýtgeden konteýner iş wagty hökmünde bilýärler. Häzirki zaman Docker gurluşynyň - 18.09 wersiýasyndan bäri Docker bilen iberilýän we Docker 23.0-iň esasy arkasyna öwrülen indiki nesil gurluşyk ulgamy bolan BuildKit-iň hereketlendirijisi barada ýuwaşlyk bilen gürleýän motory barada has az bilýänler bar. Inersenerler Kubernetes konfigurasiýalary we mikroservis nagyşlary barada tükeniksiz jedel etseler-de, BuildKit DevOps ekosistemasynyň iň güýçli, çeýe gurluş ulgamlarynyň birine yzygiderli ösýär. Eger has çalt doker gurmak ýaly çemeleşýän bolsaňyz, stoluň üstünde ägirt uly mümkinçilikleri goýýarsyňyz. Throughokary geçirijilikli CI / CD turbageçirijilerini işleýän kompaniýalar, diňe BuildKit-iň hödürleýän zadyna düşünmek bilen gurluşyk wagtyny 50-70% azaltdy - bu başlangyç.

BuildKit-i nusgawy gurluşykçydan düýpgöter tapawutlandyrýan zat

Asyl Docker gurmak dwigateli, Dockerfile görkezmelerini yzygiderli ýerine ýetirýärdi, paralel haýsy işiň howpsuz bolup biljekdigine düşünmeýär. “BuildKit” şol çyzykly ýerine ýetiriş modelini gönükdirilen asik grafik (DAG) bilen çalyşýar - haýsy ädimleriň biri-birine baglydygyny we haýsysyna bagly däldigine düşünýän garaşlylyk grafigi. Garaşsyz etaplar bir wagtyň özünde ýerine ýetirilýär, ulanylmadyk basgançaklar tutuşlygyna geçýär we ähli gurluş dogry tertipde okamaly ädimleriň hökmany yzygiderliligine däl-de, isleýän zadyňyzyň deklaratiw beýanyna öwrülýär.

Bu binagärlik çalşygy tizligiň çäginden çykýan amaly netijelere eýe. Köp basgançakly Dockerfile bir basgançakda Go ikili düzüp, Node.js baglylyklaryny başga birinde göçürip alanda we üçünji ýerde önümçilik şekilini ýygnasa, BuildKit ilkinji iki basgançagy bir wagtda işledip biler. Öň güýçli CI ylgaýjysyna dört minut gerek bolan gurluşyk indi togsan sekundyň içinde tamamlanýar. Zolak, “Shopify” we beýleki köp sanly uly in engineeringenerçilik toparlary içerki gurallar retrospektiwlerinde şuňa meňzeş gazançlary dokumentleşdirdiler. DAG modeli, şeýle hem, BuildKit-iň ýokary takyk gurluşyk meta-maglumatyny döredip biljekdigini aňladýar - üpjünçilik zynjyrynyň howpsuzlygy üçin möhüm ähmiýete eýe bolan subutnamalar we programma üpjünçiligi fakturasy (SBOM) öndürmek ýaly aýratynlyklar üçin esas.

Keşiň nädogry işlemeginiň konseptual üýtgemegi hem bar. Nusgawy gurluşykçy, üýtgedilen görkezmeleriň aşagyndaky her gatlagy ýatyrdy. “BuildKit” her girişde mazmun heşlerini yzarlaýar, şonuň üçin “Dockerfile” -däki teswiriň üýtgemegi otuz minutlyk düzülişi görkezýän keş keşbini ýitirmeýär. Gurluş keşiňiz, in engineeringenerçilik toparyňyz üçin bäş minutlyk we kyrk minutlyk jogap aýlawynyň arasyndaky tapawut bolsa, bu takyklyk başda görünişinden has möhümdir.

Köp platforma gurýar: Bir buýruk, her arhitektura

BuildKit-iň --platform baýdagy we QEMU integrasiýasy bir wagtlar agyryly köp ulgamly utgaşdyrmak meselesini bir buýruga öwürýär. docker buildx build --platform linux / amd64, linux / arm64, linux / arm / v7. Bu mümkinçilik, pudagyň ARM - AWS Graviton3 ýagdaýyna geçmegi bilen möhüm ähmiýete eýe bolup, web hyzmaty we maglumatlary gaýtadan işlemek ýaly iş ýüklerinde 40% has gowy baha öndürijiligini üpjün edýär we Apple Silicon ARM-ny millionlarça inersener üçin başlangyç ösüş maşynyna öwürdi.

BuildKit-iň keş keş eksport aýratynlygy muny eksport edip bolýan keş keşpleri bilen çözýär. --cache-to type = registr, ref = myregistry / myapp: cache we --cache-from type = registr, ref = myregistry / myapp: cache ulanmak bilen, BuildKit her gurluşykdan soň jikme-jik keş keşbini reýestre geçirýär we indiki başynda çekýär. Keş mazmuna gönükdirilen, şonuň üçin diňe hakyky üýtgedilen gatlaklar täzeden alynýar. GitHub Hereketlerinde, GitLab CI-de we CircleCI-de bu nagşy ulanýan toparlar, indiki işlerde turbageçirijileriň wagtyny on bäş minutdan üçe çenli kesýärler. GitHub-yň ösen Docker gurmak iş akymlary baradaky resminamalary, hut şu sebäpden bu nagşy maslahat berýär.

Iň çalt gurmak, hiç haçan gaýtadan işlemeli däl. BuildKit-iň gatlakly, mazmuna gönükdirilen keş keşi diňe bir gurluşy çaltlaşdyrmaýar - "gurmak" düşünjesini has akylly edýär, gaýtalanýan jemlemäni üýtgän zadyň artýan tapawudyna öwürýär.

Keş eksporty, şahamça esasly ösüş akymlary bilen arassa birleşýär. CI turbageçirijiňiz, şahanyň keşi ýok wagty şahanyň aýratyn keşinden esasy şahanyň keşine gaýdyp gelmek üçin sazlap bilersiňiz, ýagny täze ösüş şahalary esasy ösüş ugruňyzda toplanan ýyly keşden derrew peýdalanýar. Inersenerler, sowuk başlangyç jezasyna garaşmak däl-de, täze şahada eden ilkinji wadalaryndan çalt seslenme alýarlar.

BuildKit Frontends: Dockerfilesiň aňyrsynda bina

“BuildKit” -iň iň az bilinýän ukyby, “Dockerfiles” -iň diňe bir däl-de, mümkin bolan giriş formatydyr. “BuildKit” -iň kesgitli dilleri we formatlary gurmaga mümkinçilik berýän, arkaýyn arhitekturasy bar. Öň tarapy, gurluş faýlyňyzyň ýokarsyndaky # sintaksis = görkezmesi bilen kesgitlenýär, bu bolsa BuildKit-e belli bir frontend suratyny çekmegi we faýlyň galan bölegini derňemek we ýerine ýetirmek üçin ulanmagy buýurýar.

Bu arhitektura birnäçe özüne çekiji taslamalara mümkinçilik berdi. “Buildpacks” integrasiýasy “BuildKit” -e hiç hili Dockerfile bolmazdan programma çeşmesinden konteýner şekilleri gurmaga mümkinçilik berýär - dili kesgitleýär, degişli esasy suratlary saýlaýar we önümçilige taýyn konteýner awtomatiki ýygnaýar. HPC we ylmy hasaplaýyş jemgyýetleri, BuildKit-iň içerki LLB (Pes derejeli gurluş) wekilçiligini düzmek üçin düzülen domen aýratyn dillerdäki gurluşlary suratlandyrmak üçin ýörite frontalary ulandylar. docker / dockerfile: laboratoriýalar sintaksis frontend synaglary, her bir görkezme boýunça heredok goldawy, --network gözegçilik we durnukly Dockerfile sintaksisine girmezden ozal keş keşplerini güýçlendirýär.

Öz öň tarapyňyzy kesgitlemek ukyby, adaty bolmadyk gurluşyk talaplary bolan guramalaryň "hemme zady Dockerfile sintaksisine aýakgap" we "konteýnerleri düýbünden taşlamak" arasynda saýlamaly däldigini aňladýar. FPGA programma üpjünçiligi, oturdylan ulgam şekilleri ýa-da ýöriteleşdirilen ML modeli konteýnerleri döredýän topar, konteýnerleriň işleýän ýerlerinde ýerleşdirilen adaty OCI laýyk konteýner şekillerini öndürip, öz domenleri üçin manyly sözler bilen düşündirip biler. Bu giňeliş, giriş formatyna kesgitlenen ýaly seredýän gurluş ulgamlaryndan hakyky binagärlik artykmaçlygydyr.

Provenance we SBOM: SolarWinds dünýäsinden bina

Programma üpjünçiligi üpjünçilik zynjyrynyň howpsuzlygy, 2020-nji ýylda SolarWinds bozulandan we 2021-nji ýylda Log4Shell gowşaklygyndan soň teoretiki aladalardan başlap, ileri tutulýan derejä geçdi. ABŞ-nyň hökümetiniň kiberhowpsuzlyk baradaky 14028-nji buýrugy, 2021-nji ýylyň maý aýynda federal potratçylar üçin programma üpjünçiliginiň kanun taslamasyny hökmany etdi. BuildKit-iň subutnamasy we SBOM öndürmek aýratynlyklary bu kadalaşdyryjy we howpsuzlyk şertlerine göni jogap.

--provenance = true we --sbom = true baýdaklary bilen, BuildKit konteýner şekiline nämäniň girendigini - haýsy esasy suratlaryň ulanylandygyny, Dockerfile görkezmeleriniň ýerine ýetirilendigini, haýsy çeşme faýllarynyň bardygyny we daşarky baglylyklaryň alynýandygyny görkezýän kriptografiki gol çekilen tassyklamalary döredýär. Bu tassyklamalar SLSA (Programma üpjünçiligi artefaktlary üçin üpjünçilik zynjyry derejeleri) çarçuwasyna we içerki attestasiýa formatyna eýerýär, olary Sigstore's Cosign we OPA (Açyk syýasat agenti) ýaly syýasat hereketlendirijileri tarapyndan barlap bolýar.

Bu mümkinçilik berýän amaly iş prosesi şeýle görünýär:

1. Öndüriji kody basýar; CI turbageçirijisi, synagdan geçirmäge ukyply BuildKit gurluşyny işledýär.
2. BuildKit, ähli komponentleri we olaryň wersiýalaryny görkezýän gol çekilen SBOM döredýär.
3. SBOM şekil görkezijisi bilen birlikde konteýner reýestrine neşir edildi.
4. Kubernetes toparyndaky kabul ediş gözegçileri ýerleşdirmäge rugsat bermezden ozal barlanylýar.
5. Gowşaklyk skanerleri, täze CVE açylanda täsir eden suratlary kesgitlemek üçin SBOM-dan soraýar.

Bu doly turbageçirijini durmuşa geçirýän toparlar, gowşaklyklaryň aýan edilmegine birnäçe gün däl-de birnäçe sagatda jogap berip bilerler, sebäbi her işleýän gapda her bir komponentiň takyk, maşyn okalýan kartasy bar. Müşderileriň iş prosesine çuňňur aýlyk goşýan Mewayz ýaly kärhanalar üçin - aýlyk haklaryny dolandyrmak, flot maglumatlaryny dolandyrmak, hasap-fakturalary gaýtadan işlemek - berk, eşidilýän üpjünçilik zynjyryny görkezmek ukyby diňe bir oňat däl-de, kärhana satuw gepleşikleri üçin hökmany şert bolup durýar.

Başlamak: Bellenen gurluşlardan ösen turba geçirijilerine

Soňky wersiýasy - Docker 23.0 ulanýan bolsaňyz, Docker gurşawyňyzda eýýäm işleýär we soňundan adaty ýagdaýda işlediň. Toparlaryň köpüsi üçin ilkinji amaly ädim, “kody” doker gurmak kiçi komandasy arkaly BuildKit-iň doly aýratynlygyny açýan Docker Buildx pluginini açmakdyr. docker buildx create --use işlemek, adaty sürüjiden has köp ukyply BuildKit gurluşykçysyny döredýär. Şol ýerden, ösen aýratynlyklaryň yzygiderli kabul edilmegi hemme zady birbada kabul etmäge synanyşmagyň ýerine many berýär.

Häzirki wagtda esasy doker gurmak çagyryşlaryny ýerine ýetirýän topar üçin amatly ýol, ilki bilen keş eksportyny goşmak ýaly görünýär - bu minimal konfigurasiýa üýtgemegi bilen derrew, ölçenip bolýan tizligi gowulandyrýar. Topar ARM infrastrukturasyny nyşana alanda köp platformaly gurluşlar gymmatly bolýar. Gizlin gurnama, şahsy paket registrleri ýa-da SSH düwmeleri gurluş kontekstinde peýda bolanda islendik wagt kabul edilmelidir. Ygtyýarnamalar ýa-da kärhananyň müşderileriniň talaplary üpjünçilik zynjyry resminamalaryny zerur edende, kepillendiriş tassyklamalarynyň manysy bar.

BuildKit-iň has çuňňur sapagy bilgeşleýin gurmakdyr. Mikroservis üçin bir konteýner iberýärsiňizmi, maşyn öwreniş nokady ýa-da Mewayz-yň 207 iş moduly ýaly çylşyrymly platforma, gurluşyk prosesi ýaýbaňlandyrmagyň ýoly däl-de, ondan çykýan zatlaryň hilini, howpsuzlygyny we amaly kämilligini görkezýän in engineeringenerçilik artefakty. “BuildKit” size bu artefaktyň ajaýyp bolmagy üçin gurallary berýär. Sorag, olary ulanmaga wagt sarp edýärsiňizmi?

Freygy-ýygydan soralýan soraglar

BuildKit näme we nusgawy Docker gurmak ulgamyndan nähili tapawutlanýar?

BuildKit, Docker 18.09-da hödürlenen we Docker 23.0-de deslapky görnüşde döredilen Dockeriň indiki nesil gurluşyk motorydyr. Nusgawy gurluşykçydan tapawutlylykda, BuildKit paralel gatlagyň ýerine ýetirilmegini, kämil keş keşplerini, syrlary gurmagy we platforma gurluşlaryny goldaýar. Gurluş prosesine gönükdirilen asik grafik (DAG) hökmünde seredýär, has ygtybarly garaşlylygy üpjün edýär we çylşyrymly, köp basgançakly Dockerfiles üçin has çalt gurmak wagtyny döredýär.

BuildKit-i Docker bilen ulanyp başlamak üçin goşmaça bir zat gurmalymy?

Docker 23.0 ýa-da has soň işleýän bolsaňyz, goşmaça gurnama talap edilmeýär - BuildKit deslapky görnüşde işledilýär. Has köne wersiýalarynda, gurmak buýruklaryňyzy işletmezden ozal daşky gurşaw üýtgeýjisini DOCKER_BUILDKIT = 1 düzmek arkaly işjeňleşdirip bilersiňiz. Uzakdan gurulýan keşler ýa-da köp platformaly gurluşlar ýaly has ösen ýagdaýlar üçin, docker buildx create .

BuildKit adaty konteýner şekillerinden daşgary artefaktlar gurmak üçin ulanylyp bilnermi?

Hawa, we bu BuildKit-iň iň baha berilmeýän mümkinçiliklerinden biridir. CustomKörite frontalary we --output baýdagyny ulanyp, BuildKit diňe OCI suratlary däl-de, çig binarlary, tarbollary, statiki web sahypalaryny we beýleki özbaşdak faýl artefaktlaryny öndürip biler. Bu, köpugurly monoreplere we çylşyrymly CI turbageçirijilerine tebigy laýyk gelýän umumy maksatly hereketlendiriji edýär, bu ýerde dürli toparlara bitewi gural zynjyryndan dürli çykyş formatlary gerek.

BuildKit, Mewayz ýaly gurallar bilen bir hatarda has giň DevOps platformasyna nädip laýyk gelýär?

BuildKit pes derejeli gurluş gatlagyny dolandyrýar, ýöne häzirki zaman ösüş toparlary hem iş akymlaryny, müşderileriň eltilmegini we amaly amallaryny dolandyrmalydyrlar. Mewayz ýaly platformalar - $ 19-dan başlaýan 207 modully iş ulgamy - programma üpjünçiliginiň işiniň tarapyny ýapmak bilen infrastruktura gurallaryny doldurýar. “BuildKit” bilen işleýän täsirli gurluşyk turbageçirijilerini Mewayz ýaly birmeňzeş platforma bilen jübütlemek toparlara kod artefaktyndan müşderi eltişine çenli doly maglumat berýär.