Sõnastik

Masinõppe torujuhe

Mis on Masinõppe torujuhe?

Masinõppe torujuhe (pipeline) on määratletud sammude jada, mis muudab toorandmed kasutuselevõetavaks mudeliks: andmete kogumine ja puhastamine, tunnuste ettevalmistus, treenimine, hindamine, kasutuselevõtt ja jälgimine. Nende sammude automatiseerimine muudab tulemused reprodutseeritavaks ja võimaldab uusi andmeid väikese vaevaga töödelda. Näiteks saab jaemüüja oma müügiprognoosi mudelit igal nädalal uusimate numbritega uuesti treenida ja testida.

Teemad

  • MLOps
  • automatiseerimine
  • andmetöötlus

Proovi KI.ordot

Agendid, töövood ja mallid ühes tööruumis – tasuta 24-tunnine demo.

Alusta demot
← Kõik terminid

Seotud terminid

Andmete puhastamine

Andmete puhastamine on andmehulkades olevate vigaste, topelt- või omavahel vastuolus kirjete leidmine ja parandamine. Tüüpilised sammud on kirjaviiside ja kuupäevavormingute ühtlustamine, üleliigsete tühikute eemaldamine ning duplikaatide, näiteks „Tamm OÜ“ ja „Tamm Osaühing“, ühendamine. Puhtad andmed on usaldusväärsete analüüside, väljasaadetavate kirjade ja TI-rakenduste eeldus.

  • andmekvaliteet
  • duplikaadid
  • +1
Mall

Tunnuste kujundamine ja eraldamine

Tunnuste kujundamine (feature engineering) tähendab toorandmetest atribuutide (tunnuste) valimist, teisendamist ja loomist, et õppealgoritm tuvastaks mustreid kergemini. Tunnuste eraldamine (feature extraction) tuletab keerukatest andmetest, nagu tekstid, pildid või signaalid, kompaktseid tähendusrikkaid väärtusi. Näide: üksikutest ostukirjetest tehakse tunnused nagu „päevi viimasest ostust“ või „keskmine tellimuse väärtus“, mis võivad klientide lahkumise ennustust märgatavalt parandada.

  • Masinõpe
  • Andmete ettevalmistus
  • +1

MLflow

MLflow on avatud lähtekoodiga platvorm masinõppemudelite kogu elutsükli haldamiseks, mille tõi 2018. aastal algselt välja Databricks. See salvestab katsed koos nende parameetrite ja mõõdikutega, haldab mudeliversioone registris ning lihtsustab kasutuselevõttu. Uuemad versioonid toetavad ka keelemudelitel põhinevate rakenduste jälgimist ja hindamist. Tiimid saavad seega tagantjärele näha, milline mudel loodi milliste andmete ja seadistustega.

  • MLOps
  • avatud lähtekood
  • +1

Kubeflow

Kubeflow on avatud lähtekoodiga platvorm masinõppe töövoogude käitamiseks Kubernetesel, alates andmete ettevalmistusest kuni treenimise ja hüperparameetrite otsinguni ning mudelite teenindamiseni. Algselt Google'i algatatud projekt kuulub Cloud Native Computing Foundationi, kus see saavutas 2026. aasta augustis staatuse „graduated“ (seisuga oktoober 2026). See on suunatud peamiselt meeskondadele, kes treenivad oma mudeleid suures mahus oma või pilvetaristul.

  • MLOps
  • Kubernetes
  • +1