pandas hija librerija open-source ta' Python għall-analiżi u l-manipulazzjoni ta' data tabulari, żviluppata mill-2008 'il quddiem minn Wes McKinney. L-oġġett ċentrali tagħha, id-DataFrame, jixbah tabella b'kolonni bl-ismijiet. Tista' tintuża biex tillowdja data minn fajls CSV, Excel jew databases u biex tnaddafha, tiffiltraha, tigruppaha u tgħaqqadha. pandas hija mibnija fuq NumPy u hija għodda standard fl-analiżi tad-data, ir-rapportar u t-tħejjija tad-data tat-taħriġ.
Aġenti, flussi tax-xogħol u mudelli fi spazju tax-xogħol wieħed – demo b'xejn għal 24 siegħa.
Ibda d-demoNumPy hija l-librerija open-source fundamentali ta' Python għall-komputazzjoni numerika. Tipprovdi arrays multidimensjonali u funzjonijiet veloċi għall-alġebra lineari, l-istatistika u numri każwali, bil-qalba tagħha taħdem f'kodiċi kkumpilat. Ħafna għodod tal-analiżi tad-data u tat-tagħlim awtomatiku, bħal pandas, scikit-learn u numru kbir ta' libreriji ta' viżwalizzazzjoni, huma mibnija fuq NumPy. Kull min jaħdem bid-data f'Python għalhekk kważi dejjem jużaha, direttament jew indirettament.
L-analiżi esploratorja tad-data (EDA) hija l-ewwel ħarsa miftuħa lejn sett ta' data: tikkalkula ċifri sommarji, teżamina distribuzzjonijiet u grafiċi u tfittex mudelli, valuri estremi u valuri nieqsa – mingħajr ipoteżi fissa għadha. Tgħin biex tiġi vvalutata l-kwalità tad-data u biex jinstabu mistoqsijiet sensibbli għal analiżi jew immudellar ulterjuri. Eżempju: qabel tbassir tal-bejgħ, l-EDA turi li xahar wieħed ġie rreġistrat b'mod mhux komplut minħabba migrazzjoni tas-sistema.
It-tindif tad-data huwa l-iskoperta u l-korrezzjoni ta' daħliet żbaljati, duplikati jew inkonsistenti f'settijiet ta' data. Il-passi tipiċi jinkludu l-istandardizzazzjoni tal-ortografija u tal-formati tad-dati, it-tneħħija ta' spazji żejda u l-għaqda ta' duplikati bħal “Smith Ltd” u “Smith Limited”. Data nadifa hija prerekwiżit għal analiżi, mailings u applikazzjonijiet tal-IA affidabbli.
Jupyter Notebook huwa applikazzjoni open source ibbażata fuq il-browser minn Project Jupyter li tgħaqqad kodiċi eżegwibbli, riżultati, grafiċi u test spjegattiv f'dokument wieħed. In-notebooks jintużaw ħafna fl-analiżi tad-data, fit-tagħlim awtomatiku, fir-riċerka u fit-tagħlim għax kull pass jista' jiġi ddokumentat u kondiviż b'mod traċċabbli. Python hija l-aktar lingwa komuni. Eżempju: analista jtella' data tal-bejgħ, ineddifha u juri r-riżultati bħala grafiku direttament taħtha.
