Andmeteadus

Komeet NEOWISE (pildil kujutatud punaste punktide jadana) olemasolu avastati kosmoseteleskoobi WISE tehtud astronoomiliste mõõtmiste andmete analüüsimise tagajärjel

Andmeteadus on interdistsiplinaarne valdkond, milles kasutatakse mitmesuguseid meetodeid, et saada teadmisi nii struktureeritud kui ka struktureerimata andmetest. See on seotud andmekaeve ja suurandmetega.

Teadusharu ühendab statistika, andmeanalüüsi ja nendega seotud meetodid, et mõista ja analüüsida tegelikke nähtusi andmete abil. Valdkond tugineb matemaatika, statistika, informaatika ja infoteaduste valdkondade tehnikatele ja teooriatele. Turingi auhinna võitja Jim Gray on nimetanud andmeteadust teaduse neljandaks paradigmaks – empiirilise, teoreetilise ja arvutusliku suuna kõrval on nüüd kesksel kohal andmetest juhitud lähenemine. Gray hinnangul on infotehnoloogia areng ja andmete üleküllus muutmas teaduse olemust tervikuna.

Andmeteaduse mõiste

Kuigi mitmed uurijad on püüdnud andmeteadust defineerida, puudub sellel üks kindel ja üldtunnustatud määratlus.

Üldiselt valitseb üksmeel, et andmeteadus keskendub suurandmetest väärtuslike mustrite tuvastamisele ning andmete muutmisele teadmisteks. See hõlmab kõiki tegevusi, mis toetavad andmepõhist otsustusprotsessi. Oluline on mõista, et andmeteadus ei ole eesmärk omaette, vaid meetodite kogum, mis aitab püstitatud eesmärke andmete abil tõhusamalt saavutada.

Mõiste seos statistikaga

Statistikud, sealhulgas Nate Silver, on väitnud, et andmeteadus ei ole eraldiseisev valdkond, vaid seda võib pidada statistika uueks nimetuseks. Samas leidub arvamusi, et andmeteadus eristub statistikast, kuna keskendub spetsiifiliselt digitaalsetele andmetele ainuomastele probleemidele ja meetoditele. Stanfordi professor David Donoho leiab, et andmekogumite suurus või masinarvutuste kasutamine ei ole piisav eristusalus. Tema hinnangul nimetatakse ülikoolides analüüsi- ja statistikaõppeaineid andmeteaduseks pigem reklaami eesmärgil ning sisuliselt on tegu traditsioonilisest statistikast välja kasvanud rakendusvaldkonnaga. Kokkuvõtvalt võibki andmeteadust käsitleda rakendusstatistika haruna.

Andmeteaduse soovituslik töötsükkel

Andmeteadlaste Il-Yeol Songi ja Yongjun Su hinnangul peaks andmeteadlane oma töös läbima kaheksa etappi.

1. Küsimuste ja võimaluste mõistmine Millisele küsimusele vastust otsitakse? Milliseid mõõdikuid hinnatakse?

Hüpoteesi sõnastamine. Ressursside (inimesed, andmed, töövahendid) hindamine.

2. Andmete mõistmine Andmeressursside tuvastamine, andmete taaskasutamise ja integreerimise kava, andmete tuvastamine ja tööriistade üle otsustamine.
3. Andmete ettevalmistamine Andmete hankimine ja hindamine, puhastamine, teisendamine. Andmete kvaliteedi kontrollimine.
4. Mudeli planeerimine Meetodite, tehnikate ja töövoo kindlaks määramine. Peamiste muutujate valimine ja nendevahelise korrelatsiooni määramine.
5. Mudeli loomine Mudeli katsetamine, selle analüüs ja kordamine.
6. Hindamine Hindamine mõõdikute alusel. Tulemuste ja soovituste esitamine.
7. Juurutamine Analüüsiprotseduuride integreerimine töölaua jms süsteemidega.
8. Jälgimine Tegevuse jälgimine ja parandamist vajavate osade väljaselgitamine.

Rakendusvaldkonnad

Andmeteadust rakendatakse üha enam ja selle kasutusvaldkonnad ulatuvad majandusest ja haridusest kuni kosmoseteaduse ning sotsioloogiani. Suurandmete analüüsist on seni suurimat kasu saanud jaemüük, telekommunikatsioon, tervishoid, finantsteenused, logistika ja mitmed tööstusharud, nagu auto- ning toiduainetetööstus.

Andmeteaduse rakendusvaldkonnad on näiteks:

Andmeteadlase oskused

Andmeteadlane otsib suurtest andmehulkadest mustreid ja seoseid, kombineerides tehnilisi vahendeid ning kriitilist mõtlemist, et pakkuda praktilisi lahendusi andmekesksetele probleemidele. Andmeteadlase elukutset on peetud üheks 21. sajandi kõige olulisemaks. Ameerika Ühendriikide tööotsinguportaal Glassdoor tunnistas andmeteadlase 2018. aastal parimaks ametiks. Andmeteadlased vajavad komplekssete probleemide lahendamiseks laiapõhjalisi teadmisi ja oskusi mitmetest valdkondadest, näiteks matemaatikast ja statistikast, arvutiteadusest ja infoteadusest. Andmeteadus on tihedalt seotud tõenäosusmudelite, andmekaeve, andmete visualiseerimise ja spetsiifiliste valdkonnateadmistega.

Andmeteadlasele vajalikud oskused:

Andmeteaduse õpetamine Eestis

Tartu Ülikooli arvutiteaduse instituudis on avatud andmeteaduse ja tehisintellekti eestikeelne magistriõppekava. Eriala üliõpilastel on Tartu Ülikoolis võimalik valida kolme õppesuuna vahel:

Vaata ka

Viited

  1. ↑ EDUCBA. "Data Science Machine Learning". Vaadatud 10.12.2019.
  2. 1 2 3 Data Science Estonia. "Mis on andmeteadus?". Vaadatud 11.12.2019.
  3. ↑ Hayashi, Chikio (1. jaanuar 1998). "What is Data Science? Fundamental Concepts and a Heuristic Example". Hayashi, Chikio; Yajima, Keiji; Bock, Hans-Hermann; Ohsumi, Noboru; Tanaka, Yutaka; Baba, Yasumasa (toim-d). Data Science, Classification, and Related Methods. Studies in Classification, Data Analysis, and Knowledge Organization (inglise). Springer Japan. Lk 40–51. DOI:10.1007/978-4-431-65950-1_3. ISBN 9784431702085.
  4. ↑ Tony Hey; Stewart Tansley; Kristin Michele Tolle (2009). The Fourth Paradigm: Data-intensive Scientific Discovery. Microsoft Research. ISBN 978-0-9825442-0-4. Originaali arhiivikoopia seisuga 20. märts 2017. Vaadatud 16. detsembril 2016.
  5. ↑ Bell, G.; Hey, T.; Szalay, A. (2009). "COMPUTER SCIENCE: Beyond the Data Deluge". Science. 323 (5919): 1297–1298. DOI:10.1126/science.1170411. ISSN 0036-8075. PMID 19265007.
  6. 1 2 3 Virkus, S. & Garoufallou, E. (2019), "Data science from a library and information science perspective", Data Technologies and Applications, Vol. 53 No. 4, lk 422-441. https://doi.org/10.1108/DTA-05-2019-0076
  7. ↑ Dhar, V. (2013), “Data science and prediction”, Communications of the ACM, Vol. 56 No. 12, lk 64-73. https://doi.org/10.1145/2500499
  8. ↑ Provost, F. & Fawcett, T. (2013), “Data science and its relationship to Big Data and data-driven decision making”, Big Data, Vol. 1 No. 1, lk 51-59. http://doi.org/10.1089/big.2013.1508
  9. ↑ Foreman, J.W. (2013), Data Smart: Using Data Science to Transform Information into Insight, John Wiley & Sons, Hoboken, NJ.
  10. ↑ "Data Science". Vaadatud 03.01.2020.
  11. ↑ Data Science Association. "About Data Science". Originaali arhiivikoopia seisuga 21.12.2019. Vaadatud 10.12.2019.
  12. ↑ "Nate Silver: What I need from statisticians - Statistics Views". www.statisticsviews.com. Originaali arhiivikoopia seisuga 11. juuni 2020. Vaadatud 3. aprillil 2020.
  13. ↑ "What's the Difference Between Data Science and Statistics?". Priceonomics (inglise). Vaadatud 3. aprillil 2020.
  14. ↑ Donoho, David (18. september 2015). "50 years of Data Science" (PDF). Vaadatud 2. aprillil 2020.
  15. ↑ Song, I-Y, & Zhu, Y. (2017), "Big Data and Data Science: Opportunities and Challenges of iSchools", Journal of Data and Informaton Science, Vol. 2 No. 3, lk 1-18. https://doi.org/10.1515/jdis-2017-0011
  16. ↑ Voulgaris, Z. (2014), Data Scientist: The Definitive Guide to Becoming a Data Scientist, Technics Publications, Westfield, NJ.
  17. ↑ Upsana (26. november 2019). "Top 10 Data Science Applications". Vaadatud 01.01.2020.
  18. ↑ Asha Saxena (30. jaanuar 2019). "Is 'Data Scientist' the 'Sexiest Job of the 21st Century'? And How Do You Get One of Your Own?". Entrepreneur. Vaadatud 01.01.2020.
  19. ↑ Arvamusfestival. "Mis on andmeteadus?". Vaadatud 10.12.2019.[alaline kõdulink]
  20. ↑ Amy Elisa Jackson (23. jaanuar 2018). "The 50 Best Jobs in America for 2018". Vaadatud 01.01.2020.
  21. ↑ Taivo Pungas (11. juuni 2015). "Andmeteadus: vajalikud oskused ja kuidas alustada". Vaadatud 11.12.2019.
  22. ↑ Tartu Ülikool. "Andmeteadus". Originaali arhiivikoopia seisuga 22.09.2020. Vaadatud 02.01.2020.

Välislingid

Kõrgkooliõpik "Praktiline andmeteadus"