Ohjelmistotekniikka Syksy 2018 Vastuuhenkilö: Jouni Lappalainen Luennot ja esseet: Antti Juustila Harjoitukset ja study group: Jouni Lappalainen
Luennot Luennoilla käydään läpi Pressmanin Software Engineering -kirjan (7. painos) sisältö Hyvää materiaalia löytyy myös kirjasta Williams L., A (Partial) Introduction to Software Engineering Practices and Methods (kannattaa googlettaa termillä williams-draft-book) Luennoilla tehdään myös pieniä luentotehtäviä. Luentotehtävien ratkaisu menestyksekkäästi antaa pisteitä kurssisuoritusta kohti. Tehtäviä on sekä luennon aluksi/ luennolle valmistautuessa että luennon päätteeksi.!2
Harjoitukset Harjoitukset (7 kertaa) etenevät luentojen rinnalla ja siellä käsitellään edellisen viikon luentoihin liittyviä tehtäviä. Tehtävät esitellään kurssisivulla (Nopassa). Harjoitukset voi tehdä 2-3 opiskelijan ryhmässä tai yksin. Ratkaisut kerätään harjoitusraportiksi, joka palautetaan periodin lopussa. Harjoitusraportti edellytetään kurssin suorittamiseen. Harjoitusraportissa on tehtäviin oltava hyväksytyt vastaukset. Harjoitustehtävät on palautettava viikottain BitBucket-versionhallinta palveluun git-ohjelmistoa käyttäen. Harjoitustehtävät ratkaistaan etukäteen ja esitellään harjoituksissa harjoitusten vetäjälle. Hyväksytyt harjoitustehtävien vastaukset merkitään BitBucket:ssa tagilla Harjoitus# OK missä # on harjoituskerran numero (esim. Harjoitus4 ok).!3
Kuinka suorittaa kurssi? Kuinka suorittaa kurssi? 2 vaihtoehtoa: study group tai essee Molempiin vaihtoehtoihin kuuluu myös siis harjoitusraportti - osasuoritukset ovat voimassa seuraavaan kurssin toteutukseen. Study group: Kurssin aiheista annetaan pohdittavia tehtäviä (Nopassa) Etsikää lisämateriaalia ja pohtikaa pienessä ryhmässä (2-4 opiskelijaa) Viikoittain palaveri, jossa käydään läpi ryhmän pohdinnat Jokainen ryhmän jäsen osallistuu myös tehtävien esittelyyn Sisältää myös luentotehtävät ja niiden hyväksyttävän suorittamisen.!4
Kuinka suorittaa kurssi Essee on yksilötyö Valitse 10 aihetta seuraavista: 1. Ohjelmistokonfiguraation hallinta 2. Ohjelmiston rakentaminen 3. Ohjelmistosuunnittelu 4. Ohjelmistotuotannon infrastruktuurit 5. Ohjelmistotuotannon hallinta 6. Ohjelmistotuotantoprosessi 7. Ohjelmistojen ylläpito ja evoluutio 8. Ohjelmistojen laatu ja laadunhallinta 9. Ohjelmistovaatimusmäärittely ja vaatimusten hallinta 10. Ohjelmistojen testaus 11. Ohjelmistoprojektien hallinta!5
Lisää esseestä Kirjoita jokaisesta aiheesta 2 sivua (minimi, ei paljoa yli), sisältäen sekä materiaaliin tutustumisen osoittamista että omaa pohdintaa. (Tarkoituksena on tutustua laajasti ohjelmistotekniikan kenttään.) Materiaalia löytyy esim. Pressmanin kirjasta ja webistä. IEEE Software (Kirjaston portaalin kautta tai yliopiston verkosta) Computer -lehti Crosstalk (http://www.crosstalkonline.org) Tarkemmat ohjeet Nopassa.!6
Miten arvostellaan? Molemmissa vaihtoehdoissa on suoritettava harjoitukset palauttamalla harjoitustehtäviin hyväksyttävät vastaukset harjoitusraportin muodossa! Study group -vaihtoehto: Luentotehtävistä voi hyväksyttävillä vastauksilla saada max 10 pistettä Study group -pohdintojen purkamiset: max 16 pistettä Study group raportti (yksilöllinen): max 10 pistettä Essee -vaihtoehto: Essee: max 36 pistettä Hyvältä arvosanalta vaaditaan perustumista ohjelmistotuotannon oppikirjoihin ja alan lehtiin/tieteellisiin julkaisuihin monipuolista ja kriittistä lähteiden käyttöä (muista myös viitata tekstissä) omaa pohdintaa (jos on omaa kokemusta alalta sitä voi käyttää myös lähteenä) Hyvää rakennetta ja hyvää kieltä!7
Miten arvostellaan? Arvosanat jakautuvat seuraavasti (max 36 pistettä): 1: 18-20 pistettä 2: 21-25 pistettä 3: 26-29 pistettä 4: 30-33 pistettä 5: 34-36 pistettä!8
Mistä materiaalia? Ohjelmistotekniikan lait (esitellään luentojen yhteydessä) poimittu 50 laista ja 25 hypoteesistä, jotka esitetty kirjassa: Endres A., Rombach D., A handbook of software and systems engineering: empirical observations, laws and theories, 2003 Esimerkkejä Mikä sopii pieniin järjestelmiin ei sovi suuriin / no 11, DeRemer 1975 Ohjelmiston uudelleenkäyttö vähentää kehitysaikaa ja parantaa tuottavuutta ja laatua / no 15, McIlroy 1968 (Naur 1969) Henkilöiden lisääminen myöhässä olevaan projektiin aiheuttaa vain lisää myöhästymistä / no 36, Brooks 1975!9
Millaisia kysymyksiä study groupeissa käsitellään? Miten ohjelmistojen korjaamisen aiheuttamaa rapistumista" voidaan välttää? Tee yhteenveto Hookerin seitsemästä periaatteesta ja esitä tiivistelmä omin sanoin muutamalla lauseella (katso http://c2.com/cgi/wiki? SevenPrinciplesOfSoftwareDevelopment) Cockburn esittelee oheisessa paperissa yhtäläisyyksiä ohjelmistojen kehittämisen ja perinteisen teollisen tuotannon välillä. Mikä on mielestäsi paperin tärkein sanoma ohjelmistojen kehittäjille? Cockburn A., What engineering has in common with manufactoring and why it matters, Crosstalk, April, 2007, pp. 4-7!10
Studygroup purku Varatkaa ryhmällenne ajat https://goo.gl/co7msc!11
Ohjelmistotekniikka - FAQ 1. Mitä ohjelmistotekniikka tarkoittaa? 2. Mikä on ohjelmisto, miten se poikkeaa muista ihmisen rakentamista tuotteista? 3. Millaisia ohjelmistosovelluksia on? 4. Ohjelmistotuotannon peruskäytänteet ja periaatteet? 5. Onko jokin prosessimalli (elinjaksomalli) paras? 6. Onko jokin suunnittelumenetelmä paras ja jokin kuvaustapa se ainoa ja oikea? 7. Miten ohjelmiston laatuvaatimukset vaikuttavat ohjelmiston kehittämiseen?!12
Ohjelmistotekniikka - FAQ 8. Mitkä tekijät aiheuttavat eniten virheitä? 9. Mikä on ylläpidon rooli? 10. Miten ohjelmistojen kehitys muuttuu tulevina vuosina?!13
1. Mitä ohjelmistotekniikka tarkoittaa? The establishment and use of sound engineering principles in order to obtain economically software that is reliable and works efficiently on real machines määrittely NATOn järjestämässä ensimmäisessä SE konferenssissa 1968 /Naur & Randell 1969 Software engineering is that form of engineering that applies the principles of computer science and mathematics to achieving costeffective solutions to software problems. / CMU/SEI-90-TR-003 The application of a systematic, disciplined, quantifiable approach to the development, operation, and maintenance of software. / IEEE 1990!14
SWEBOK SoftWare Engineering Book Of Knowledge!15
Core Body of Knowledge Areas Graduate Software Engineering 2009 (GSwE2009) Curriculum Guidelines for Graduate Degree Programs in Software Engineering Integrated Software & Systems Engineering Curriculum (issec) Project!16
Ohjelmistotuotanto vai ohjelmistotekniikka - ohjelmistotuotannon osa-alueet / Haikala & Märijärvi 2000 Liiketoiminta, johtaminen Laatujärjestelmä Hankkeiden hallinta Projektinhallinta Projektinhallinta Projektinhallinta määrittely suunnittelu ohjelmointi testaus käyttöönotto ylläpito tuotteenhallinta laadunvarmistus dokumentointi vaatimustenhallinta, riskienhallinta,...!17
SEMAT (Software Engineering Methods and Theory) ydin Jacobson Ivar, Ng Pan-Wei, McMahon Paul, Spence Ian, Lidman Svante, The Essence of Software Engineering: the Semat Kernel. CSI Communications, August 2013, pp. 7-14!18
https://imgur.com/gallery/swdy6 19
2. Mikä on ohjelmisto, miten se poikkeaa muista ihmisen rakentamista tuotteista? Luontainen monimutkaisuus ongelmat ovat monimutkaisia Näkymättömyys eri tason kuvauksia Muunnettavuus helppo muuttaa Ainutkertaisuus räätälöidyt ratkaisut valmiiden komponenttien käyttö lisääntyy Skaalautumattomuus isot projektit/pienet projektit valtameriristeilijän rakentaminen ei ole samaa kuin 3000 soutuveneen rakentaminen Laatutavoitteet/laatutekniikat täydellinen testaus mahdotonta ohjelmisto ei kulu!20
Laitteiston häiriöasteen kasvu häiriöaste aika
Ohjelmiston häiriöasteen kasvu häiriöaste todellinen käyrä - miksi? tavoitekäyrä aika
Ohjelmiston häiriöasteen kasvu sivuvaikutusten aiheuttama häiriöaste häiriöaste todellinen käyrä muutos tavoitekäyrä aika
3. Millaisia ohjelmistosovelluksia on? Järjestelmäohjelmistot Sovellusohjelmistot Tekniset/tieteelliset ohjelmistot Sulautetut ohjelmistot Tuotelinjaohjelmistot Web-sovellukset Tekoälyohjelmistot Jokapaikan (pervasive) ohjelmistot, jotka kehitetty hajautetusti ja avoimeen koodiin perustuen (esim. IoT, Internet of Things, Wearable computing, ) Lisäksi mobiilisovellukset, pelit, viihde,!24
Web sovelluksen ominaispiirteet Verkosta riippuvuus (verkkointensiivisyys) sovellus elää verkossa ja palvelee hyvin hajanaisen asiakaskunnan tarpeita Samanaikaisuus suuret käyttäjämäärät käyttävät sovellusta samaan aikaan, käyttötavat voivat poiketa paljonkin Ennustamaton kuormitus käyttäjämäärät voivat vaihdella huomattavasti eri päivinä Suorituskyky vasteajan täytyy olla kohtuullinen, jotta käyttäjä on tyytyväinen!25
Web sovelluksen ominaispiirteet Palveluaste (availability) vaikka 100 % palveluastetta ei saavuteta, suositun sovelluksen käyttäjät vaativat 24/7/365 palvelua Tietoa käyttäjälle sovelluksen ensisijainen tarkoitus on hypermedian keinoin tarjota tietoa eri esitysmuodoissa Sisällön tärkeys sisällön laatu ja esitystapa tärkeimmät sovelluksen laatutekijät Jatkuva evoluutio Web sovellukset kehittyvät jatkuvasti, eivät suunnitelluin julkaisuin, kuten perinteiset!26
Web sovelluksen ominaispiirteet Välittömyys (kehittämisnopeus) Web sovellusten kehittämisaika muutamia päiviä/viikkoja Varmuus sovelluksen käytön oltava turvallista käyttäjän kannalta Esteettisyys teknisen suunnittelun lisäksi tarvitaan myös visuaalista suunnittelua!27
4. Ohjelmistotuotannon peruskäytänteet ja periaatteet Ohjelmistotuotannon peruskäytänteet How to solve it, Polya 1945 Ymmärrä ongelma kommunikointi ja analyysi Suunnittele ratkaisu mallintaminen ja ohjelmistosuunnittelu Toteuta suunnitelma koodin generointi Testaa toteutusta testaus ja laadunvarmistus!28
4. Ohjelmistotuotannon 7 ydinperiaatetta / Hooker 1996 1/2 Ohjelmistotuotannon periaatteet Hooker 1996 The reason it all exists Tuotetun ohjelmiston tulee olla hyödyllinen käyttäjälle, älä lisää mitään ominaisuuksia, jotka eivät tuo lisäarvoa KISS kaiken suunnittelun tulee olla niin yksinkertaista kuin mahdollista, mutta ei yksinkertaisempaa Maintain the vision selvä visio tavoitteesta on onnistuneen projektin tae What you produce, others will consume ohjelmistoa ei kehitetä tyhjiössä, määrittele, suunnittele ja koodaa ohjelmisto se mielessä, että jonkun muun täytyy ymmärtää tuotoksesi!29
4. Ohjelmistotuotannon 7 ydinperiaatetta / Be Open to the Future Hooker 1996 2/2 järjestelmien elinkaari on pitkä - ylläpitoa tarvitaan, älä suunnittele itseäsi nurkkaan, muista suunnitellessasi entäpä jos kysymykset Plan Ahead for Reuse uudelleenkäyttö säästää aikaa ja työpanosta, mutta uudelleenkäytettävyyden huomioiminen komponentin suunnittelussa ja toteutuksessa lisää myös kustannuksia (25-200%) Think! parempiin tuloksiin pääsee, kun miettii hetken ennen tekemistä http://c2.com/cgi/wiki?sevenprinciplesofsoftwaredevelopment!30
5. Onko jokin prosessimalli (elinjaksomalli) paras? Vertaa: Ohjelmistotuotannon yleiset käytänteet How to solve it Polya 1945 Prosessikehikon aktiviteetit Pressman 2005 kommunikointi projektisuuunnittelu mallintaminen rakentaminen toimitus, käyttöön vieminen (deployment)!31
Käyttäjän tarpeet Vesiputousmalli Vaatimusmäärittely Toiminnallinen suunnittelu - käyttöliittymän suunnittelu - käyttötapausanalyysi Ohjelmistosuunnittelu Toteutus Integrointi ja testaus Käyttöönotto ja ylläpito!32
Lisäyksin etenevä kehittäminen (inkrementaalinen) Kommunikointi Ohjelmiston toiminnallisuus ja ominaisuusdet Lisäys 1 Lisäys 2 Lisäys n Lisäyksen 1 toimitus Lisäyksen 2 toimitus Lisäyksen n toimitus Projektin suunnittelu Mallintaminen Rakentaminen Toimitus Projektin kalenteriaika!33
(Rational) Unified Process (iteratiivinen ja inkrementaalinen) Inception (aloitus) Elaboration (kehittäminen) suunnittelu mallintaminen kommunikointi rakentaminen julkaisu ohjelmiston uusi osa toimitus Production (tuotanto) Transition (siirto) Construction (rakentaminen)!34
Scrum prosessi (sprintti ja sen katselmointi) Kehitä, paketoi, katselmoi, sovita (ei vaadita peräkkäisyyttä) Sprintin työlista: - ominaisuudet yhteen Sprint -kierrokseen Päivittäin 30 päivää 15-30 minuutin päivittäinen Scrum tapaaminen ( tilannekatsaus) Ei projektipäällikköä, Scrum master valvoo prosessin noudattamista Uusi toteutettu ominaisuus Tuotteen työlista (backlog): - asiakkaan haluamat ominaisuudet Sprintin katselmointi: sidosryhmä osallistuu
6. Onko jokin suunnittelumenetelmä paras (ja jokin kuvausmenetelmä ainoa ja oikea)? Suunnittelumenetelmät ovat aikansa lapsia (kaikissa eri abstraktiotason kuvauksia) 1980 luvulla JSD (Jackson System Development), Jackson 1983 MSA (Modern Structured Analysis), Yourdon 1989 1990 luvulla oliomenetelmät ja kuvaustavat, kuten OOA & OOD, Coad & Yourdon 1991 OMT, Rumbaugh et al. 1991 UML kuvaustavan määrittely, Rumbaugh et al. 1999 UML & RUP prosessi, Jacobson et al. 1998 OMT++, Jaaksi et al. 1999 2000 luvulla UML & RUP valtakausi jatkuu!36
Olioperustainen ohjelmistokehitys Rakenne Korkean tason toiminnallisuus Käyttötapauskaaviot Käyttäytyminen Ohjelmistokehitys Esimerkkejä Oliokaaviot Sekvenssikaaviot Yhteistyökaaviot Sijoittelukaaviot Luokkakaaviot Tilakaaviot Aktiviteettikaaviot Komponenttikaaviot Koskimies K., Oliokirja, 2000!37
Use case; Sending a short message Description: The user writes a short message and adds his signature to the end of the message. Then he sends the message to selected recipients. User System Phone request() send() OK User MainView MainController Phone request() sendrequest() send() OK showmessage( Done ) Analyysi Arkkitehtuuri- suunnittelu User MainView MainController r: Recipient p : Phone buttonpressed() sendrequest(text,names) [while names] nbr = getnumber(name) OK send(txt,nbr) showmessage( Done ) class MainController{ MainView v; Recipient r; Phone p; void sendrequest(string txt, String [] names) { for (String name : names) { nbr = r.getnumber(name); p.send(txt,nbr); v.showmessage( Done ); } } } Ohjelmointi Yksityiskohtainen suunnittelu Pienimuotoinen esimerkki ratkaisun tarkentumisesta
7. Miten ohjelmiston laatuvaatimukset vaikuttavat ohjelmiston kehittämiseen? luotettavuutta korostava (dependability, reliability) tuotteen laatuominaisuuksia tarkasteleva Toiminnallisuus (Functionality) suitability, accuracy, interoperability, security Luotettavuus (Reliability) maturity, fault tolerance, recoverability Käytettävyys (Usability) understandability, learnability, operability, attractiveness Tehokkuus (Efficiency) time behaviour, resource utilisation Ylläpidettävyys (Maintainability) analysability, changeability, stability, testability Siirrettävyys (Portability) adaptability, installability, coexistence, replaceability!39
Mitä ohjelmistovirheet voivat aiheuttaa? Vakavia onnettomuuksia Therac-25 sädehoitolaitteisto antoi liian suurta säteilyä 80 luvulla Ariane-5 raketti tuhoutui lähdössä 1996 Mars luotain tuhoutui 1999 Pienempiä häiriöitä - yleensä uusien ohjelmistoversioiden käyttöönoton yhteydessä Häiriöt puhelinkeskusten toiminnassa Häiriöt matkapuhelinten toiminnassa Häiriöt pankkien maksuliikenteen hoidossa Häiriöt pankkiautomaattien toiminnassa Häiriöt autojen toiminnassa!40
Häiriö (failure) = järjestelmä ei käyttäydy käyttäjän tai asiakkaan toivomalla tavalla Jos puutteellisuutta ei löydetä kehitysvaiheessa, ohjelmaan jää vika (fault), joka aiheuttaa joko säännöllisiä tai satunnaisia häiriöitä Ohjelmistosuunnittelija tai ohjelmoija tekee virheen (mistake), joka aiheuttaa puutteellisuuden (defect) ohjelmisto-suunnitelmaan tai koodiin!41
Millä tekniikoilla ohjelmiston laatua parannetaan? Käyttäjän tarpeet Ohjelmisto käytössä Vaatimusmäärittely Käytettävyys- testaus Hyväksymis- testaus Tarkastus eri vaiheissa Toiminnallinen suunnittelu - käyttöliittymän suunnittelu - käyttötapaus-analyysi Ohjelmisto- suunnittelu Testisuunnitelmat Integrointi- testaus Järjestelmä- testaus Toiminnallinen testaus Regressiotestaus Koodaus Yksikkö- testaus!42
$16.000 $14.000 $14.102 $12.000 $10.000 $8.000 $6.000 $7.136 $4.000 $2.000 $139 $455 $977 Vaatimusm. Suunnittelu Koodaus Testaus Ylläpito Virheiden ja puutteellisuuksien korjauskustannukset (Pressman 2010, Boehm & Basili 2001)!43
8. Mitkä tekijät aiheuttavat eniten ohjelmistovirheitä? / Galin 2004 Vaatimusmäärittelyjen virheet virheelliset, puutteelliset, ylimääräiset ominaisuudet ongelmat asiakas-kehittäjä kommunikoinnissa Loogiset suunnitteluvirheet virheelliset algoritmit ja prosessin virheet raja-arvovirheet virhetilanteiden puuttuva käsittely Koodausvirheet Testausprosessin puutteet puutteelliset testisuunnitelmat ajanpuute Dokumentointivirheet ei esitellä kaikkea tarpeellista esitellään ylimääräisiä toimintoja virheet käyttöohjeissa!44
9. Mikä on ylläpidon rooli? Muutokset ohjelmistoon ovat väistämättömiä Ohjelmiston elinjakson pituus vaikuttaa ylläpidon osuuteen ohjelmiston kokonaiskustannuksista Ylläpito voi olla neljää eri tyyppiä; ennalta ehkäisevää, korjaavaa, täydellistävää tai mukauttavaa Korjaus Laajennus Proaktiivinen Ennalta ehkäisevä Täydellistävä Reaktiivinen Korjaava Mukauttava!45
Ohjelmiston evoluutio Mitä vanhoille olemassa oleville (legacy) ohjelmille pitäisi tehdä? ei mitään, jos ei aiheuta ongelmia uudelleen rakentamista (re-engineering), jos halutaan ylläpitää (parantaa rakennetta tai lisätä uusia piirteitä) reverse engineering, tuotetaan (puuttuva tai paikkaansapitämätön) kuvaus ylemmälle abstraktiotasolle restructuring ja refactoring, tehdään uusi rakenteeltaan parempi ratkaisu (samalla abstraktiotasolla)!46
Esimerkki elinkaarikustannusten jakautumisesta (Schach 1999) Ylläpito (67%) koostuu virheiden korjauksista asiakkaan toiminnan ja ympäristön muuttumisen vaatimista korjauksista uusien piirteiden lisäämisestä Jouni Lappalainen, Ilkka Tervonen, additions by Antti Juustila
10. Miten ohjelmistojen kehitys muuttuu A. Kuvausmenetelmänä UML ei muutosta B. Ketterien menetelmien voittokulku jatkuu tulevina vuosina? C. Pilvipalvelujen (pilvilaskenta, cloud computing) rooli kasvaa Pilvipalvelujen käyttämä verkko; eri pilvityyppejä: Yksityinen pilvipalvelu, (Private cloud) oma tai vuokrattu, resurssit ainoastaan yrityksen omassa käytössä (oma suljettu verkko) Yhteisön omaan käyttöön tarkoitettu pilvipalvelu (Community cloud) Resurssit jaettuja ainoastaan määritellyn yhteisön käyttöön. Julkinen pilvipalvelu (Public cloud) Julkinen pilvi, avoin, lähes rajoittamattomat resurssit ja käyttäjät. Infrastruktuuri sijaitsee jaetuilla palvelimilla muiden samaa pilvipalveluntarjoajaa käyttävien asiakkaiden kanssa Yhdistelmäpilvipalvelu (Hybrid cloud) Edge tai Mist (liittyen IoT) - IoT -laitteiden ja pilven välissä oleva optimoiva pilvityyppi!48
Tunnetuimmat pilvipalvelun palvelutyypit IaaS - Infrastructure as a Service, IT infrastruktuuri, verkko, laitteistot ja sovellukset hankitaan pilvipalveluna PaaS - Platform as a Service alustapalvelu, jonka päälle asiakas voi rakentaa sovelluksia, esimerkiksi Googlen AppEngine, Microsoftin Azure. SaaS - Software as a Service sovellus tai sovelluksia hankitaan pilvipalveluna. Cloud == somebody else s server?!49