Arkisto aiheelle ‘Ylläpito’

Säätöreissun anatomia

lauantaina 22. elokuuta 2009

Taustaa

Jotkut ovat jo saattaneet huomata, että tässä kuluneen viikon aikana on ollut härdelli tietokantojen ympärillä. Hommahan meni jokseenkin niin, että havaitsimme silloisen Puolukan, tietokantapalvelimen, olevan kovinkin kuormittunut. Varsin nopeasti syntyi idea uuden tietokantakoneen hankkimisesta, sillä olihan vanha puolukka jo melkein neljä vuotta palvellut, mikä onkin käytännössä maksimaalinen käyttöikä palvelimille Kapsin käytössä. Edellisen keskiviikkona kyselimme toimittajilta hieman raudan perään ja torstaisessa hallituksen kokouksessa päätimme tilata palvelimen. Palvelin saapuikin jo seuraavan viikon maanantaina Nebulalle, jossa Kapsin laitteisto sijaitsee. Tämän viikon keskiviikkona sitten lopulta se käytiin säätämässä räkkiin ja tässä siltä reissulta hieman laajempi kuvaus.

Keskiviikko 19.8.

Heräsin hieman ennen neljää, hyvissä ajoin ennen lentokentälle lähtöä. Lentoni lähtisi kuudelta Helsinkiä kohti. Selvisin kentälle myöskin hyvissä ajoin ja onneksi olin speksannut tavarat pelkiksi käsimatkatavaroiksi. Lähtöselvityksessä oli karsea jono.

19.8.2009_säätöreissu03

Lento Helsinkiin lähti ja saapui ajoissa, mikä lienee aika normaali suorite nykyään.

19.8.2009_EFOU-EFHK_OH-LXK11

Helsingin päässä sainkin oppia kantapään kautta, että pidetään aina käteistä matkassa. Kävelin terminaalista tyytyväisenä odottelevaan linjan 615 bussiin ajatellen, että tämähän kävikin helposti. Lykkäsin kuskille pankkikortin kouraan ja vastauksena tuli ettei kelpaa. Fail. Oulussa nimittäin kaikissa busseissa käy kortit. Onneksi ei ollut kiire päällä, sovittu tapaaminen Nebulalla oli vasta kello 11, lopulta päädyin menemään taksilla tätini luo, josta järjestyikin näppärästi liikkuminen avuliaan jäsenen autolla lopun päivää.

Nebulalle saapuessa ensimmäisenä piti rueta ihmettelemään varsin merkittävää laatikkoläjää, jossa oli kone ja kaikki tilatut lisäpalikat. HP toimittaa palvelimet yleensä runkona, johon joutuu lisäämään mahdollisen toisen prosessorin, muistia ja levyt. Meillä oli kuitenkin runkona ns. performance server, jossa oli toinen prosessori ja virtalähde jo valmiina. Tarvitsi siis vain lisätä muistit ja levyt. Palvelimen kasauksessa tuli hieman aluksi ihmettelyitä joidenkin osien mekaniikan kanssa, kun tämä oli yhdistyksen ensimmäinen 6. sukupolven DL380, jossa on hieman erilainen konfiguraatio osilla palvelimen sisällä. Kasaus meni kuitenkin ilman suurempia murheita.

puolukka puolukka2

puolukka4 puolukka5

Seuraavaksi oli aika siirtyä konesaliin (josta ei ole, eikä tule kuvia, koska siellä ei saa kuvata) ihmettelemään. Etäsääsätäjät Oulusta olivat jo sammuttaneetkin vanhan puolukan päästessämme räkkikaapille ja meidän tarvitsi vain poistaa vanha kone siitä. Kone lähtikin varsin helposti pois, mutta koneen räkkikiskot olivatkin sitten hieman isompi härdelli. Puolukka sijaitsee räkissä keskellä, muiden palvelimien ympäröivänä ja 2U palvelimen tekemä rako ei ole kovin iso tila missä tehdä töitä, varsinkaan kun ympärillä on tuotantopalvelimia, joiden toimintaa ei saa häiritä. Lopulta vietimme konesalissa reilun tunnin säätäen uuden koneen siihen tilaan, että etäsäätäjät Oulusta pääsivät siihen käsiksi.

Vanha Puolukka oli päätetty kuljettaa Ouluun ylläpidon käsittelyyn, ennen palvelimen poistamista yhdistyksestä. Suunnittelimme jo ennen säätöreissua, että kone tulee nätisti uuden koneen laatikossa lentokoneen ruumassa ja kovalevyt käsimatkatavaroissa. Suunnitelma vaikutti vielä pakkaamisen jälkeenkin ihan toimivalle ja olin varsin luottavaisin mielin konseptista. Kokeilin nostaa Puolukan laatikkoa ja totesin sen varsin raskaaksi. Lentokoneissa on Finnairilla absoluuttinen 32kg raja ruumatavaran kanssa ja epäilin tämän rajan olevan ainakin lähellä. Nebulan alakerrassa sijaitsee Postin toimisto ja keksinkin, että heidän vaa’allahan on hyvä mitata laatikon todellinen paino. Rahaasimme toisen säätäjän kanssa laatikon alakertaan Postiin, jossa avulias nuori virkailija antoi meidän käyttää vaakaa ja totesimme laatikon painoksi 27,2kg. Ei siis mitään hätää. Viereinen Postin virkailija tosin katsoi touhua hieman epäluuloisen näköisenä, kun nostimme jättimäistä laatikkoa pienelle vaa’alle.

puolukka6

Poistuimme Nebulalta lentokentälle vanha Puolukka takakontissa, ideana tehdä lähtöselvitys jo ajoissa, vaikka kone lähtisikin vasta kello 2020. Pääsemme lentokentälle ja ensimmäinen toteamus on, että lähtöselvitykseen on 100m jonot, ei hyvä. Lähtöselvitysautomaatit tosin tarjosivat onneksi oikotien ja varsin lyhyen odottelun jälkeen pääsimme Finnairin baggage-drop tiskille Puolukan laatikon kanssa. Virkailija oli hieman epäuskoisen näköinen nähdessään massiivisen lootan, mutta totesi kuitenkin vain tyynesti, että ”ompa vähän ylipainoa”. Kotimaassahan sallittu maksimi on 20kg, jonka tiesinkin etukäteen. Laskimme tosin, että vaikka tuliskin ylipainomaksuja niin on halvempaa tehdä kuljetus näin kuin kuriirifirmalla tai vastaavasti. Nopean selvittelyn jälkeen Puolukka olikin matkalla Helsinki-Vantaan terminaalin uumeniin prosessoitavaksi oikealle lennolle.

Tuloksena oli varsin tehokkaasti suoritettu säätöpäivä, jossa ei varsinaisen säädön kannalta ollut isompia ongelmia ja aikaakin jäi hyvin ennen lennon lähtöä. Ehdinkin tavata lentokentällä pari kaveria mainiosti.

Turvatarkastuksessa tuli hieman hauska tilanne laukussa olevien kovalevyjen takia. Ilmeisesti 4 kovalevyä paketoituna kuplamuoviin näytää hyvin jännittävälle läpivalaisussa. 🙂 Tuloksena oli 2 läpivalaisukertaa laukussa ja 2 ulkona laukusta.

Lentokin lähti ajoissa, mutta sitten iskikin päivän isoin tappio. Nimittäin eipä ensimmäisellä yrityksellä Ouluun päästy. Vähän ennen Oulua kapteeni kertoi, että perämiehen tuulilasissa on säröjä(ks. kuva) ja huollon vuoksi menemme takaisin Helsinkiin. Just näin, kivaa. Lopulta Helsingissä oli organisoiduttu varsin hyvin tilanteeseen ja alle tunnin maassa olemisen jälkeen olimme toisella koneella matkalla Ouluun. Lopullinen myöhästyminen noin 3 tuntia.

19.8.2009_EFHK-EFHK_OH-LXK02 19.8.2009_EFHK_OH-LXK03

Sitten jännäsin kovasti, että tuleeko Puolukan laatikko ehjänä Ouluun. Vaikka olenkin paljon reissannut, en ole koskaan laittanut vastaavalla konseptilla ruumatavarana mitään. Lyhyen odottelun jälkeen Puolukka tulikin ja totesin laatikon täysin ehjäksi. Erittäin hyvä, Finnair. Laatikon koko oli myös aika sopiva, sillä se juuri ja juuri mahtui takakonttiin Corollassa, jolla oli tarkoitus matkata kentältä kotia. Olin jo varautunut purkamaan palvelimen laatikosta kentällä sen perustella, miten hurjasti laatikko vei tilaa jo farmarimallisessa S4:ssä.

puolukkasorollassa

Vaikka takana oli erittäin raskas päivä, niin fiilis oli kuitenkin mainio. Monta kokemusta rikkaampana ja asiat hoidossa. Etäsäätäjätkin olivat saaneet jo konetta ajoon pikkuhiljaa. Näin sen homman pitää toimia.

Lopuksi

Kiitokset Matti Averiolle dokumentoinnista, säätöavusta ja transportaatiojärjestelyistä, niistä oli todella iso apu tällä reissulla.

Uusi Puolukka otettin lopulta ajoon torstaina ja perjantain välisenä yönä, vain reilu vuorokausi asennuksen jälkeen. Lopulta koko prosessi hankintapäätöksestä tuotantoon kesti vain viikon. Sanoisin, että Kapsi todellakin toimii.

Virallista tiedotetta odotellessa myöskin tämä tiedoksi jäsenille. Vanha Puolukka aiotaan luovuttaa tyhjäyksen jälkeen jollekkin Kapsin kannalta mahdollisimman tarkoituksenmukaiselle yhdistykselle. Jos on moisia yhdistyksiä mielessä, niin kannattaa olla yhteydessä hallitukseen.

Ylläpitopyynnöistä

lauantaina 25. heinäkuuta 2009

Melko usein, ehkä kerran pari viikossa, joku kyselee irkissä #kapsi.fi-kanavalla (tai muuallakin) onko ylläpitäjiä paikalla. Yleensä silloin taustalla on, että kysyjä haluaa pyytää ylläpitoa luomaan itselleen jonkin palvelun tai ’pienen’ muutoksen palveluun. Tällaisissa pyynnöissä on joitain ongelmia, joista haluaisin kertoa. Tyypillisesti vastauksena kysyjälle sanotaan ”laita sähköpostia ylläpidolle” tai muuta vastaavaa. Tämä saattaa tuntua hieman tylyltä; miksi juuri minun pyyntöäni ei voida tehdä irkkipyynnön perusteella jos kerran ylläpitoa istuu kanavalla?

Jono

Normaalisti sähköpostilla tulleet pyynnöt käsitellään saapumisjärjestyksessä, jos vain mahdollista. Jos pyyntöjä tehdään irkissä, ne menevät OTRS-tukijärjestelmän jonon ohi. Tämä ei ole reilua.

Kirjallinen jälki

Kun pyynnöt tehdään tukijärjestelmän kautta, niistä jää kirjallinen jälki. Samalla pysytään kärryllä siitä kuka pyyntöihin on vastannut ja miten. Pyydetyt asiat saadaan tehtyä loppuun asti ja jos tulee parin päivän päästä lisättävää samaan asiaan, pysyy koko viestiketju tallessa. Näin siitäkin huolimatta, että joku muu ylläpitäjistä hoitaisi asiaa.

Tehokkuus

Sähköpostiviestiä kirjoittaessa pystyy miettimään tarkasti mitä tarvitsee ja ylläpitäjän tarvitsee kysellä vähemmän asioita. Vapaaehtoisten ylläpitäjien rajallisesta ajasta saadaan enemmän irti, kun kaikki tiedot ovat käytettävissä kerralla sähköpostiviestissä. Ylläpitäjien omalle irkkikanavalle tulee tieto reaaliajassa uusista tiketeistä eli ylläpidolle lähetetyistä sähköpostiviesteistä!

Erilaiset hatut

#kapsi.fi on ensisijaisesti jäsenten kanava, eikä ylläpidon päivystyskanava. Moni ylläpitäjä keskustelee kanavalla omana itsenään, eikä välttämättä halua tehdä töitä juuri silloin kun sinä haluaisit. Ylläpitäjäkin on vain ihminen. Ajattele omalle kohdallesi: kun poistut töistä työpäiväsi päätteeksi, luultavasti haluat (tai haluaisit) ettei sinua vaivata työasioilla ennen seuraavaa työpäivää. Suothan tähän mahdollisuuden myös ylläpitäjille?

Loppusanat

Käytäntö sähköpostin käyttämisestä ylläpitopyyntöihin saattaa tuntua tylyltä, mutta sen takana on tavoite tarjota tasapuolista, laadukasta ja tehokasta palvelua jäsenille. Toivon, että kun minä tai joku muu kanavalla pyytää ottamaan yhteyttä ylläpitoon sähköpostitse, et ota sitä loukkaavana. Pyynnöt toistuvat kanavalla sen verran usein, että vastaukset pitkään toiminnassa mukana olleilla saattavat olla joskus lyhyitä ja ytimekkäitä.

Kiitos.

SFTP-ongelmia

torstaina 16. huhtikuuta 2009

Helpdeskiin on nyt Lakan ja Xobin päivityksien jälkeen tullut muutamia viestejä koskien ongelmia SFTP:llä kirjautumista. Ongelmaa on ilmennyt F-Secure SSH Clientilla sekä SSH Secure Shell Clientin ja CuteFTP:n vanhoilla versioilla. Kaikki ongelmia aiheuttaneet ohjelmat ovat olleet useita vuosia vanhoja.

Ihan mielenkiinnosta lähdin selvittämään ongelmaa laajemminkin omalla kotipalvelimella. SSH:n ja SFTP:n logit eivät tarjonneet juuri mitään tietoa vaikka debug-asetukset olivat täysillä: yhteydenmuodostus katkesi heti versionumeron lähetyksen jälkeen. Korvasin siis sftp-serverin omalla skriptillä, joka tallensi sftp-serverille välitetyt viestit välistä. Nämä sitten tulkitsin heksaeditorin ja sftp:n standardiluonnoksen avulla.

Tästä syy selvisikin helposti. Debian Lennyn mukana tuleva versio sftp-serveristä lähettää versionumeron mukana extension pair -lisämääreitä, joita nämä ohjelmat eivät ilmeisesti ymmärrä. Näille on kuitenkin varattu paikka jo ensimmäisissä standardiluonnoksissa, joten ohjelmien toteutus on selkeästi virheellinen.

Koska kyseiset ohjelmat ovat niin vanhoja, ei niiden valmistaja korjaa ongelmaa. Myöskään Debianin tai openssh:n on turha odottaa tekevän muutoksia virheellisten yhteysohjelmien vuoksi. Siispä, jos SFTP-kirjautuminen ei onnistu, päivitä ohjelmasi tai vaihda FileZillaan.

Toimitiloja yhdistykselle

tiistaina 31. maaliskuuta 2009

Kapsin toiminta on paisunut viime vuosina ja ihan kuukausinakin melkoisen pullataikinan lailla. Toimihenkilöillä on nykyään varsin paljon tekemistä – niin hallituksessa kuin eri toimiryhmissäkin. Erilaisten kokouksien ja säätöiltojen järjestäminen on tullut myöskin yleisemmäksi kun on havaittu, että varsinkin isot projektit hyötyvät näistä todella paljon. Ei ole tavatonta, että yhden illan aikana saadaan enemmän aikaan kuin viikossa/viikoissa ilman miittejä jos on oikeat ihmiset koottuna samaan paikkaan.

Näiden säätöiltojen ja säännöllisten kokousten järjestäminen alkaa käydä yksittäisille toimihenkilöille varsin kuormittavaksi eikä se ole kovin tarkoituksenmukaista, että säätöillat tai kokoukset vähenisivät. Onneksi olemme tähän asti saaneet pidettyä joitain miittejä erään toisen yhdistyksen tiloissa, mikä on vähentänyt kuormitusta toimihenkilöille. Tämä tosin ei ole pidemmällä tähtäimellä kestävä tai suotava toimintamalli.

Nyt olemme ryhtyneet pohtimaan josko pikkuhiljaa aika olisi oikea Kapsille hommata omat toimitilat.

Toimitilat voivat olla joko ihan toimistotilat tai sitten sopivan kokoinen ja mallinen asunto. Tiloissa tulisi olla ylläpidolle/toimiryhmille säätötila ja erillinen kokoustila.

Nykyisen kokemuksen valossa toimitila nostaisi toimihenkilöiden tuotteliaisuutta ja tekisi toimihenkilöille helpommaksi hoitaa yhä enemmän asioita kasvotusten. Tästä tietenkin jäsenet hyötyvät kun asiat tapahtuvat nopeammin ja enemmän kerralla.

Se, että miten toimitilaa mahdollisesti ryhdytään hankkimaan on vielä täysin avoinna, mutta mahdollisia toimintamalleja on useita kuitenkin. Mainittakoon kuitenkin, että yhdistyksen nykyinen taloudellinen tilanne on varsin hyvä toimitilahankintaa ajatellen. Vuosikokouksessa on tarkoitus keskustella jäsenistön kanssa tarkemmin toimitiloista kuten eilen lähetetyistä vuosikokouskutsuista käy ilmi, toivottavasti sinäkin olet paikalla ottamassa kantaa! 🙂

Mailihärdelli 2009

lauantaina 14. maaliskuuta 2009

Aluksi hieman historiaa

Aikoinaan kun Kapsin palvelimia pystytettiin, valittiin palvelinohjelmistoiksi pääasiassa säätäjille tuttuja ja yleisesti käytössä olevia ohjelmistoja. Tämä vaikutti silloin myös mm. imap-ohjelmiston valintaan, tai luulen että se silloin oli epävalinta, sillä käyttöön luultavasti päätyi ilman sen suurempaa valintaprosessia unix-maailmassa ja linuxillakin käytännössä de-facto ohjelmisto UW-Impad, joka on tyypillisesti bundlattu de-facto sähköpostiohjelman pinen kanssa.

Nyt on kuitenkin niin, että U of W kaikessa arvovaltaisuudessaan on tuottanut julkaisemillaan softilla lukemattomia päänsärkyjä sekä käyttäjille että ylläpitäjille. Esimerkiksi UW-Imapd on auttamatta vanhanaikainen, suorituskyvytön ja muutenkin inhottava. UW tuskin tulee tekemään asialle yhtään mitään. Uskon, että moni käyttäjien kohtaama ongelma voidaan kuitata toteamalla ”koska uw-imapd”.

Miksi sitten

Tiedämme nyt, että uw-imapd on huono. Miksi se sitten on vielä käytössä?

Itseasiassa, olemme päättäneet korvata imap-ohjelmiston Dovecotilla, joka on huomattavasti muokattavampi ja suorituskykyisempi. Tässä kohtaa tulee eteen kuitenkin muutama gotcha, jotka tekevät vaihtamisesta hieman kimuranttia, varsinkin kun käyttäjiäkin on jo pitkälti toista tuhatta. Jännimmät ongelmat liittyyvät siihen, että uw-imapd tarjoaa oletuksena suoran pääsyn kotihakemistoon, jolloin jos käyttäjä ei ole hoksannut asettaa ohjelmaansa jotain fiksua folder prefiksiä, on uudet kansiot luotu suoraan sinne. Dovecot on tässä kuitenkin fiksumpi, eikä oletuksena tarjoa pääsyä suoraan kotihakemistoon ja niin haluamme sen myös pitää. Ohjelman vaihtaminen siis ilman erityisiä toimenpiteitä aiheuttaisi siis sen, että joltain osalta käyttäjiä joutuisi kansiot näkymättömiin, joka luultavasti aiheuttaisi suurta hämmennystä ja ylimääräistä kuormaa ylläpidolle.

Miten korjataan?

Olemme piakkoin siirtämässä sähköpostipalveluja poistuvalta mulperi-palvelimelta toiselle hieman tuoreemmalle koneelle. Tämä on myös hyvä mahdollisuus vaihtaa imap-softa parempaan.

Olemme valmistelleet joukon automaatioita, joiden avulla on tarkoitus järjestellä imap-käyttäjien kansiot niin, että niiden toiminta jatkuisi mahdollisimman saumattomasti siirron jälkeen.

Tämä on teknisesti mahdollista, sillä kummankin ohjelmiston tapa säilyttää tieto sähköpostiohjelman käyttämistä kansioista on erittäin yksinkertainen. Suurimmaksi osaksi siirto tarkoittaa teknisesti sitä, että yhden tiedoston sisältö siirretään toisennimiseen tiedostoon lähes sellaisenaan. Niiden kohdalla, jotka eivät ole ohjelmassaan käyttäneen prefiksiä täytyy kuitenkin tehdä jotain muutakin, vaihdon jälkeen kun kotihakemiston juuressa sijaitsevat kansiot katoaisivat näkyvistä. Tällöin automaatio pyrkii siirtämään kansiot juuresta mail-hakemistoon, sillä ehdolla, että siellä ei ole jo saman nimistä kansiota. Tässä kuvaan astuu siis myös jonkinlainen parhaimman arvauksen periaate, jossa lopputulos saattaa tuottaa jonkin verran kevyttä hämmenystä käyttäjälle. Mitään ei kuitenkaan tuhota tai kirjoiteta yli, joten tilanne on katastrofin tapahtuessa korjattavissa.

Dovecot tarjoilee postit siis oletusarvoisesti mail-hakemistosta, joka vuoksi sähköpostiohjelmaan ei välttämättä enää tarvitse asettaa mitään prefiksiä, mutta sekä ”mail” että ”Mail” toimivat edelleen vastaavalla tavalla kuin ennen (Mail-prefiksillä saa Mail-hakemiston esille).

”Mail” ja ”mail” viittaavat siis kotihakemistossa sijaitsevaan hakemistoon, missä sähköpostiohjelmat säilyttävät kansionsa. Ero on siis oikeasti alkukirjaimen kapitalisaatiossa. Sähköpostiohjelmissa on eroja kumpaa muotoa ne suosivat.

Apua, ylläpitäjät lukevat/sotkevat/rikkovat postini!

Eivätkä lue.

Automaatiot on tehty niin, etteivät edes ne avaa missään vaiheessa kansioita luettavaksi. Ainoat tiedostot mitä luetaan ja kirjoitetaan ovat imap-ohjelmistojen käyttämät metatiedostot, jotka sisältävät niiden kansioiden nimet, mitkä käyttäjä haluaa ohjelmassaan näkyvän.

Olemme kuitenkin valmistelleet myös menetelmän, jolla käyttäjä voi kieltää automatiikkaa koskemasta tiedostoihinsa. Tällöin kaikki tarvittava muunnostyö jää kokonaan käyttäjän omille harteille. Menetelmä toimii siten, että kotihakemistoon lisätään tiedosto ”.hammertime”, esimerkiksi komennolla:

~$ touch ~/.hammertime

Uskallan luvata, että ilman automatiikan kosketusta joutuu mm. kaikki imap-kansiot lisäämään sähköpostiohjelmalla uudelleen luettaviksi (subscribe IMAP-folders). Jos et varmasti tiedä mitä pitää tehdä silloin jos mailisi katoavat näkyvistä siirron jälkeen, emme suosittele automaation estämistä.

Uusia palvelimia

perjantaina 21. maaliskuuta 2008

Noh. Nyt se on taas tehty. Nimittäin yhdistyksen historian suurin palvelinhankinta. Edellisestähän (uusi xob+levypakka) olikin menny jo kuusi kuukautta, joten olihan se aikakin.

Viimeaikoina on ollut havaittavissa monissa yhdistyksen järjestelmissä hidasta toimintaa ja pätkimistä. Kasvaneen käyttäjämäärän vuoksi nykyiset palvelimet alkavat olla kapasiteettinsä äärirajoilla, joten asiaan piti saada korjaus, siispä tilasimme neljä uutta palvelinta yhdistyksen tarpeisiin.

Ensimmäinen uusi palvelin on HP DL380G5 kalustettuna kahdella Intelin neliytimisellä E5460 (3,16 GHz) Xeon prosessorilla ja 16 gigatavulla virheenkorjaavaa keskusmuistia. Tämä palvelin tulee uudeksi shell-palvelimeksi nykyisen Lakka-palvelimen tilalle.

Toinen uusi palvelin on myöskin HP DL380G5, joskin hieman maltillisemmin kalustettuna. Tässä palvelimessa on kaksi kappaletta Intelin E5420 (2,50 GHz) Xeon -prosessoria ja kahdeksan gigatavua virheenkorjaavaa keskusmuistia. Tämä palvelin tulee palvelemaan WWW-sivuja nykyisen Vadelman (vhost) tilalla.

Kolmas ja neljäs palvelin ovat identtisiä HP DL360G5 -palvelimia joissa on yksi Intelin neliytiminen E5320 (1,86GHz) Xeon -prosessori ja 4 gigatavua virheenkorjaavaa keskusmuistia. Nämä palvelimet tulevat ylläpidon ja hallinnon käyttöön. Nykyinen hallinnon palvelin, Tyrni, jossa on kaikki yhdistyksen hallinnon kannalta kriittiset järjestelmät on jo 4 vuotta vanhaa PC-rautaa jonka etähallinan mahdollisuudet ovat rajalliset ja elinikä tuotantokäytössä lopussa. Toinen uusista palvelimista on tarkoitus laittaa ylläpidon testauspalvelimeksi jotta tulevaisuudessa ei tarvitsisi asentaa testaamattomia kerneleitä tai muita päivityksiä jotka voivat potentiaalisesti hajottaa tuotantokoneiden järjestelmiä.

Kaikissa neljässä palvelimessa on vikasietoiset virtalähteet ja kaksi 146 GB:n SAS-levyä järjestelmää varten.

Tämän järjestelmäuudistuksen yhteydessä nykyinen Lakka -palvelin siirretään palvelemaan yksinomaan levyjä järjestelmän muille koneille Lakan takuuajan loppuun asti (tammikuu 2009). Nykyinen Vadelma (vhost) siirretään sähköpostipalvelimeksi jonne myöskin laitetaan keskitetty roskapostien suodatus.

Palvelimien lisäksi tilattiin 8GB lisää muistia Lillukka (xob) -palvelimelle. Tämä tulee aiheuttamaan tulevalla viikolla hetken palvelukatkon xobilla kun uusi muisti asennetaan. Käyttökatkosta ilmoitetaan tarkemmin kun se on ajankohtainen.

Tämän hetkisen suunnitelman mukaan uusien palvelimien fyysinen asennus tapahtunee ensi viikon loppupuolella ja tämä tulee aiheuttamaan hetkellisen katkoksen www-palveluihin kun Vadelma-palvelimeen lisätään muistia. Tästä myöskin tiedotetaan erikseen kun tarkempi ajankohta on tiedossa.

Uusien palvelimien käyttöönotto tulee aiheuttamaan käyttökatkoksia aikanaan, mutta on ainakin useiden viikkojen projekti asentaa, testata ja testata vielä uudestaan uusien palvelimien ohjelmistopuoli ennen käyttöönottoa.

Tämmöinen ”pieni” projekti siis tiedossa tässä kevään aikana. Toivottavasti tällä sitten selvitäänki se sama reilu kolme vuotta mikä on selvitty nykyisellä Lakalla. 🙂

Lakan meltdown part n ∈ ℕ

torstaina 17. tammikuuta 2008

Lakka-palvelimella on historiansa aikana ollut monenlaisia ongelmia, joista useimmat ovat johtuneet suuremmilta osin softapuolen temppuilusta, jos ei lasketa mukaan aivan alkuaikojen levypalvelinsotkua. Rauta on siis palvellut kolmisen vuotta sen suuremmitta ongelmitta, mutta siihenkin saatiin muutos tänään iltapäivästä: kone katosi maailmankartalta totaalisesti. Edes palvelimen muuten riippumattomaan etähallintajärjestelmään ei saatu yhteyttä. Muutaman tovin hiljaisuuden jälkeen etähallintajärjestelmä palasi linjoille, mutta suureksi harmiksi jouduttiin toteamaan, ettei boottaminen kuitenkaan onnistu, sillä virrat tuntuivat pysyvän koneessa päällä vain joitain satunnaisia sekunteja kerrallaan. Kertakaikkisen mystillinen tilanne.

Aikansa temppuiltuaan rauta kuitenkin näyttäisi muuttuneen taas vakaan oloiseksi ja palvelut saatiin taas ajoon. Huolto on kuitenkin tilattu ja toivomme, että huoltomies saa jotain selkoa tilanteeseen.

ps. Lakka siis menee aamusta huoltoon jonka kestoa on tässävaiheessa näillä tiedoin vaikea arvioida. Nyt on oiva hetki harkita irssin siirtämistä xobille. 😉