Mitä tein vappuaattona 2005?

Saturday, April 30. 2005

Päivitin koneita. Kuten edellisssä on todettu kävi kannalle ohraisesti jo torstaina, mutta perheellisenä ihmisenä pääsin siihen käsiksi vasta eilen illalla.<br /><br /><span style="font-weight:bold">Perjantai 29.04.2005</span><br /><br /><ol class="bb-list-ordered,bb-list-ordered-d"><li class="bb-listitem"><span style="font-weight:bold">klo 17.51</span> Poista kaikki etänä ja paikallisesti automaattisesti tapahtuvat palvelut käytöstä<br /></li><br /><ul class="bb-list-unordered"><li class="bb-listitem">crontabit error:sta pois. Kotihakemistojen juuressa (mos, postgres)</li><br /><li class="bb-listitem">crontabit pois auringosta. Kotihakemiston juuressa (postgres)</li><br /></ul><br /><br /><li class="bb-listitem">Listaa kaikki kannat ja niihin liittyvät verkkosivut ja palvelut<br /><div class="bb-code-title">CODE:</div><div class="bb-code">psql -l<br />         List of databases<br />     Name     |  Owner   | Encoding     Palvelu         Tiedosto<br />--------------+----------+-----------<br /> foo          | mos      | SQL_ASCII    Ei              Poistetaan<br /> ike          | blogit   | UNICODE      Ike             blogit.conf<br /> ikl          | blogit   | SQL_ASCII    Ikl             blogit.conf<br /> nettielamaa  | blogit   | UNICODE      Nettielämää     blogit.conf<br /> pb           | blogit   | UNICODE      Peikon blogi    peikkokinblogaa.conf<br /> php_sessions | apache   | SQL_ASCII    Pikkusisko      pikkusisko.conf<br /> phpbb        | phpbb    | SQL_ASCII    Ihanitse        ihanitse.conf<br /> pikkusisko   | mos      | LATIN9       Pikkusisko      pikkusisko.conf<br /> segfault     | blogit   | UNICODE      Segfault        blogit.conf<br /> sqlitelog    | mos      | SQL_ASCII    Sqliten logi    Poistetaan<br /> template0    | postgres | SQL_ASCII<br /> template1    | postgres | SQL_ASCII<br /> testdrive    | apache   | SQL_ASCII    Testdrive       testiblogit.conf<br /> tuollanet    | mos      | SQL_ASCII    eGroupware      viikki.conf<br /> viikkidb     | viikki   | SQL_ASCII    eGroupware      tuollanet.conf</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.01</span>Luo tarpeelliset palvelukatko-ilmoitukset</li><br /><ul class="bb-list-unordered"><li class="bb-listitem">Blogeille oma ~mos/katkot/blogit.html<br /></li><br /><li class="bb-listitem">Ihanitselle oma ~mos/katkot/ihanitse.html<br /></li><br /><li class="bb-listitem">Lopuille yhteinen ~mos/katkot/viikki.html<br /></li><br /></ul><br /><br /><li class="bb-listitem"><span style="font-weight:bold">18.2</span> Tarkista ilmoitukset<br /></li><br /><li class="bb-listitem"> Ota kaikkien palveluiden konfiguraatiotiedostoista varmuuskopio<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo mkdir backup<br />sudo cp *.conf backup</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.22</span> Korvaa kunkin palvelun konfiguraatiotiedosto ohjaussivulla<br /><div class="bb-code-title">CODE:</div><div class="bb-code">blogit.conf<br />RewriteEngine on<br />RewriteRule ^/.* http:www.claymountain.com/~mos/katkot/blogit.html [R]<br />peikkokinblogaa.conf<br />viikki.conf<br />tuollanet.conf</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.38</span> Tarkista konfiguraatio<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.38</span> Käynnistä apassi uudestaan ja tarkista konfiguraatio<br />Korjattu blogit.conf, lisätty ihanitse.conf.<br />Poistettu ikl.conf, joka oli ihan puhdasta puppaa.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.53</span> Selvitä parametri, jolla saa korruptoituneet tietokantasivut nollattua. <a href="http://www.varlena.com/varlena/GeneralBits/Tidbits/annotated_conf_e.html">Annotated postgresql.conf</a>: zero_damaged_pages true/false<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.54</span> Selvitä missä on tilaa kantadumpeille ja tee sinne hakemisto<br /><div class="bb-code-title">CODE:</div><div class="bb-code">[mos@claymountain data]$ mkdir backup29042005<br />[mos@claymountain data]$ cd backup29042005/</div><br /></li><br /><li class="bb-listitem">Tarkista dumppauskomennon versio ja ota talteen<br /><div class="bb-code-title">CODE:</div><div class="bb-code">[mos@claymountain backup29042005]$ pg_dump --version<br />pg_dump (PostgreSQL) 7.4.6</div><br /></li><br /><li class="bb-listitem">Ota pg_hba.conf talteen kantadumppihakemistoon<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo cp ~postgres/data/pg_hba.conf .</div><br /></li><br /><li class="bb-listitem">Ota postgresql.conf talteen kantadumppihakemistoon<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo cp ~postgres/data/postgresql.conf .</div><br /></li><br /><li class="bb-listitem">Poista pg_hba.conf:sta muut kuin localhost ja mos<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo su - postgres<br />cd data<br />vi pg_hba.conf<br />pg_ctl reload</div><br /></li><br /><li class="bb-listitem">Käynnistä kanta uudestaan<br /><div class="bb-code-title">CODE:</div><div class="bb-code">exit<br />sudo service postgresql stop<br />sudo service postgresql start</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.58</span> Dumppaa kukin kanta käsin nähdäksesi missä kannoissa on rikkinäistä tavaraa, ota rikkinäisten kantojen nimet ylös ja selvitä rikkinäiset taulut. <br /><div class="bb-code-title">CODE:</div><div class="bb-code">Ike: Rikki<br />Ikl: Ehjä<br />Nettielemaa: Rikki<br />Pb: Ehjä<br />php_sessions: Ehjä<br />phpbb: Ehjä<br />pikkusisko: Rikki<br />segfault: Ehjä<br />testdrive: Ehjä<br />tuollanet: Ehjä<br />viikkidb: Ehjä</div> Laske kunkin taulun rivit, jos rivien lasku ei onnistu oli taulussa rikkinäisiä rivejä :<br /><div class="bb-code-title">CODE:</div><div class="bb-code">iken rikkinäiset taulut:<br />serendipity_supress<br />nettielmän rikkinäiset taulut:<br />serendipity_supress<br />pikkusisko rikkinäiset taulut:<br />firmat</div><br />Taulut sai selville ohjaamalla \d:n tuloksen tiedostoon ja korvailemalla<br />alkuosan select count(*):llä ja lopun regexp:llä puolipisteeksi. Sitten vain<br />ajaen psql:llä tiedosto.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">19.25</span> Aja kanta alas<br /></li><br /><li class="bb-listitem">Korjaa postgresql.conf:iin tietokantasivujen nollaus<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo su - postgres<br />cd data<br />vi postgresql.conf</div><br /></li><br /><li class="bb-listitem">Aja kanta ylös<br /><div class="bb-code-title">CODE:</div><div class="bb-code">exit<br />sudo service postgresql start</div><br /></li><br /><li class="bb-listitem">Dumppaa rikkinäisetkin kannat<br /><div class="bb-code-title">CODE:</div><div class="bb-code">mkdir broken<br />cd broken<br />pg_dump -F p ike > ike.sql<br />pg_dump: WARNING:  invalid page header in block 3 of relation<br />"serendipity_suppress"; zeroing out page</div><br />Nettielämää kossahtaa puuttuvaan logitiedostoon. Pikkusisko meni kauniisti. Droptaan nettielämän suppress-taulu ja dumpataan uusiksi. Nyt menee lävitse.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">19.33</span> Aja kanta alas<br /></li><br /><li class="bb-listitem"> Selvitä mistä löydät korvaavat rpm:t ja lataa ne. Kokeillaan <a href="http://fedoralegacy.org/download/">legacya</a> ja lisätään /etc/apt/sources.list.d-hakemistoon legacy.list, johon <span style="font-style:italic">loitsu</span> legacyn-sivulta. <div class="bb-code-title">CODE:</div><div class="bb-code">sudo apt-get update</div> Katsotaan mitä on nyt asennettuna rpm -qa|grep postgres:<br /><div class="bb-code-title">CODE:</div><div class="bb-code">postgresql-7.4.6-2PGDG<br />postgresql-python-7.4.6-2PGDG<br />postgresql-docs-7.4.6-2PGDG<br />postgresql-config-1-1.swsoft<br />postgresql-jdbc-7.4.6-2PGDG<br />postgresql-odbc-7.3-4<br />postgresql-contrib-7.4.6-2PGDG<br />postgresql-devel-7.4.6-2PGDG<br />postgresql-server-7.4.6-2PGDG<br />postgresql-tcl-7.4.6-2PGDG<br />postgresql-test-7.4.6-2PGDG<br />postgresql-libs-7.4.6-2PGDG<br />postgresql-pl-7.4.6-2PGDG</div><br />Kokeilemalla apt-get -d --just-print postgresql todetaan, että meillä mukamas on uusin versio. Pitkän hakemisen jälkeen tajuan katsoa rpm.iä sylttytehtaalta ja <a href="http://www.postgresql.org/ftp/binary/v7.4.7/rpms/fedora/fedora-core-1/">sieltähän</a> ne löytyvät. Ja ovat näköjään vielä saman kaverin käsialaa kuin nuo edelliset. Pannaan ladaten levyn kulmalle. Otetaan kuitenkin ensin avain:<div class="bb-code-title">CODE:</div><div class="bb-code">rpmdb: fatal region error detected; run recovery<br />error: db4 error(-30982) from dbenv->close: DB_RUNRECOVERY: Fatal error, run<br />database recovery</div><br />Näköjään jokin muukin kanta on mukkelis makkelis. Hianoa.<br /><div class="bb-code-title">CODE:</div><div class="bb-code">cd /var/lib/rpm</div><br />Ja hienointa on tietysti että recover-binääriä ei ole asennettu. Ja se on rpm-distro. Epätoivoisesti yritetään <div class="bb-code-title">CODE:</div><div class="bb-code">sudo rpm --rebuilddb</div> ja saamme voiton. Asennetaan samantien db4-utilit vastaisen varalle.<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo apt-get install db4-utils.</div> Otetaan avain:<br /><div class="bb-code-title">CODE:</div><div class="bb-code">sudo rpm --import  http:www.gunduz.org/devrimgunduz.pgp.pub</div><br />Otetaan vanhat rpm:t ensin pois.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">20.06</span> Poista rpm repackagella Tehdään ekaksi skripta, joholla poisto suoritetaan. Haetan rpm -qa|grep<br />postgres:lla lista asennetuista paketeista ja ajetaan for-loopilla ne pois, jolloin ne ilmestyvät hakemistoon /var/spool/repackage.<br /></li><br /><li class="bb-listitem">Siivoa mahdolliset jäljellejääneet tiedostot. Tarkistetaan onko postgres-käyttäjä olemassa ja jäikö sen kotihakemistoon<br />roikuskelemaan jotakin. Käyttäjä käveli ja hakemistoon jäi rumat jäljet. Otetaan hakemiston sisältö "talteen" mv:llä. <div class="bb-code-title">CODE:</div><div class="bb-code">sudo mv pgsql/ pgsql.broken</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">20.20</span> Asenna kanta rpm:t. Donk. Joku neropatti juuri räjäytti xemacs:insa poistamalla libpsql:n. No<br />onhan meillä vi. Kopioidaan remove-skripta uudelle nimelle ja leikkaa liimataan sen perään lista uusista mahdollisista paketeista. Huomataan, että odbc-ajurille ei ole pakettia. No, ei mahda mitään ei meillä ole yhtään odbc-sovellustakaan. <img src="" alt=";-)" style="display: inline; vertical-align: bottom;" class="emoticon" /> Seuraava donk, tulee kun tajuaa että kamat on haettava mirrorista. No, kopioidaan urli ja korjataan skriptaan ja skripta<br />hakmeaan ne ensin wgetillä lokaaliksi. Lopuksi installoiden rpm -ivh:lla koko kasa. Startataan kanta kerran, jotta se luo tarpeellisen hakemistohierarkian ja template-kannat. Samantien sitten alas.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">20.39</span> Palauta käsin yhdistämällä postgresql.conf. Iloksemme havaitsemme, että xemacs on taas kuvioissa mukana. Ei että olisin yhtään epäillyt. <img src="" alt=";-)" style="display: inline; vertical-align: bottom;" class="emoticon" /> Vi:llä en olisi osannutkaan avata kahta puskuriä yhtäaikaisesti ja jakaa ruutua.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">20.43</span> Aja kanta ylös: sudo service postgresql start<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">20.44</span> Palauta ehjien kantojen varmuuskopiot. Tajutaan, että ei tullut create-lauseita mukaan ja käyttäjätkin hävisivät<br />sen sileän tien. No, onneksi on tiedostossa tiedossa kannan tyyppi ja käyttäjä. Salasanat vaan ovat sitten kettumaisempi juttu voi olla, että tarvitaan melkoista käsillä seisontaa että ne saa vaihdettua. No näkee kun kokee.<div class="bb-code-title">CODE:</div><div class="bb-code">sudo su - postgres<br />createuser mos<br />exit<br />cretaeuser blogit<br />createdb -U blogit ikl<br />createdb: could not connect to database template1: FATAL:  IDENT<br />authentication failed for user "blogit"</div><br />Tollona annetaan ensin kaikille kaikki oikeudet lokaalisti ja sitten tajutaan,<br />että vipu on -O, ei -U. Oikeudet samantien poies.<br /><div class="bb-code-title">CODE:</div><div class="bb-code">psql ikl<br />\i ikl.sql<br />pb<br />php_sessions<br />phpbb</div><br /><span style="font-weight:bold">20.57</span>Tauko.<br /></li><br /></ol><br /><span style="font-weight:bold">Lauantai 30.04.2005 klo 10.28</span><br /><br /><ol class="bb-list-ordered,bb-list-ordered-d"><li class="bb-listitem"><div class="bb-code-title">CODE:</div><div class="bb-code">jatkuu<br />segfault<br />testdrive<br />tuollanet<br />viikkidb</div><br /></li><br /><li class="bb-listitem">Palauta rikkinäisten varmuuskopiot <span style="font-weight:bold">10.33</span><br /><div class="bb-code-title">CODE:</div><div class="bb-code">ike<br />nettielamaa<br />pikkusisko - pikkusiskossa on ilmeisesti myös käyttäjä pikkusisko</div><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">11.17</span> Palauta työasemaan rikkinäisiä kantoja vastaavat vanhemmat kopiot ja yritä selvittää kyselyillä mitä rikkinäisten kantojen tauluista puuttuu. <br />Ikessä oli rikki serendipity_suppress. Katsotaan montako riviä palautuneessa on: 90. Etsitään ensimmäinen päivä pgsql-logista, jossa on suppressia koskeva virheilmoitus. Se voi hyvin olla nettielaman ilmo, mutta kun logi ei kerro mistä kannasta on kyse, ei liene muutakaan vaihtoehtoa. Ensimmäinen ilmoitus on huhtikuun seitsemänneltä päivältä. Ei vaikuta hyvältä.<br /><br />Satun muistamaan serendipityn kehittäjälistalla esittämäni bugi-raportin kyseisen taulun käsittelyä koskien ja sitä kautta siihen liittyvän keskustelun. Taulu liittyy referrer- ja exit-tilastojen käsittelyyn. Sillä pyritään estämään "duplikaattien" viittausten näkyminen näissä tilastoissa. En viitsi nähdä iken suhteen vaivaa tämän taulun sisällön korjaamiseksi vastaamaan viimeistä mahdollista parasta tietoa aiheesta (varsinkin kun sen käsittelyssä oli ongelmia ja nämä tilastot muutenkin ovat pproksimaatioita!). <br /><br />Nettielämän tapauksessa tilanne on vähän ikävämpi sillä jouduin poistamaan koko taulun saadakseni lopun kantaa dumpattua, joten nettielämän taupauksessa palautus huhtikuun kuudennelta kyseisen taulun suhteen on tarpeen. Ei kun töihin. Näköjään kuudennen eikä viidennen päivän varmuuskopio palaudu, ainakaan työasemassa kokonaisuudessaan. Huonompi homma. Varmuuskopioinnissa yksi avain juttu olisi aina väliajoin tarkistaa ovatko otetut varmuuskopiot oikeasti palautettavissa ja tämä on jäänyt tekemättä. Ei ole henkilökohtaisesti edes ensimmäinen kerta, joten olisi todella syytä mennä itseensä. No, taulun rakenne siitä joka tapauksessa selviää, mutta data jää poistumaan. Otetaan sitten se kun kerran saadaan: "pg_restore -d -t serendipity_suppress nettielamaa."<br /><br />Katsotaan miten käy pikkusiskon kanssa. Firmat taulu on kossahtanut 27. huhtikuuta. Ja palautuneessa taulussa on 35 riviä. Hmh. Toisella koneella pikkusiskon 26. varmuuskopio palautuu kauniisti. Olisi varmaan pitänyt kokeilla tuota nettielamaa samassa koneessa. Oh, well. Tilastot sukkaavat muutenkin. Varmuuskopiolla 37-riviä. Huono, huono homma. Firmat-taulun rivit ovat avaimia kaikkiin muihin kannan tauluihin, joten kahden yrityksen rivin puuttuminen taulusta tarkoittaa sitä, että muutkin taulut ovat vajaita ja pahasti. Olen kusessa.<br /><br />Puuttuvat rivit ovat PiBe ja ABBA. Joten oletusarvoisesti näitä vastaavat rivit uupuvat sitten myös muista tauluista. Katsotaan... Eivät puutu. Uskomatonta. Todella uskomatonta. Olen palauttanut kannan, jonka viite-eheydet eivät toteudu! Mitenköhän käy kun lisään puuttuvat rivit käsin, hajoaako maailma. No, sillä ei ole väliä, koska voin lisätä käsin rikkinäisen kannan dumppiin yritysten insertit. Vähemmällä pääsen jos tätä ei tarvitse tehdä. Eiku kokeilemaan. <img src="" alt=";-)" style="display: inline; vertical-align: bottom;" class="emoticon" /><br /><br /><div class="bb-code-title">QUOTE:<div class="bb-code">Tänä päivänä, onni suosii, rohkeaa, tänä päivänä, kanta selviää...</div></div><br /><br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">12.02</span> Lisää löytämäsi muutokset<br /></li><br /><li class="bb-listitem">Yritä löytää puuttuvat kantakäyttäjät ja kaikkien kantakäyttäjien salasanat. Kantakäyttäjiä on pääsääntöisesti yksi kantaa kohden ja kaikilla blogeilla se on sama. Ja se löytyy selväkielisenä serendipityn sorsasta, joten eikun tekemään alter useria.<br />Ja se sitten phpbb, triviaalia. Egroupware, triviaali. Toisen egroupwaren kanssa havaitaan, että kantakäyttäjä on eri tunnus kuin<br />kannan omistaja, joten tehdään puuttuva käyttäjä, vedetään palautettu kanta sileäksi ja palautetaan uusiksi. Uusintapalautus ei muuta taulujen oikeuksia, joten kerran vielä, kunhan ensin muutetaan pg_hba.confia, niin että kyseinen käyttäjä pääsee luomaan taulut.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">12.25</span> Ota varmuuskopio kaikista kannoista.<br /><span style="font-weight:bold">12.29</span> Huomataan, että yhden kantakäyttäjän salasana jäi vaihtamatta. Vaihdetaan ja tehdään uusi backup.<br /><span style="font-weight:bold">12.34</span> Backup siirretty työasemalle ja aloitettu sen koepalautus. <span style="font-weight:bold">12.41</span> Koepalautus onnistui.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">12.41</span> Palauta käsin yhdistämällä pg_hba.conf.<br /></li><br /><li class="bb-listitem">Poista uudelleenohjaukset apassista.<br /></li><br /><li class="bb-listitem">Palauta kopiodut konfiguraatiot apassissa.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">12.46</span>Käynnistä uudestaan.<br /></li><br /><ul class="bb-list-unordered"><li class="bb-listitem">Ihan itse ok<br /></li><br /><li class="bb-listitem">Nettielämää ok<br /></li><br /><li class="bb-listitem">Asukastalot ei<br /></li><br /><li class="bb-listitem">Tuollanet ei<br /></li><br /><li class="bb-listitem">Pikkusisko ei<br /></li><br /><li class="bb-listitem">Ike ok<br /></li><br /><li class="bb-listitem">Ikl ok<br /></li><br /><li class="bb-listitem">Segfault ok<br /></li><br /><li class="bb-listitem">Peikkokin blogaa</li><br /></ul> Selviteltäessä huomataan, että logaus on mennety käteen. Otetaan vanha kantalogi talteen ja startataan sekä syslog että kanta uusiksi. Asukastaloissa on palautus mennyt käteen. Palautetaan uusiksi. [b*]12.56[/b] asukastalot ok. <span style="font-weight:bold">12.58</span> Nettielämästä havaitaan puuttunut grant suppress-taululle etsittäessä syytä miksi tuollanet ei toimi.<br /><span style="font-weight:bold">13.01</span> Tuollanetin kantakäyttäjän salasanan asetuksessa tuli kädetettyä. <span style="font-weight:bold">13.03</span> Pikkusiskon toisen kantakäyttäjän salasana oli jäänyt asettamatta. <span style="font-weight:bold">13.04</span> Kaikki palvelut näyttäisivät toimivan. <span style="font-weight:bold">13.05</span> Tauko<br /><span style="font-weight:bold">13.16</span> Plan B, pistetään päivittäen ihanitsen phpBB toiseen versioon. Tämä hajoittanee taas kaikki ylimääräiset muutokset ja tehnee ylösnostosta haasteellisen. <span style="font-weight:bold">13.30</span> Pätsifilejä käyttäen ei ollut haasteellinen. Olisi vain pitänyt tajuta<br />käyttää .htaccessia.<br /><br /><li class="bb-listitem">Päivitä client-siden postgres-roinat ja erityisesti kehityspaketti vastaamaan server-sideä<br /><span style="font-weight:bold">13.30</span> Ei päivitettävää, sillä roinat ovat automaagisesti päivittyneet versioon 7.4.7, mutta käännetään nyt varoiksi c++-kirjasto uusiksi.<br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">13.34</span> Käännä pikkusisko päivitettyjä kirjastoja vastaan. <span style="font-weight:bold">13.39</span> Käännetty. Tauko.<br /></li><br /><li class="bb-listitem">Palauta client-side skriptat ja crontab. <span style="font-weight:bold">14.42</span>. Serveripuolella on crontab-skripta, joka suorittaa kantojen "imuroinnin"<br />illalla 23.30. Katsotaan, ettei client-puolella tehdä varmuuskopiointia samaan aikaan. Palautettu skriptat eli crontabit.<br /></li><br /><li class="bb-listitem"> Varmista ettei varmuuskopioinnin aikana tehdä pikkusisko-ajoja. Siirretty varmuuskopiointi tapahtumaan 21.30, edellinen pikkusisko-soitto on ollut 21.00 ja seuraava on vastaa 23.00. Sen pitäisi ehtiä alta ennen imurointia.<br /></li><br /><li class="bb-listitem"> Aja soittolista kaikille firmoille. Aloitetaan <span style="font-weight:bold">14.46</span> soittolistan ajo kaikille firmoille. <span style="font-weight:bold">18.00</span> 11. firma menossa, 18. firmaa jäljellä. <br /></li><br /><li class="bb-listitem"> Päivitetään tuollanet, asukastalot versioon 1.007 eGroupwarea, päivitetään kaikki blogit versioon 0.8. <br /></li><br /><li class="bb-listitem"><span style="font-weight:bold">18.00</span> julkaise blogaus.<br /></li><br /><li class="bb-listitem">Toivo parasta<br /></li><br /></ol>

Posted by Mauri Sahlberg at 17:03 | Comments (0) | Trackbacks (0)

Trackbacks

Trackback specific URI for this entry

No Trackbacks

Comments

Display comments as (Linear | Threaded)

No comments

Add Comment

Name
Email
Homepage
In reply to
Comment	Standard emoticons like :-) and ;-) are converted to images. To prevent automated Bots from commentspamming, please enter the string you see in the image below in the appropriate input box. Your comment will only be submitted if the strings match. Please ensure that your browser supports and accepts cookies, or your comment cannot be verified correctly. Enter the string from the spam-prevention image above:
	Remember Information? Subscribe to this entry