Datorföreningen vid LU & LTH

11-11-11 är det FSCONS i Göteborg. Konferencen varar i två dagar och flertalet intressanta föredrag är på tapeten.

FSCONS is the Nordic countries' largest gathering for free culture, free software and a free society. The conference is organised yearly with 250-300 participants primarily from northern Europe. The main organiser is the Society for Free Culture and Software.

www.fscons.org

Justerat protokoll från senaste styrelsemötet finns här.

Justerat protokoll från senaste styrelsemötet finns här.

Idag har vi hållt årets första styrelsemöte. På detta möte beslutade vi ett antal saker, bland annat om förbättrad informationsspridning. Vi hoppas att detta kommer ge lite mer liv åt hemsidan och föreningen som helhet.

//ccw - informationschef 2010

Ny termin innebär nya studenter som sökt sig till Lund. Skulle Du som ny student vara intresserad av Dataföreningen vid LU & LTH så är det bara att dyka upp på vår exp, d.v.s. på tisdagar 18.00 och frammåt i Kårhuset, korridoren mitt emot LTH's kansli!

Kom och träffa oss och få reda på lite mer vad vi gör och ät en pizza med oss (pizzabeställning är schemalagt varje tisdag)!

Datorföreningen vid LU & LTH - "Vi kan det där med dauta"

Eftersom det snart är jul och liknande tänkte vi att kasta om tisdagsrutinen lite.
Istället för vanlig exp med pizza och cola så fixar vi glögg och pepparkakor!

Vi tänkte även börja vid 1500 istället för 1800.

Med andra ord, gratis glögg och pepparkakor på tisdag klockan 1500 och framåt
i terminalrummet!

Runt klockan tre på natten till onsdag den 5/11 så slutar frodo att svara på ssh.
Seriekabeln som kopplade frodo till klimp hade lossnat lite så felsökning påbörjades inte för än halv tolv på onsdagen. Vi konstaterade ganska så snabbt att systemdisken rasat. Den va fysiskt hel, men verkade sakna partitionstabell. Frodos gamla systemdisk satt även i men ville inte boota riktigt eftersom placeringen av diskarna inte riktigt stämde.

På kvällen påbörjas arbetet på plats med att verkligen få liv i systemet.
Den gamla installationen får en uppdaterad fstab och kan efter det bootas. home1, home2 och home3 monteras read-only efter lite pillande med disksuite (soft-raid). home2 och home3 ser korrekta ut men home1 verkar det ha hänt något lustigt med eftersom många (alla?) filer ser skadade ut.

Gollum, en Sun Enterprise 4500 med 4x400MHz och 4GB ram, har stått ett tag och väntat på att systemgruppen ska flytta hemdiskarna dit. På maskinen hade vi en 2månader gammal backup. Vi konstaterade att det skulle ta längre tid att få liv i Frodo än att flytta driften till gollum. Anledningen till att flytten inte gjorts innan är att det påverkar samtliga system på DF då även NIS-mastern skall flyttas från igloo till gollum. Även pathen till samtliga hemkataloger påverkas då det gammla systemet med a0-9, z0 och b0-4 skulle avskaffas. Eftersom en del script har krävt en absolut path så var det inte riktigt klart hur mycket som påverkas och vad det skulle innebära.

Nu skulle vi "bara" köra en fsck på en av hemdiskarna och rsynca över den data som diffade mellan frodo och gollum. Snabbt och lätt gjort om inte fsck tagit över 36 timmar på sig att slutföra. Att en fsck kan ta 36 timmar kan tyckas märkligt, men tänkt på att vi har ca 50GB på disken varav säkerligen hälften är mail.

Under tiden vi lät fsck jobba pekade vi om de övriga systemen till att jobba mot gollum. En temporär
lösning för att hanter pathbytet infördes och vi testade så att alla driftskritiska system även fungerade efter en reboot.

När fsck var klar så gick home1 inte att montera längre, superblocket var skadat.
Vi lät fsck köra en andra runda med ett backupsuperblock och fick efter ytterligare 8-10 timmar ett filsystem som kunde monteras. Filsystem va så pass skadat att det inte gick att läsa ut data från.

Men vad hände egentligen? Vad va det som gjorde att först systemdisken slutade att fungera och home1 blev skadat? Systemdisken blev efter uppgraderingen till solaris 10 inte speglad. Detta kan tyckas vara illa, men det räddade oss i detta fall. Skulle denna varit speglad skulle vi inte kunnat boota det gammla systemet och rädda data ifrån. RAID skyddar inte mot fel i filsystemet utan mot hårdvarufel. Både hemdiskar och systemdiskar har kört med loggande UFS vilket bör skydda oss mot mindre snäll nedstängninar och liknande.

Vad orsakade då de korrupta filsystemen? Möjliga förklaring är defekta kablar, minne eller scsi-kontroller. Även kosmisk strålning eller svart magi skulle kunna förklara problemen.
Vi klurade en hel del på detta när vi jobbade med att få tillbaka systemen i drift. Alla förklaringar
är lika troliga/otroliga. Helt ärligt, vi vet inte vad som orsakade det hela.

Vad gör vi då för att detta inte skall inträffa igen? Vi har i och med flytten till gollum både system och hemdiskar med zfs. Zfs skall skydda mot denna typen av fel. Hemdiskarna ligger nu på 4st nya 146GB 15krpm scsi-diskar som är konfigurerade i en raidz. Systemdiskarna en vanlig spegel av två diskar. Vi kommer att införa offsitebackup i december då hårdvara för detta blir tillgänglig. Vi kommer att utnyttja gamla ftp-servern, darwin, till detta.

Efter sju sorger och elva bedrövelser har nu alla tjänster migrerats från igloo och frodo till gollum (Ja, den här gången vann gollum).
Frodo och igloo är numer stängda för inloggning.
Vi tar nu emot mail och alla andra maskiner är inloggningsbara igen.

För er som körde pine på igloo finns det nu på mer.df.lth.se .
Även webmailen på https://webmail.df.lth.se finns att tillgå.

Mer info kommer på mail.

DF har just beviljats pengar till en riktigt fet FTP-server av II-stiftelsens Internetfond. Med dessa pengar kommer vi att kunna spegla åtskilliga TB open source-programvara.

DFs MySQL-databaser har flyttats och ligger numera i db-zonen på ra, där vi sedan tidigare har en betydligt modernare MySQL. Den gamla MySQL på frodo har nu stängts ner.