"Lab Deployment" (NetBoot / NetRestore)

[libertarian]

Moips

Olen miettinyt, että voisin pystyttää työpaikallani NetBoot-serverin. Tarkoitus ei ole niinkään bootata koneita päivittäin NetBoot-serveriltä, vaan asentaa silloin tällöin käyttis+päivitykset ja tarvittavat ohjelmat kaikille koneille mahdollisimman nopeeta ja automaattisesti. Ajattelin käyttää apuna NetRestore-ohjelmaa:

Whether you're deploying five, five thousand, or 32,000 systems, NetRestore is the software deployment solution for you. Built on Apple's Apple Software Restore technology, NetRestore can be used to quickly and accurately restore a master disk image to a computer's hard disk while that disk image is hosted locally, on a network via AFP, NFS or multicast, or on the internet via HTTP. NetRestore can also be used in conjunction with NetBoot to fully automate the deployment of a lab full of machines. NetRestore was designed to be very easy to use, yet flexible, powerful, and extensible. NetRestore supports the deployment of Mac OS X and Windows XP.

Tuollainen on kylla ihan kätevä tapa asentaa koneille käytännössä kaikki tarvittava uusiks, mutta ongelmana on käyttäjien tiedostot, sähköpostit yms. Ne eivät saisi hävitä koneelta, kun käyttis ja ohjelmat palautetaan NetBoot-serveriltä. Mitä mieltä olette sellaisesta, jos käyttäjien kotihakemiston siirtäisi kovalevyn toiselle osiolle? Itse ajattelin, että käyttisosiolla on hyvä ainakin säilyttää admin-käyttäjä varmuuden vuoksi, joten koko User-kansiota ei kannata siirtää. Toisen admin-käyttäjän voisi vielä pistää sinne toiselle osiolle.

Voisikohan tuota jotenkin vielä automatisoida lisää, varsinkin käyttäjien kotikansioiden osalta? Olisi mukava, jos käyttäjien työpöydälle tulisi valmiiksi aliakset niihin uusiin ohjelmiin, jotka asennetaan NetBoot-serveriltä. Ainut mitä käyttäjät tarvitset on sähköpostit ja työpöydällä sekä dokumentit-kansiossa olevat tiedostot. Muuten koko kotikansionkin voisi pistää uusiks. Mahdollisimman automaattinen palautus on kuitenkin tärkeintä. Käyttäjien tehtäväksi ei oikein voi jättää mitään, joten kaikki sähköpostien ja tiedostojen palautus jää minun hommaksi.

Pistän koneille varmuuskopiointisoftan, joka kopioi kotikansion talteen, joten ei ole niin kauheata vaikka palautuksessa tulisi virhe. Tosin, jos virheet ovat yleisiä, niin ei se sitten ole kovin automaattistakaan. Kuinkahan luotettava ja toimiva tuollainen viritelmä on? Muita kommentteja / neuvoja / hyviä ideoita?

Jos toteutan tuollaisen systeemin, niin voin pistää sitten juttua tänne kuinka hyvin tai huonosti systeemi toimii =)

[morbusg]

Onko mahdoton idea jos kotihakemistot on palvelimella?
Tietty jos on läppäriväkeä niin ei niin hyvä idea.

[tkt]

Läppäriväkeä varten on olemassa Mobiili-tunnus. Se mahdollistaa kotihakemiston pitämisen palvelimella ja ajoittaisen synkronoinnin paikalliselle koneelle (tai päinvastoin).

Verkkoboottia varten kannattaa olla nopea verkko. Meillä luokkaympäristössä 21 koneen samanaikainen käynnistys login-ruutuun kestää noin neljä minuuttia. Myöhemmin uusin ohjelmien käynnistykseen kussakin koneessa kuluu vähän pidempää kuin paikalliskäytössä, mutta kun ohjelma on puskuroitu paikalliskoneeseen, niin ero pienenee merkittävästi.

--Ari

[tkt]

Sähköpostin luku kannattaa määritellä IMAP-protokollalla tapahtuvaksi, jolloin postit jäävät palvelimen postilaatikoihin. Näin ne ovat helposit luettavissa eri koneilta ja muilta laitteilta.
Käyttäjiä pitää kuitenkin kouluttaa, etteivät jätä kaikkia posteja ikuisiksi ajoiksi Saapuneet-laatikkoon. Vanhoja viestejä voi ihan oikeasti lajitella ja poistaakin.

--Ari

[libertarian]

Kotihakemistojen siirtäminen palvelimelle kuulostaa kyllä hyvältä idealta.
Mutta mitenkähän homma sujuu, kun joidenkin kotihakemisto vie yli 2 gigaa? Sähköpostejakin voi olla yli 500 megaa. Täytyy varmaan tehdä kaikista sellaisia Mobiili-tunnuksia?

Ilmeisesti kyseessä on Apple Open Directory(?)
Vaatiko se, että kotihakemisto sijaitsee palvelinkäyttiskoneella, vai voiko ne laittaa jollekin toiselle koneelle kuten NetBoot-imaget? Varsinaista palvelinkonetta (Xserve) ei parane kyllä rasittaaa tuollaisella

Verkkoboottia varten kannattaa olla nopea verkko. Meillä luokkaympäristössä 21 koneen samanaikainen käynnistys login-ruutuun kestää noin neljä minuuttia.

Onpas silti yllättävän nopea, vaikka noin monta samanaikasesti käynnistääkin. Onko kyseessä 100Mbit-verkko?
Olin ajatellut, että verkkoboottia käytettäisiin vain hätätapauksessa, mutta kun se on noin nopea niin...

Sähköpostien lukeminen IMAP:lla tulee varmaan aika kalliiksi hyötyyn nähden, kun tarvittaisiin selkeästi isommat laatikot (nyt 20 megaa). Kyseessä on Soneran BusinessMail.

[morbusg]

Mulla ei ole varsinaista kokemusta eikä hirveästi tietoakaan aiheesta, mutta kerronpa nyt ajatuksiani kuitenkin.

Siinä vaiheessa kun kotihakemistot sijaitsee palvelimella, ne voidaan ottaa käyttöön asiakaskoneella monella eri tavalla:
- NFS (Network File System) on traditionaalinen UNIX-tapa käyttää pysyvämpiä verkkolevyjä. Ei mikään kovin turvallinen, ja oikeuksien kanssa voi tulla venkslaamista (/etc/passwd ei sisällä OSX:ssä käyttäjätunnustietoja, en tiedä onko NFS ohjelmia muutettu applen toimesta niin että ymmärtävät tämän)
- AFS (Andrew? File System) on paperilla mielenkiintoinen tapa varsinkin cachettamisensa ansiosta. En tosin itse ole onnistunut saamaan toimimaan Windows -asiakaskoneilla (en kyllä kauhean kauaa yrittänytkään).
- SMB (Server Message Block) on Kikkisoftalta alunperin kotoisin oleva protokolla, ja OSX:ssä tukea hoitaa samba.

Jokaisessa tapauksessa itse data voi sijaita toisella palvelimella, tärkein asia tietty että autentikointi pelaa. Eli jos teillä on open directory hakemistopalvelut jossa käyttätiedot sijaitsee (vrt. juurikin /etc/passwd), niin se on sitten juuri se minkä kanssa noi pitää saada pelaamaan.

Jotenkin aiheeseen saattaa liittyä myös AFP (Apple Filing Protocol), josta en osaa sanoa mitään :-)

Ilmeisesti posteja käytetään suoraan Soneran palvelimilta? Silloinhan ei tarvitse miettiä mitään IMAP:pia omalle palvelimelle, ja jos ne kulkee IMAP:illa, niin ne postit sijaitsee palvelimella ja ainoastaan cachetetaan kotihakemistoon.

[libertarian]

Joo, minä en tiedä senkään vertaa noista
Vinkkiesi avulla kuitenkin pääsen alkuun, kun tiedän mitä Googlesta pitää etsiä. Kiitos niistä.

Sähköpostit ladataan POP-protokollaa käyttäen suoraan Soneran palvelimelta, ja luetaan Apple Maililla - ainakin vielä toistaiseksi.

[tsip]

Minua kiinnostaa tämä projekti. Opiskelen samoja asioita paraikaa Windowsmaailmassa, joten ihan senkin puolesta. Jos viitsit olla ahkera ja tiedottaa projektin etenemisestä, olisin varsin kiitollinen ja opinhaluinen

Itse asiaan: käsittääkseni ei ole minkään valtakunnan väliä sillä, millä palvelimella käyttäjien kotihakemistot fyysisesti sijaitsevat kunhan vain yhteydet pelaavat riittävän nopeasti. Ja tilaa on riittävästi. Ja backupit otetaan säännöllisesti, aina sieltä dellataan jotain vanhaa ja jota yhtäkkiä tarvitaan.

Tuosta sähköpostin palauttamisesta restoren jälkeen, eikö siihen ole mahdollista tehdä esim. scriptiä, jolla kyseiset tiedot (kansiot, viestit, asetukset) kopioidaan ensin vaikka varmuuskopiolle verkon yli ja sitten palautetaan toisella scriptillä takaisin. Ongelmaksi muodostuu tietenkin se, että jospa kyseinen työasema ei enää käynnisty, miten sieltä silloin kopioi mitään ja että miten yksilöidään se tietty käyttäjä/kone jos ei kirjauduta paikallisesti.
Tällainen scripti oli tehty Windowsympäristössä, ajelin sen vain paikallisesti (toimi ok) ja palautin paikallisesti (ts. käsin vain valitut tiedot, kuten käyttäjien profiilit ja sähköpostin .pst-tiedostot). Sittenkin niitä Outlookin kansioita ajalta miekka ja kivi etsittiin välillä kissojen ja koirien kanssa... No, nämä siis Windows 2003 Server ja Active Directory -ympäristöstä opittua ja koettua. MS only feature.

Voisin myös kuvitella, että omppumaailmassakin erilaisille konetyypeille pitää tehdä omat imaget, joilla palautetaan. Imagen muokkaus varmaan onnistuu (softat koneelle ja linkit paikoilleen ja sitten vasta tehdään se image), samoin unattended installation (siihen tyyliin kuin omput asennetaan muutoinkin clean installina). Enää jäisi ongelmaksi vetää ne backupit käyttäjien koneilta tai sitten sijoittaa kaikki verkkolevyille, josta backupit tehdään säännöllisesti.

Tässäpä aatoksia aiheesta, aidan takaa

Muoks: Pari tyhmää kysymystä. Open Directory lienee sama ompulle kuin AD Windowsille, vai? Miten xServe tökkii vai miksi sitä ei voi kuormittaa enempää?

[tkt]

Verkkokäynnistystä varten meillä on yksi image PowerPC-koneita varten. Se toimii hyvin erilaisilla koneilla. Kokeiltu on PM G4 450DP, PM G5 1,8DP, Mac mini G4 1,43, iMac G5 1,5 -koneilla. Toiminnassa koneiden välillä ei ole merkityksellistä eroa.
Käyttäjätunnukset kannattaa tehdä tietohakemistopohjaisena. Esimerkiksi Applen Open Directory käy hyvin. Meillä tunnukset on määritelty OpenLDAP-kantaan (skeemoja modifioitu), jolloin kotihakemistot ovat kolmannessa koneessa, josta ne liitetään automaattisesti kirjautumisen yhteydessä. Osa tunnuksista on määritelty ns. mobiilitunnuksiksi, jolloin kotihakemistoyhteyttä tai verkkoyhteyttä ei tarvita koko ajan.

Käyttöjärjestelmät ovat seuraavasti OpenLDAP-palvelin Linux/FreeBSD.
Kotihakemistot Mac OS X Server. Jako AFP-protokollalla
Työasemat Mac OS X. Myös Linux-koneita mukana, jolloin kotihakemistot liitetään NFS:llä.

Tällä ratkaisulla käyttäjät pääsevät omiin tietoihinsa käsiksi miltä tahansa koneelta. Myös turvakopiointi voidaan hoitaa keskitetysti.

--Ari

[libertarian]

Minua kiinnostaa tämä projekti. Opiskelen samoja asioita paraikaa Windowsmaailmassa, joten ihan senkin puolesta. Jos viitsit olla ahkera ja tiedottaa projektin etenemisestä, olisin varsin kiitollinen ja opinhaluinen

Joo, pistän aina vähitellen kokemuksia siitä miten hommat sujuu. Vielä en kyllä ole täysin varma pistänkö kotihakemistoja serverille vai pelkästään koneiden kovalevyn toiselle osiolle.

Tuosta sähköpostin palauttamisesta restoren jälkeen, eikö siihen ole mahdollista tehdä esim. scriptiä, jolla kyseiset tiedot (kansiot, viestit, asetukset) kopioidaan ensin vaikka varmuuskopiolle verkon yli ja sitten palautetaan toisella scriptillä takaisin.

Itse asiassa, jos kotihakemisto sijaitsee kovalevyn toisella osiolla, niin sähköpostit eivät häviä restoren jälkeen. Kotihakemisto tietysti täytyy kytkeä takaisin käyttikseen, mutta se onnistuu helposti parilla konsolikomennolla. Jos taas käyttää Open Directorya, niin en tiedä miten asia sitten on.

Skriptejä en kyllä osaa tehdä =)
Ei niitä tietenkään kovin vaikea oo tehdä, mutta koitan pärjätä näin alkuun ilman. Oon niin sanotusti Mac-nyyppä. Windowsia pääasiassa tullut käytettyä.

Ongelmaksi muodostuu tietenkin se, että jospa kyseinen työasema ei enää käynnisty, miten sieltä silloin kopioi mitään ja että miten yksilöidään se tietty käyttäjä/kone jos ei kirjauduta paikallisesti.

Jos kone ei käynnisty edes NetBoot-imagelta, niin sitten varmaan täytyy ruuvata kovalevy irti ja laittaa toiseen koneeseen :/
Open Directorya käytettäessä koneelta ei edes tarvitse saada tiedostoja pelastetettua. Jos käyttää paikallista kirjautumista, niin täytyy säätää koneet tekemään automaattisesti varmuuskopionti kotihakemistosta tietyn väliajoin serverille.

Voisin myös kuvitella, että omppumaailmassakin erilaisille konetyypeille pitää tehdä omat imaget, joilla palautetaan.

Suurin osa Maceista kyllä osaa käynnistyä samalta imagelta. Tietysti, jos Levytyökalulla tekee imagen, niin siihen jää joitakin konekohtaisia tietoja, jotka saattaa sotkea joitakin koneita. NetRestore Helper -ohjelmalla, kun tekee sen imagen, niin ainakin suurin osa konekohtaisista tiedoista poistuu imagesta. Ei tietenkään ole 100-prosenttisen varmaa käykö esim. pöytäkoneen image läppäriin, yleensä käy.

Enää jäisi ongelmaksi vetää ne backupit käyttäjien koneilta tai sitten sijoittaa kaikki verkkolevyille, josta backupit tehdään säännöllisesti.

Jep. harmi, että ilmasia ohjelmia tuohon tarkoitukseen on aika heikosti saatavilla Macille.

Muoks: Pari tyhmää kysymystä. Open Directory lienee sama ompulle kuin AD Windowsille, vai?

Kyllä.

Miten xServe tökkii vai miksi sitä ei voi kuormittaa enempää?

Varsinaisesti se Xserve ei joudu erityisen koville, mutta verkkoyhteys kylläkin.

[tkt]

Verkon yli palvelimelle sijoitettavat turvakopiot voi tehdä esimerkiksi rsync-komennolla. Kun käyttäjälle määritellään RSA-avain, niin rsync ei tarvitse edes salasanaa yhteyden luomiseen. Tällöin kuitenkin on syytä varmistaa, että käyttäjien tietoturvakäyttäytyminen on asiallista, eli työasemakone vaatii salasanan ja konetta ei jätetä valvomattomana auki.

Minulla on tällainen laitettuna crontab:iin.

Koodi: Valitse kaikki

rsync --perms --owner --group --links --times --stats --delete --recursive /Users/me/ me@server:/Volumes/Data2/Backup/me

Koska rsync kopioi bsin muuttuneet tiedostot, niin ensimmäisen kerran jälkeen turvakopiointi sujuu varsin nopeasti. Se tietenkin vaihtelee turvakopiointitiheyden ja työstettyjen tiedostojen koon mukaan. Oma kotihakemisto synkronoituu turvakopioon alle minuutissa.

--Ari

[pilates]

Minulla on tällainen laitettuna crontab:iin.

Koodi: Valitse kaikki

rsync --perms --owner --group --links --times --stats --delete --recursive /Users/me/ me@server:/Volumes/Data2/Backup/me

Koska rsync kopioi bsin muuttuneet tiedostot, niin ensimmäisen kerran jälkeen turvakopiointi sujuu varsin nopeasti. Se tietenkin vaihtelee turvakopiointitiheyden ja työstettyjen tiedostojen koon mukaan. Oma kotihakemisto synkronoituu turvakopioon alle minuutissa.

Muuten hyvä, mutta tuosta puuttuu --extended-attributes aka -E. Ilman sitä voit sanoa hyvästit mm. resource forkeille!

[tkt]

Muuten hyvä, mutta tuosta puuttuu --extended-attributes aka -E. Ilman sitä voit sanoa hyvästit mm. resource forkeille!

Niin. Resource forkit. Minulla nyt ei ole käytössä ohjelmia, jotka tallettavat resursseja. En ole sen vuoksi kokenut niitä tarpeelliseksi ja asia on sitten jäänyt mielestä. Kaikki tiedostot ja ohjelmat toimivat normaalisti alkuperäisena ja turvakopiona.

Mitkä uudet ohjelmat tuottavat resursseja?

--Ari