Latest revision as of 10:52, 4 November 2014

Introduktion

At udvikle et Ubuntu cluster installationsmetode og implementere den fysisk således at programmer kan afvikles.

metode

Installationsmetoden udvikles på ESXi og implementeres på de fysiske servere.

Mål

En master
minimum to noder
automatiseret installation af noder. (Så godt som muligt)
automatiseret oprettelse af brugere LDAP eller NIS
MPI

Lab environment on local PC

LAST UPDATE AUTUMN 2014 (pre-course edits) Comments, corrections and additions welcome! :-)

This lab environment is build upon the virtual platform VMware Workstation and Ubuntu-Server 14.04.1 64Bit (ubuntu-14.04.1-server-amd64.iso) as cluster and nodes OS. Ubuntu server can be downloaded here

This guide will guide you though how to build a virtual Linux/Ubuntu cluster lab environment on your local machine. This environment can later be implemented on the real cluster.

Create master and nodes machine

Master installation and configuration

Nodes installation and configuration

Udvikling fase 1

Test af head installation på fysisk maskine

Udvikling fase 2

Tilpasning af SW og konfigurationsfiler til noder

Udvikling fase 3

Installation af SAN

Udvikling fase 4

Installation af fysiske maskiner

Netværk

Qlogic switch
- Telnet eller http: til 172.16.4.11 (username admin password adminpass)
3550 Gb switch
- Telnet til 172.16.4.88 password cisco

Hastighed

Infinibands hastighed er 4.38 Gbits/sec

Harddisk partitionering

På det rigtige cluster er partitioneringen lavet som følger:

/: ext4 5GB
/tmp: ext4 10GB
/var: ext4 15GB
/boot: ext4 2GB
/usr: ext4 50GB
swap: swap 2xRAM
/home: ext4 resterende plads - 10GB

Links

@@ Line 1: / Line 1: @@
 {{TOCright}}
-=Introduktion=
-At udvikle et [[Ubuntu]] cluster installationsmetode og implementere den fysisk således at programmer kan afvikles.
-=metode=
+= Introduktion =
-Installationsmetoden udvikles på [[ESXi]] og implementeres på de fysiske servere.
-=Mål=
+At udvikle et [[Ubuntu]] cluster installationsmetode og implementere den fysisk således at programmer kan afvikles.
-*En master
-*minimum to noder
-*automatiseret installation af noder. (Så godt som muligt)
-*automatiseret oprettelse af brugere [[LDAP]] eller [[NIS Ubuntu|NIS]]
-*[[MPI]]
-==Lab environment på lokale maskiner==
+= metode =
-'''OPDATE EFTERÅRET 2013''' Under udvikling
-Lab environment er bygget op omkring VMware Workstation som virtualiseringsplatform og Ubuntu-Server 12.04.3 64Bit (ubuntu-12.04.3-server-amd64.iso) som cluster og nodes OS.
-Denne guide viser hvordan man opbygger et virtuelt Linux/Ubuntu cluster environment, som så senere kan implementeres på det fysiske cluster.
-==Udvikling fase 1==
+Installationsmetoden udvikles på [[ESXi]] og implementeres på de fysiske servere.
-#Installer [[ESXi]]
-#[[/Ubuntu Master|Installer Ubuntu Master]]
+= Mål =
-#[[/DHCP server|Installer og konfigurer DHCP server]]
-#[[/DNS Server|Installer og konfigurer DNS server]]
+*En master
-#[[/Routning og NAT|Routening og NAT gennem Master]]
+*minimum to noder
-#[[/LDAP eller NIS| LDAP eller NIS til user login på noder]]
+*automatiseret installation af noder. (Så godt som muligt)
-#[[/Tilføjelse af ny klient| Tilføjelse af ny klient]]
+*automatiseret oprettelse af brugere [[LDAP]] eller [[NIS Ubuntu|NIS]]
-#[[/PXE installation af noder|PXE installation af noder]]
+*[[MPI]]
-#[[/NFS Server | NFS Server til netværk shares ]]
-#[[/apt-cacher installation|apt-cacher installation]]
+==Lab environment on local PC==
-#[[/Auto SSH | Auto SSH login på noder uden at skrive pass]]
-#[[/Kickstart fil til installation af noder|Kickstart fil til installation af noder]]
+'''LAST UPDATE AUTUMN 2014 (pre-course edits)''' Comments, corrections and additions welcome! :-)
-#[[/Overvågning med MRTG|Overvågning med MRTG]]
-#[[/dsh|Distributed Shell dsh]]
+This lab environment is build upon the virtual platform VMware Workstation and Ubuntu-Server 14.04.1 64Bit (ubuntu-14.04.1-server-amd64.iso) as cluster and nodes OS. Ubuntu server can be downloaded [http://www.ubuntu.com/download/server| here]
-#[[/mpi|Installation af openMPI og MPICH]]
-#[[installation af OpenCV]]
+This guide will guide you though how to build a virtual Linux/Ubuntu cluster lab environment on your local machine. This environment can later be implemented on the real cluster.
-#[[InfiniBand]]
-=== Test af head installation på fysisk maskine===
+*[[/Oprettelse af master og nodes maskiner|Create master and nodes machine]]
-#[[/Installation af head node|Installation af head node]]
+'''Master installation and configuration'''
-#[[/Installation af CUDA|Installation af CUDA]]
+#[[/Installation af master|Install master]]
-#[http://www.raben.com/content/opencv-installation-ubuntu-1204 Installation of OpenCV]
+#[[/Install DHCP server|Install and configure DHCP server]]
+#[[/Install DNS server|Install and configure DNS server]]
+#[[/Routing NAT and NIS|Configure Routing, NAT and NIS]]
+#[[/PXE and Kickstart|PXE and Kickstart configuration]]
+#[[/Configure NFS server, Apt cacher and SSH auto login|Install and configure NFS server, apt-cacher and SSH auto login]]
+#[[/Multi Router Traffic Grapher|Install and configure Multi Router Traffic Grapher - MRTG]] - doesn't work properly
+#[[/DSH and MPI|Install and configure DSH and OpenMPI]]
+#[[/OpenCV|Install and configure OpenCV]]
+'''Nodes installation and configuration'''
+== Udvikling fase 1 ==
+#Installer [[ESXi]]
+#[[/Ubuntu Master|Installer Ubuntu Master]]
+#[[/DHCP server|Installer og konfigurer DHCP server]]
+#[[/DNS Server|Installer og konfigurer DNS server]]
+#[[/Routning og NAT|Routening og NAT gennem Master]]
+#[[/LDAP eller NIS|LDAP eller NIS til user login på noder]]
+#[[/Tilføjelse af ny klient|Tilføjelse af ny klient]]
+#[[/PXE installation af noder|PXE installation af noder]]
+#[[/NFS Server|NFS Server til netværk shares ]]
+#[[/apt-cacher installation|apt-cacher installation]]
+#[[/Auto SSH|Auto SSH login på noder uden at skrive pass]]
+#[[/Kickstart fil til installation af noder|Kickstart fil til installation af noder]]
+#[[/Overvågning med MRTG|Overvågning med MRTG]]
+#[[/dsh|Distributed Shell dsh]]
+#[[/mpi|Installation af openMPI og MPICH]]
+#[[Installation af OpenCV]]
+#[[InfiniBand]]
+=== Test af head installation på fysisk maskine ===
+#[[/Installation af head node|Installation af head node]]
+#[[/Installation af CUDA|Installation/testing af CUDA]]
+#[http://www.raben.com/content/opencv-installation-ubuntu-1204 Installation af OpenCV]
+#[[/makefile script |Makefile]]
+== Udvikling fase 2 ==
-==Udvikling fase 2==
 #Tilpasning af SW og konfigurationsfiler til noder
-==Udvikling fase 3==
+== Udvikling fase 3 ==
 #Installation af [[SAN]]
-==Udvikling fase 4==
+== Udvikling fase 4 ==
 #Installation af fysiske maskiner
-=Netværk=
-*Qlogic switch
+= Netværk =
-**Telnet eller http: til 172.16.4.11 (username '''admin''' password '''adminpass''')
-*3550 Gb switch
+*Qlogic switch
+**Telnet eller http: til 172.16.4.11 (username '''admin''' password '''adminpass''')
+*3550 Gb switch
 **Telnet til 172.16.4.88 password '''cisco'''
-=Hastighed=
-Infinibands hastighed er 4.38 Gbits/sec
-=Harddisk partitionering=
-På det rigtige cluster er partitioneringen lavet som følger:
-;/: ext4 5GB
-;/tmp: ext4 10GB
-;/var: ext4 15GB
-;/boot: ext4 2GB
-;/usr: ext4 50GB
-;swap: swap 2xRAM
-;/home: ext4 resterende plads - 10GB
-=Links=
+= Hastighed =
-*[[Weekend Projekt - Test Cluster]]
-*[[NIS Ubuntu]]
+Infinibands hastighed er 4.38 Gbits/sec
-*[http://coen.boisestate.edu/ece/files/2013/05/Rasp.-Pi.pdf RPi Cluster] -> [http://www.youtube.com/watch?v=i_r3z1jYHAc YouTube Video]
+= Harddisk partitionering =
+På det rigtige cluster er partitioneringen lavet som følger:
+;/
+:ext4 5GB
+;/tmp
+:ext4 10GB
+;/var
+:ext4 15GB
+;/boot
+:ext4 2GB
+;/usr
+:ext4 50GB
+;swap
+:swap 2xRAM
+;/home
+:ext4 resterende plads - 10GB
+= Links =
+*[[Weekend Projekt - Test Cluster]]
+*[[NIS Ubuntu]]
+*[http://coen.boisestate.edu/ece/files/2013/05/Rasp.-Pi.pdf RPi Cluster] -&gt; [http://www.youtube.com/watch?v=i_r3z1jYHAc YouTube Video]
 [[Category:Cluster]]

Navigation menu

Difference between revisions of "Cluster der kan alt"