StarCluster

StarCluster is een hulpprogramma voor het maken en beheren van algemene doeleinden computing-clusters gehost op Amazon's Elastic Compute Cloud (EC2). StarCluster minimaliseert de administratieve overhead in verband met het verkrijgen, configureren en beheren van een traditionele computing-cluster gebruikt in onderzoekslaboratoria of voor algemene distributed computing-toepassingen.
Aan de slag is eenvoudig, u hoeft slechts StarCluster en een Amazon AWS rekening.
Voor degenen die geïnteresseerd zijn in het leren meer is er een artikel over StarCluster op http://www.hpcinthecloud.com http://www.hpcinthecloud.com/features/StarCluster-Brings-HPC-to-the-Amazon-Cloud- 94099324.html Er is ook een screencast van het installeren, configureren, de lancering en beëindigen van een HPC-cluster op Amazon EC2:
http://www.hpcinthecloud.com/blogs/MITs-StarCluster-An-Update-with-Screencast-94599554.html
Om te beginnen, de gebruiker een eenvoudige configuratie bestand creëert met hun AWS account gegevens en een paar cluster voorkeuren (bijvoorbeeld het aantal machines, het type machine, ssh sleutelparen, etc). Na het aanmaken van het configuratiebestand en loopt StarCluster's "start" commando, is een cluster van Linux machines geconfigureerd met de Zon Grid Engine queuing systeem, een NFS-shared / home directory, en OpenMPI met wachtwoord-loze ssh gemaakt en klaar om naar buiten te gaan of-the-box. Running StarCluster's "stop" commando zal afsluiten van het cluster en stoppen met het betalen voor de service. Hierdoor kan de gebruiker betaalt alleen wat ze gebruiken.
StarCluster kan ook Amazon's Elastic Block Storage (EBS) volumes gebruiken om persistente data opslag voor een cluster. EBS volumes toestaan ​​om grote hoeveelheden gegevens op te slaan in de Amazon cloud en zijn ook gemakkelijk om een ​​back-up en repliceren in de cloud. StarCluster zal monteren en NFS-aandeel elke volumes vermeld in de config. StarCluster's "createvolume" commando biedt de mogelijkheid om automatisch te maken, opmaken, en partitioneren nieuwe EBS volumes voor gebruik met StarCluster.
StarCluster biedt een Ubuntu-gebaseerde Amazon Machine Image (AMI) in 32bit en 64bit architecturen. De AMI bevat een geoptimaliseerde NumPy / scipy / Atlas / Blas / LAPACK installatie opgesteld voor de grotere Amazon EC2 bijvoorbeeld types. De AMI komt ook met Sun Grid Engine (SGE) en OpenMPI gecompileerd met SGE ondersteuning. Het publiek AMI kan gemakkelijk worden aangepast door de lancering van een enkel exemplaar van de openbare AMI, het installeren van extra software op de instantie, en vervolgens met behulp StarCluster's "createimage" commando om volledig automatiseren van het proces van het creëren van een nieuwe AMI uit een EC2 bijvoorbeeld.

Wat is nieuw in deze release:

• Nieuwe StarCluster Ubuntu 11.10 EBS AMI's beschikbaar, waaronder een nieuwe HVM AMI voor gebruik met CC / CC2 / types CG bijvoorbeeld! Inclusief OpenGridScheduler (tot SGE vervangen), Condor, Hadoop / Dumbo, MPICH2, OpenMPI, ipython 0,12 (parallel + notebook), en nog veel meer. Run dpkg -l op de AMI's voor de volledige lijst van pakketten.
• De nieuwe StarCluster Ubuntu 11.10 EBS HVM AMI bovendien heeft de NVIDIA driver, CUDA Toolkit / SDK, PyCuda, PyOpenCL en Magma voor GPU computing.
• Deze nieuwe AMI's zijn beschikbaar in alle regio's AWS. De nieuwe ons-oost-1 11.10 EBS AMI's zijn nu de standaardinstellingen in de StarCluster config sjabloon. Gebruik de listpublic opdracht om een ​​lijst met beschikbare StarCluster AMI's in andere regio's te verkrijgen:
• $ starcluster -r sa-oost-1 listpublic
• . OPMERKING: De HVM AMI is momenteel alleen beschikbaar in de VS-oost-1 regio tot andere regio's te ondersteunen HVM

Wat is nieuw in versie 0.91:

• ondersteuning voor de lancering en het beheer van meerdere clusters op EC2
• toegevoegd & quot; listclusters & quot; commando voor de weergave van alle actieve clusters op EC2
• ondersteuning voor het bevestigen en NFS-sharing meerdere EBS volumes
• toegevoegd createimage en createvolume commando's voor het eenvoudig creëren van nieuwe AMIS en EBS volumes voor gebruik met StarCluster
• experimentele ondersteuning voor de lancering van clusters met behulp van spot gevallen
• ondersteuning toegevoegd voor StarCluster & quot; plugins & quot; die voorzien in de mogelijkheid om extra configuratie / setup routines bovenop StarCluster's standaard cluster configuratie uit te voeren
• toegevoegd & quot; listpublic & quot; opdracht voor een lijst van alle beschikbare openbare StarCluser AMI's die kunnen worden gebruikt met StarCluster
• bash / zsh command line voltooiing voor StarCluster's command line interface