Skip to content

A 3 part (Client, Loadbalancer, Server) RMI Application which allows the client to choose the Computation. Focus lies on Loadbalanceing Algorithms like RoundRobin, Weighted Least Connections etc

Notifications You must be signed in to change notification settings

pprzidal/syt4-gek871-rmi-taskloadbalancer-pprzidal

Repository files navigation

Distributed Computing "RMI Task Loadbalancer"

Aufgabenstellung

Die detaillierte Aufgabenstellung beschreibt die notwendigen Schritte zur Realisierung. Die Fragestellungen sind in research drinnen.

Implementierung

Zuerst war noch alles zum laufen zu bringen. Wobei eine Datei namens .java.policy die im Home Directory vom aktuellen Benutzer (/home/phillip/ bzw. C:\Users\Phillip) liegen muss. Der Inhalt sollte sein:


grant {
    permission java.security.AllPermission "", "";
};

Das muss gesetzt werden damit man Task von außen ausführen lassen kann. Weil das ja ein Sicherheitsrisiko sein kann.

Java RMI-Tutorial um "sauberes Schließen" erweitern

Wir haben also einen ComputeServer der nicht sauber geschlossen werden kann. Wenn man sich den Start Code anschaut und ihn ausführt merkt man das er nach dem ComputeEngine Bound eigentlich nichts mehr ausgibt aber sich auch nicht beendet. Der Grund dafür kann recht einfach nachvollzogen werden indem man folgende Anweisung am Ende des try Blocks anfügt:

System.out.println(Thread.getAllStackTraces().keySet());

Man wird da diese oder eine ähnliche Ausgabe bekommen. [2]

[Thread[RMI Reaper,5,system], Thread[main,5,main], Thread[Attach Listener,5,system], Thread[RMI TCP Accept-1099,5,system], Thread[RMI TCP Accept-0,5,system], Thread[Signal Dispatcher,9,system], Thread[Reference Handler,10,system], Thread[GC Daemon,2,system], Thread[Finalizer,8,system]]

Und man sieht das hier weitmehr als nur 1 Thread am arbeiten sind. Und ein Java Programm beendet sich erst dann wenn alle Threads zuende sind (im Regelfall wenn man jetzt nicht unbedingt System.exit(1); ausführt). Als erstes ist es recht wichtig das exportierte Objekt wieder unexporten. Also folgender finally Block wäre sinnvoll:

finally {
    try {
        UnicastRemoteObject.unexportObject(engine, true);
    } catch (NoSuchObjectException e) {
        System.err.println("unable to unexport");
        e.printStackTrace();
    }
}

Nun gibt es aber das Problem das dann das Programm nur sehr kurzfristig rennt.

Dieses Problem lässt sich lösen indem man den User eine Eingabe machen lässt und danach die Objekte unexported. Es würde sich also folgende Zeile dafür anbieten:

while(!sc.nextLine().equals("exit"));

Wobei der Scanner von dem InputStream System.in liest und in einem try-with-resources definiert ist und das Interface Closeable implementiert.

Im finally wird dann noch das objekt unexported.

Implementierung eines neuen Tasks (z.B. Fibonacci)

Hierzu muss einfach eine andere Klasse gemacht werden die den Task und Serializable implementiert. Und da es Task implementiert und nicht abstrakt ist muss es eben auch die execute Methode überschreiben.

Den Fibonacci Algorithmus hab ich einfach vom Prof. Borko genommen ([1]). Aber wenn man will kann man ihn ja auch selber implementieren sollte nicht allzu schwer sein. Man muss eben nur darauf achten einen BigInteger zu verwenden weil wenn man nur int oder long verwendet wird es bei größeren Zahlen zu einem Integer Overflow kommen.

Das Serializable braucht man da man es ja übers Netzwerk übertragen will und will das der marshallar / unmarshallar dann aus den Bytes wieder das korrekte Objekt zusammenbaut. Wobei Serializable ein Marker Interface ist also man keine Methoden überschreiben muss wenn man es implementiert.

Im ComputePi hab ich dann noch einen 3. CLI Parameter hinzugefügt welcher vom User angegeben werden kann ob er Pi oder Fibonacci berechnen will. Wenn man also "localhost 1000 pi" eingibt oder "localhost 1000 PI" dann wird Pi auf 1000 Pi Nachkommastellen berechnet. Hier ist der Code dazu:

Task<?> task = null;
if(args[2].equalsIgnoreCase("pi")) task = new Pi(Integer.parseInt(args[1]));
else if(args[2].equalsIgnoreCase("fib")) task = new Fibonacci(Integer.parseInt(args[1]));
else {
    System.err.println("3rd Argument must be either \"pi\" or \"fib\".");
    System.exit(1);
}
System.out.println(comp.executeTask(task));

Implementierung eines Loadbalancer-Interfaces (register/unregister)

Wir wollen also nicht nur einen Server haben dem alle Clients Anfragen schicken und damit grillen. Sondern dazwischen einen Loadbalancer haben der alle Client Anfragen annimmt und dann an einen ComputeServer weiterleitet und dieses Ergebnis dann an den Client weiterleitet. Für den Client sieht es also nun so aus als würde der Loadbalancer die Anfrage bearbeiten obwohl es ja eigentlich ein ComputeServer macht.

Wobei sich die ComputeServer beim Loadbalancer registieren bzw. wenn sie "fertig" sind auch beim Loadbalancer abmelden also unregistrieren.

Nun müssen wir also wie gefordert ein Interface Loadbalanceing machen, welche diese zwei Methoden register und unregister mit dem Parameter Compute stub. Wobei dieses Loadbalanceing Interface von dem Remote Interface erbt und alle Methoden die RemoteException werfen.

Nun muss der Loadbalancer 2 Objekte exportieren und zwar einen Loadbalanceing (also LeasConnectionsLB oder RoundRobinLB) und einen Compute (ComputeEngine).

Nun würde man in der executeTask folgende Zeile schreiben:

return ((Compute)lbEngine).executeTask(t);

Den Cast braucht man nun da lbEngine als Datentyp Loadbalanceing hat. Nun ist es so das es eine weitere Klasse namens RoundRobinLB gibt. Diese Klasse implemntiert Compute und Loadbalanceing.

Nun könnte man z.b. in dieser Klasse eine Queue als Attribut haben. Wobei hier einfach register an die Queue "added" bzw. unregister einfach "removed". In der executeTask würde man dann das vorderste Element nehmen mit poll (um es auch aus der Queue zu bekommen im gegensatz zu peek) und es in ein Compute reinspeichern und dann mit add wieder ans Ende der Queue speichern. Und dann einfach nur auf das Compute executeTask ausführen mit dem Paramter T und das Ergebnis zurückgeben. Die ganze Methode sieht so aus:

@Override
public <T> T executeTask(Task<T> t) throws RemoteException {
    if(computingServers.size() != 0) {
        Compute a = null;
        synchronized (this) {
            a = computingServers.poll();
            computingServers.add(a);
        }
        return a.executeTask(t);
    }
    return null; //TODO vllt. ändern. Problem wenn es keine Server zum bearbeiten der Anfrage gibt. vllt. den Loadbalancer die Anfrage machen lassen
}

Überlegungen zum Design und mögliche Implementierung weiterer Loadbalancing-Methoden (Weighted Distribution oder Least Connections)

Ich habe den Least Connections Algorithmus gewählt weil er ein bisschen einfacher ist. Hierzu habe ich eine neue Klasse gemacht welche Compute und Loadbalanceing implementiert. Außerdem ist recht wichtig eine Map zu haben die pro Compute die Anzahl an gerade laufenden Verbindungen speichert. Wenn man dann einen Task bekommt muss zuerst der Server mit den wenigsten Connections gefunden werden dann seine Anzahl inkrementiert werden und dann der Task an ihn übermittelt werden und nach getaener Arbeit wieder den Value dekrementieren.

Implementation siehe hier.

Quellen

[1] "github mborko code-examples"; link; 11.05.2021

[2] "java get all running threads"; link

[3] "java get system load"; link; 11.05.2021

About

A 3 part (Client, Loadbalancer, Server) RMI Application which allows the client to choose the Computation. Focus lies on Loadbalanceing Algorithms like RoundRobin, Weighted Least Connections etc

Topics

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages