dimanche 6 mai 2012

Les bannis et les proscrits - Suite et fin

Cela devait arriver, je me suis laissé déborder : j'ai terminé les trois tomes de ce cycle avant même de mettre à jour mon blog.
Vous allez me dire que c'est plutôt bon signe ; et en effet, les trois derniers tomes ont tenu toutes les promesses que les deux premiers nous avaient fait , je n'ai pas pu m'arrêter avant d'avoir terminé le dernier élément du cycle.

Sans dévoiler aucune piste sur le déroulement de cette histoire, je peux vous dire que dans ces trois volumes nous allons voir une Elena grandir et prendre de l'ampleur. Ses compagnons et elle vont être soumis à des épreuves de plus en plus rudes. Le lecteur, quant à lui, sera tenu en haleine jusqu'au bout. Car, contrairement à d'autres cycles, ce qui est aussi très agréable dans cette oeuvre est que justement il y a un bout, une fin qui ne nous laisse pas sur notre faim.

JAVA 7 - Fork/Join framework

En parcourant le net, je me suis rendu compte que peu de pages, françaises, étaient présentes pour décrire de façon simple et concise le framework Fork/Join apporté par Java 7. Le but de ce billet sera d'en donner les éléments clés ainsi que les pointeurs sur les pages qui m'ont aidé à me faire une rapide compréhension de ce nouveau standard.

Le principe général

C'est une mise en application du vieil adage "diviser pour mieux régner" ; sauf que dans notre cas c'est pour la bonne cause.
Désormais, quand on commence à coder une boucle qui risque d'être longue car consommatrice de CPU ou lorsque l'on commence à implémenter un algorithme dont l'exécution sera longue en terme de temps CPU ; JAVA met à notre disposition un lot de classes permettant de coder facilement l'exécution en parallèle de certains traitements mais aussi, et surtout, aidant différentes unités d'exécution (ou Tache) à se synchroniser les unes par rapport aux autres. 

Mise en application

C'est au développeur de découper son calcul/traitement en unités d'exécution (ou tache) plus petites, jusqu'à obtenir une taille qu'il considérera comme suffisamment petite pour pouvoir être exécutée sans être divisée. Ce découpage peut être fait de manière récursive. Chaque tâche devra dériver de la classe "ForkJoinTask". En fait, le framework fournit deux classes spécialisant la class ForkJoinClass :
  • RecursiveTask<T> : pour coder une tâche retournant une valeur de Type T 
  • RecursiveAction : pour coder une tâche dont on n'attend pas de valeur résultat, mais devant réaliser une action.
Une fois ce travail de découpage effectué, la tâche principale ( ou point d'entrée ) est passé à un executor spécialisé ( class ForkJoinPool ).

Les liens

JMX à travers un firewall

Comme je l'ai déjà dit ici ( en anglais ) je suis un adepte de la technologie JMX. Mais je viens d'être confronté à un problème : la connection (en JMX) à une JVM cachée derrière un firewall. Après avoir un peu cherché, j'ai fini par trouver comment le solutionner  ; par contre, je n'ai pas trouvé de documentation en français. C'est pourquoi j'écris cet article : si vous aussi, vous avez des problèmes pour établir une connexion JMX à un serveur JAVA et cela au travers d'un firewall alors il pourra vous intéresser.

Description de la problématique

J'essaie de me connecter à un serveur écoutant sur le port JMX 1100 ; serveur séparé de mon poste client ( sur lequel je lance par exemple une jconsole ) par un firewall.
Pour forcer le port JMX j'ai rajouté les paramètres suivant à la ligne de commande de démarrage de mon serveur :
-Dcom.sun.management.jmxremote.port=1100
-Dcom.sun.management.jmxremote.authenticate=false
-Dcom.sun.management.jmxremote.ssl=false
Du côté de mon firewall nous avons fait le nécessaire pour ouvrir le port TCP 1100. Et pourtant ma jconsole n'arrive pas à se connecter au serveur distant. Après analyse j'ai fini par comprendre qu'en fait d'autres ports sont mis en jeux.

Les explications

En fait le port 'jmx' n'est que celui recevant les connexions ; ensuite un autre est utilisé sur lequel sont exportés les objets (RMI) accédé via JMX. Cet autre port est en général alloué dynamiquement ; mais il est possible de le contrôler.

La solution

Elle consiste à créer une instance de la classe JMXConnectorServerFactory, et de l'associer au MBean server de l'application. Si vous ne voulez pas, ou si vous ne pouvez pas, créer un tel serveur dans le code de votre application ( par exemple si vous n'avez pas la main sur toutes les sections du code ; voir pas la main du tout ) vous pouvez le créer dans un agent enregistré au démarrage de la VM : ainsi vous allez modifier le fonctionnement de votre application sans toucher à son code.

Exemple d'agent

public class JmxDefaultAgent {
    
    
    public static MBeanServer getMBeanServer() {
        ArrayList list =MBeanServerFactory.findMBeanServer(null) ;
        return((list.size()==0)?ManagementFactory.getPlatformMBeanServer():list.get(0));
    }
    
    public static void premain(String agentArgs) throws IOException {
        int port = Integer.parseInt(System.getProperty("com.me.jmxport", "1100"));
        
        String hostname = System.getProperty("com.me.jmxhost", null);
        if (hostname==null) hostname = InetAddress.getLocalHost().getHostName();

        System.out.println("Create RMI registry for JMX on port " + port);
        LocateRegistry.createRegistry(port);

        
        MBeanServer mbs = getMBeanServer();

        // Environment map
        HashMap env = new HashMap();
        JMXServiceURL url = new JMXServiceURL("service:jmx:rmi://"+hostname+":" + port + "/jndi/rmi://" + hostname
                + ":" + port + "/jmxrmi");

        // Now create the server from the JMXServiceURL
        //
        JMXConnectorServer cs = JMXConnectorServerFactory.newJMXConnectorServer(url, env, mbs);

        // Start the RMI connector server.
        //
        System.out.println("Start the RMI connector server on port " + port);
        cs.start();
    }
}

Si vous avez la main sur le code

Il n'est pas nécessaire d'utiliser un agent ; il vous suffit simplement de démarrer le serveur JMXConnectorServer lors du chargement de votre application.

Dernier problème

Le code précédent fonctionne parfaitement ; son seul problème est que le server JMXConnectorServer démarré dans l'agent va empêcher l'arrêt correct de la JVM : un tel serveur doit être stoppé via sa méthode stop. Autrement dit, ce serveur n'est pas démarré sous la forme d'un thread daemon qui à l'arrêt de la JVM nettoierait ses ressources et s'arrêterait automatiquement.

Si vous n'avez pas la main sur le code du serveur pour y rajouter l'appel à la méthode stop ; une méthode consiste à créer un thread dans l'agent vu précédemment, thread dont le rôle sera de détecter la mort imminente de l'application. Cette détection consiste à repérer qu'il n'existe plus de thread actif au sein de la JVM, en dehors des thread daemon et de ceux liés au serveur JMXConnectorServer ; et dans ce cas, on peut appeler la méthode stop du JMXConnectorServer de manière sure.

Exemple de thread détectant l'arrêt de l'application

public class Cleaner extends Thread {
    public Cleaner(JMXConnectorServer connectorServer) {
        super("ThreadCleaner");
        this.connectorServer = connectorServer;
    }

    @Override
    public void run() {
        boolean alive = true ;
        try {
            while( alive == true ) {
                Thread[] activeThreads = new Thread[Thread.activeCount()+10];
                int total = Thread.enumerate(activeThreads);
                try {
                    alive = false ;
                    for (int i=0;i<total;i++) {
                        Thread currentThread = activeThreads[i];
                        if (currentThread.getName().contains("RMI")) continue;
                        if (currentThread.equals(this)) continue;
                        if (currentThread.isDaemon()) continue;
                        else {
                            alive = true ;
                            currentThread.join();
                            break;
                        }
                    }
                    if (alive == false) {
                        System.out.println("no more thread remaining - stopping jmxconnectorserver");
                    }
                } catch(InterruptedException e) {
                    System.out.println("received interruption - stopping jmxconnectorserver");
                    alive = false ;
                }
            }
        } finally {
            try {
                connectorServer.stop();
            } catch (IOException e) {

            }
        }
    }

    private JMXConnectorServer connectorServer ;
}

Lien utiles