-Talend Open Studio 2.40RC1 [1]: c’est partit pour la stabilisation de la version 2.4. La C (Release Candidate) fige les évolutions fonctionnelles pour se concentrer sur la correction d’anomalie afin d’avoir une version finale début juin. Les nouveautés depuis la derniere version milestone sont nombreuses. Citons l’ajout d’une option sur le tMap permettant de gérer des lookups de très gros volumes de données (détails techniques à [2]) http://talendforge.org/wiki/doku.php?id=specifications:hash_file), l’implémentation de la spécification sur les contexts et Metadata [3], les wizzard d’analyse d’impact lors de la modification de Metadonnées ou de Context, des nouveaux wizzards pour Excel, SalesForces.com (avec support des types customs), de nouveaux composants… Maintenant on a besoin de vous pour trouver et saisir des bugs dans notre bugtracker et aboutir à une version stable rapidement.

-Talend Open Studio 2.3.3 [2]: 3e version corrective pour TOS 2.3 (application d’un patch de 51 corrections depuis TOS 2.3.2 : changelog [4])

-Une mise à jour de la documentation Anglaise et Française. Désormais le Reference Guide est aussi disponible en français (Cf mon précédent billet sur l’explication de la doc [5])

[1] http://www.talend.com/download.php
[2] http://talendforge.org/wiki/doku.php?id=specifications:hash_file
[3] http://talendforge.org/wiki/doku.php?id=specifications:contexts_and_metadata
[4] http://talendforge.org/bugs/changelog_page.php
[5] http://blog.developpez.com/index.php?blog=107&title=nouvelles_documentations_en_francais_pou

http://www.netvibes.com/talend

[1] http://ocarbone.free.fr/blog/?page_id=2
[2] http://blog.developpez.com/index.php?blog=107&title=nouveaute_pour_la_forge_de_talend
[3] http://blog.developpez.com/index.php?blog=107&title=la_communaute_talend_les_blogs_a_ne_pas

L’avantage de FreeAnalysis est dans le fait que les interfaces (pour visualiser des cubes Olap comme Mondrian) sont disponibles en Eclipse RCP (Client Riche) et en Web 2.0 (Google Web Toolkit, GWT-Ext plus particulièrement [3]), deux choix technologiques que Talend a adopté pour ses produits.

Je parlerai de son intégration dans les futures plateformes BI dans un prochain billet (et dévoilerai aussi par la meme occasion les fonctionnalités clés du futur SpagoBI 2.0 dont une pre alpha devrait arriver en fin de semaine).

Cédric

[1] http://ns36005.ovh.net/web/guest/products/free_analysis
[2] http://www.bpm-conseil.com
[3] http://blog.developpez.com/index.php?blog=107&title=redonnez_vie_a_votre_appli_web_gwt_ext_2

http://blog.developpez.com/index.php?blog=107&title=ext_js_ou_comment_perdre_la_confiance_d

Les releases notes de la derniere RC de freeanalsis :

FreeAnalysis 1.10 RC2 New features includes
– Tigh Integration with our BIRepository (Scheduler, Java, and Web modules)
– Enhanced aggregate Designer Wizard, integrated with our BIScheduler
– Java and Web package now load dimensions dynamically, only the name of each dimension, to support degenerated dimensions
– Java version can now connect against our BIRepository and use available cubes
– Schema Designer is LDAP compliant, and contains a wizard to define private views
– bugs fixed (from 1.10 RC1) and new options for deployment
– full documentation available in french to explain how to use and deploy Freeanalysis in enterprise

FreeAnalysis platform contains the following components
– Schema Designer (release 0.66) : to design, manage and deploy your olap schemas
– Java client (release 1.11) : to test your schema before deployment, to create advanced reports and for end user
– GWT Web server (release 1.10) : to deploy at enterprise level your olap schemas, currently an embeded Pentaho 1.6 GA

[1] http://www.developpez.net/forums/showthread.php?p=3026173#post3026173
[2] http://www.jedox.com/en/enterprise-spreadsheet-server/excel-olap-server/excel-olap-server.html
[3] http://fr.wikipedia.org/wiki/MOLAP
[4] http://fr.wikipedia.org/wiki/ROLAP
[5] http://mondrian.pentaho.org/
[6] http://fr.wikipedia.org/wiki/Multidimensional_Expressions

Voici un exemple très simple pour illustrer l’alimentation d’un cube Palo.

0. L’installation au sein de Talend Open Studio consiste à déplacer la DLL (située dans <TOS_Install_Dir>\plugins\org.talend.designer.components.localprovider_xxx\components\tPaloOutput \paloIX.dll) dans votre répertoire Windows/system32 ou bien à la racine de votre TOS_Install_Dir.

1. Création d’une base de données et d’un cube avec 2 dimensions.
Nom de la base de données: n2
Nom du Cube: comp
Les 2 Dimensions: Lastname, State

2. Nous allons utiliser un fichier client au format CSV (customers.csv) comme entrée. Nous filtrons tout d’abord les colonnes à l’aide du tFilterColumn pour ne retenir que les Lastname, Revenue et State. Ensuite nous regroupons les clients par état (State) et nom (LastName) pour effectuer une somme sur les revenus par client et par état, via le composant tAgregateRow.

3. Le composant tPaloOutput permet de réaliser l’intégration des données au sein de Palo. Prenez soin de bien sélectionner la mesure (Revenue) et que l’ordre des colonnes dans le schéma talend corresponde à l’ordre des colonnes dans le cube. Une case à cocher « Create Element if not exist » (non cochée dans cet exemple) permet de réaliser un pré-traitement avant l’intégration des données : vérifie si l’élément existe au sein du cube donné. S’il n’existe pas, l’élément est créé et la mesure écrite.

4. Vous pouvez désormais lancer votre job et visualiser à l’aide d’Excel que les données sont correctement écrites et accessibles au sein du cube.

J’espère que cet article vous a permis d’avoir un aperçu des possibilités de cette intégration avec Palo.

Cédric

[1] http://www.exoplatform.org/portal/public/en/product/webos/overview
[2] http://www.exoplatform.org/portal/public/en/product/portal/overview
[3] http://www.exoplatform.org/portal/public/en/product/ecm/overview
[4] http://www.exoplatform.org/portal/public/en/product/cs/overview

Le lancement a été fait sur la seine, aux Yachts de Paris là où on avait lancé Talend Open Studio v1.0 (en octobre 2006). Ce fut l’occasion de retrouver de nombreux libristes : Cedric Carbone (Talend) Vincent Massol (XWiki, Cactus, Cargo, Maven) Benjamin Mestralet (eXo Platform) Didier Girard (application-servers.com) Tristan Nitot (Mozilla) Guillaume Laforge (Groovy / Grails) Ludovic Dubost (XWiki) Miguel Valdes Faura (Bonita)

Dans le meme thread [2] de vous trouverez une réponse logique de la communauté : faire un fork à Ext-JS qui restera lui LGPL : OpenEXT est né [3]

Ce qu’il faut retenir, lorsqu’on veut utiliser une librairie sans être contaminé, choisir une librairie avec une licence non contaminante (comme la LGPL) et surtout choisir une librairie qui intègre de nombreuses contributions extérieures (qui ne soient pas facilement supprimables) afin que la propriété intellectuelle soit répartie avec le plus grand nombre d’acteur!

A noter, La roadmap d’extjs 2.1+ (GPL) n’ajoute pas de nouveautés intéressantes par rapport à ext-js LGPL (version 2.0.2) dans un contexte GWT-EXT (c’est à dire que les nouveautés sans déjà implémentées dans GWT-Ext ou un de ses plugin soit parce que ce n’est pas pertinent dans GWT-Ext)

PS : MyGWT , rebaptisé Ext-GWT… pour profiter de la confusion avec GWT-Ext , est passé en meme temps de LGPL vers GPL.

[1] http://blog.developpez.com/index.php?blog=107&title=redonnez_vie_a_votre_appli_web_gwt_ext_2&more=1&c=1&tb=1&pb=1
[2] http://groups.google.com/group/gwt-ext/browse_thread/thread/3cb5283a2c08840d?hl=en
[3] http://ajaxian.com/archives/openext-the-fork

Techniquement, à chaque commit sur le tronc ou une des branches (aka à chaque changement de version du Subversion), un nouveau build de Talend Open Studio est déclenché (principe d’intégration continue).
Une fois ce build terminé, il est automatiquement installé et des Jobs Talend de tests unitaires (TUJ) sont exécutés[3]. Ces TUJ écrivent dans une base de données leur résultat que Colibri peut facilement afficher.

Ce graphique représente l’évolution du nombre de TUJ par rapport aux révisions du SVN (la révision 11000 date de février, la 13168 date de ce soir). Nous avons aujourd’hui ~400 TUJ (200 TUJ Perl et 200 TUJ Java).

Ce 2e graphique représente l’évolution du temps de ces TUJ révision apres révision. Aujourd’hui, au vue de ce graphique, on comprend qu’on saute qq revisions dues au temps machine requis pour chaque exécution

Bravo à Pierrick, Matthieu et Stéphane qui ont beaucoup bossé sur ce sujet ces derniers mois.

[1] Colibri http://talendforge.org/colibri/executions.php
[2] Aide de Colibri http://talendforge.org/wiki/doku.php?id=automated_tests:results

[3] TUJ http://talendforge.org/wiki/doku.php?id=automated_tests:design

Attention, il s’agit d’une version Millestone c’est à dire à destination des utilisateurs désirant tester les nouvelles fonctionnalités implémentées dans le produit et ne doit pas être mis en production. La version Stable (GA – General Availibility) est prévue pour début juin. Le développement de nouvelles fonctionnalités sera bloqué à la fin du mois afin de rentrer en période de RC (ReleaseCandidate) pour stabiliser l’application.

Cette version 2.4.0M1 introduit de nouvelles possibilités telles que la mise en surbrillance des sous-job d’un job, la possibilité de lancer un job fils en spécifiant sa version, la possibilité de contextualiser tous les champs d’un composant (y compris ceux représentés par une liste déroutante ou un checkbox), paramétrer un chargement implicite de fichier/table de contexte, l’amélioration de nombreux composants et l’ajout de 16 nouveaux composants [1].
Le change log complet est disponible sur le bugtracker [3].
Venez échanger avec nous sur le forum! [4]

[1] Page de download : http://www.talend.com/download.php.
[2] Liste des nouveaux composants : http://www.talendforge.org/components/index.php
[3] Changelog : http://www.talendforge.org/bugs/changelog_page.php
[4] Forum : http://talendforge.org/forum/index.php

CamptoCamp qui édite SDI sera d’ailleurs le 8,9 et 10 avril 2008 au salon Géo-événement 2008 à Paris (Village Open Source). [2]
Screenshots [3], Tutoriels [4][5], liste des composants [6] sont disponibles ci-dessous.

[1] Download SDI : http://www.spatialdataintegrator.com/
[2] Salon Géo-événement 2008 : http://www.ortech.fr/geo-evenement/village_open_source.php
[3] Screenshots : https://sourceforge.net/project/screenshots.php?group_id=213368&ssid=75169
[4] Tutoriels : http://talendforge.org/wiki/doku.php?id=sdi:tutorials
[5] Screencasts : https://sourceforge.net/project/showfiles.php?group_id=213368&package_id=259088&release_id=568720
[6] Liste des composants : http://talendforge.org/wiki/doku.php?id=sdi:geocomponentslist

Cédric

Aucune fonctionnalité n’a été introduit et vous pouvez vous référer à un billet précédent qui décrit les nouveautés de TOS 2.3 : http://blog.developpez.com/index.php?blog=107&title=talend_open_studio_2_3_0_version_finale_&more=1&c=1&tb=1&pb=1

[1] Page de téléchargement de TOS 2.3.2 : http://www.talend.com/download.php
[2] page suivante :

[2] bug fixes 2.3.2 (http://talendforge.org/bugs/changelog_page.php) :
– 0003372: [Java components] allow empty thousand separator in advanced separator for numbers (mhirt) – resolved.
– 0003291: [Java components] tPostgresqlSCD can’t handle mixedcase or uppercase tablenames or columns (mhirt) – resolved.
– 0003208: [Java components] tFuzzyMatch : type String for column VALUE unappropriate (mhirt) – resolved.
– 0003396: [Java components] SCD Cache problem (mhirt) – resolved.
– 0003352: [Java components] MSSQL SCD type 2 works wrong on the version field (mhirt) – resolved.
– 0003205: [Java components] Enhance tFileInputXML speed (mhirt) – resolved.
– 0003263: [properties] SQLite – Stats & Logs – connection parameter not reflecting database (nrousseau) – resolved.
– 0003389: [Java components] MS SQL SCD cache problem : wrong duplicates (mhirt) – resolved.
– 0003277: [context] Context accessibility with Ctrl+ Space (nrousseau) – resolved.
– 0003354: [Java components] Canceling output creation on tMap make impossible to create an output with the same name (amaumont) – resolved.
– 0002874: [schema management] tMSSqlSCD bad generated code (mhirt) – resolved.
– 0003283: [Java components] Filter condition for Look up inside tMap component is not working as desired (rbillerey) – resolved.
– 0003343: [Java components] Missing migration task for tFilterRow (mhirt) – resolved.
– 0003344: [Java components] Migration from 2.2 Problem with tRunJob Code generation (mhirt) – resolved.
– 0003238: [general] Can’t generate code error (nrousseau) – resolved.
– 0003168: [import/export job/project] If one project is not valid (problems in files), it’s impossible to access other projects. (nrousseau) – resolved.
– 0003201: [graphical User Interface] Reload components can cause problems on component’s metadata. (nrousseau) – resolved.
– 0003341: [context] Unable to import context with Java keywords from 2.2.4 to 2.3.1 (nrousseau) – resolved.
– 0003342: [context] Migration from 2.2 to 2.3 : Unparsable null date in context (nrousseau) – resolved.
– 0003307: [run job] Used context on view « Run Job » is set automatically as « Default » in any cases. (nrousseau) – resolved.
– 0003332: [graphical User Interface] Code view might not be updated when switching from designer to code. (nrousseau) – resolved.
– 0003276: [Java components] tELTOracleMap lacks provision for service name on Oracle connections (nrousseau) – resolved.
– 0002608: [context] Rename automatically in all the job fields a context variable when user rename it (nrousseau) – resolved.
– 0003315: [performance] CodeView.refresh() excute 3 times when click a node in job designer editor. (nrousseau) – resolved.
– 0003202: [job designer editor] [ELT components] Link an output from a dbmap can cause some errors. (nrousseau) – resolved.
– 0003325: [import/export job/project] wrong context in tRunJob on exported generated code (nrousseau) – resolved.
– 0003237: [Java components] tLineChart displays « !!!LONG_NAME!!! » rather than a description (smallet) – resolved.
– 0003123: [Java components] tFileRowCount : bad return value (mhirt) – resolved.
– 0003258: [Java components] tJasperOutput and tJasperOutputExec can’t be use on Linux platform. (mhirt) – resolved.
– 0003281: [Perl components] « Notice » text is not understandable on DB output component Settings (plegall) – resolved.
– 0003287: [Java components] tFileFetch component don’t have doubleQuote in Destination filename field (mhirt) – resolved.
– 0003197: [Java components] Reduce tAdvancedFileOutputXML DOM4J memory consumption (mhirt) – resolved.
– 0003303: [job designer editor] It will take a long time if pasting more than 20 nodes. (nrousseau) – resolved.
– 0003254: [db mappings] In ELT components, Join type select does not appear in Windows systems (amaumont) – resolved.
– 0003026: [job designer editor] deactivate single component has no effect (nrousseau) – resolved.
– 0003115: [job designer editor] Problem with a deactivated subjob (nrousseau) – resolved.
– 0003218: [Java components] tSchemaComplianceCheck (nrousseau) – resolved.
– 0003264: [repository] The job design should be closed when the job is deleted forever (nrousseau) – resolved.
– 0003282: [Perl components] Problem with tMySqlOutput and additional column in a perl project (plegall) – resolved.
– 0003225: [specific views] [Module View] Specific perl modules from other components exists but an error is shown. (nrousseau) – resolved.
– 0003194: [job designer editor] Component with a fixed schema as Input and additionnal column as output – extra columns deleted when opening job (nrousseau) – resolved.
– 0003188: [graphical User Interface] Changes to note-text saved only in special cases (nrousseau) – resolved.
– 0003164: [Java components] bug on tPivotOutputDelimited in Java version (nrousseau) – resolved.
– 0003223: [run job] Enhance error management for Java Running job : delete line Gap between Code Generated in Talend and Code Executed (nrousseau) – resolved.
– 0003243: [import/export job/project] missing library in exported script for jobs containing tMysqlOutputBulkExec (nrousseau) – resolved.
– 0003242: [import/export job/project] missing library in exported script for jobs containing tMysqlBulkExec (plegall) – resolved.
– 0003110: [context] Incompatibility with old syntax for context variables (nrousseau) – resolved.
– 0003185: [technical] Bad default values when loading the components xml for invisible fields. (nrousseau) – resolved.
– 0003184: [schema management] Question about target schema propagation : Yes or No occurs the same result (nrousseau) – resolved.
– 0003165: [graphical User Interface] tAdvancedFileOutputXML_1: Right contextmenue have no affect if row in table not selected (mhirt) – resolved.
– 0003207: [Java components] tSortRow : Sort out of memory Temp File should not appears in Basic Settings (mhirt) – resolved.
– 0003131: [Java components] tFileOutputXML add missing default root node (mhirt) – closed.