Galaxy@GenOuest. Aurélien Roult Yvan Le Bras Mathieu Bahin Olivier Quenez Cyril Monjeaud Olivier Collin. LibreOffice Productivity Suite



Documents pareils
UTILISATION DE LA PLATEFORME WEB D ANALYSE DE DONNÉES GALAXY

GUGGO 4 ème rencontre

Galaxy4Bioinformatics Développement et intégration d application sous Galaxy

Veeam Backup and Replication

TP2 DE BUSINESS INTELLIGENCE ISIMA ZZ3 F3

E-BIOGENOUEST, VERS UN ENVIRONNEMENT VIRTUEL DE RECHERCHE (VRE) ORIENTÉ SCIENCES DE LA VIE? Intervenant(s) : Yvan Le Bras, Olivier Collin

terra CLOUD SaaS Exchange Manuel Version : 05/

Galaxy Training days. Liste des sessions disponibles : Les formateurs :

OBJECTIFS. Une démarche E-science

e-obs : Conception et utilisation Rémy Decoupes Ether // ums3365

DIASER Pôle Assistance Rectorat

Paris JUG. Spring Batch. Mardi 14 Mai Olivier Bazoud Julien Jakubowski

Programme d'installation du logiciel pédagogique 2015

Novell Groupwise. Denis Szalkowski.

Gestion du service des enseignements

Sharpdesk V3.3. Guide d installation Push pour les administrateurs système Version

Procédure d'installation complète de Click&Decide sur un serveur

Procédure d installation pour WinEUR PROCÉDURE D INSTALLATION POUR WINEUR. Copyright GIT SA 2015 Page 1/16

JOnAS Day 5.1. Outils de développements

Open Source Job Scheduler

Boîte à outils OfficeScan

Sécurité. En profondeur

Novell. ifolder. Lisezmoi

Présentation Création-Web

Catalogue Formation «Vanilla»

Oracle Developer Suite 10g. Guide de l installation. Vista & Seven

avast! EP: Installer avast! Small Office Administration

FusionInventory. Journées Perl. Gonéri Le Bouder Juin Strasbourg

Qu'est-ce que c'est??

Galaxy est une plateforme de traitements (bio)informatiques accessible depuis l'url : (en précisant votre login et mot de passe LDAP «genotoul»).

Copyright Arsys Internet E.U.R.L. Arsys Backup Online. Guide de l utilisateur

Windows 10 Technical Preview

Installation 4D. Configuration requise Installation et activation

Déploiement d une architecture Hadoop pour analyse de flux. françois-xavier.andreu@renater.fr

Architecture de serveurs virtualisés pour la communauté mathématique

Open Source Job Scheduler. Installation(s)

Présentation du relais HTTP Open Source Vulture. Arnaud Desmons Jérémie Jourdin

Installation de la plate-forme Liberacces 2.0 «Intégrale» avec LiberInstall

Performances. Gestion des serveurs (2/2) Clustering. Grid Computing

Installation 4D. Configuration requise Installation et activation

e-biogenouest CNRS UMR 6074 IRISA-INRIA / Plateforme de Bioinformatique GenOuest yvan.le_bras@irisa.fr Programme fédérateur Biogenouest co-financé

TP 7, 8 & 9 : Installation et Gestion de GLPI et Télédéploiement SISR 1 HUBERT JULIEN LABBE RICHARD DAY MICKAEL DOGNY CHRISTOPHE

Installation et configuration d OCS/GLPI sur un Serveur Debian

Google Drive, le cloud de Google

Chapitre 2 Accès aux partages depuis votre système d'exploitation

Le Cloud Open-Mind! Emilien Macchi

Configuration requise

EMME : un environnement de gestion des métadonnées expérimentales

POVERELLO KASONGO Lucien SIO 2, SISR SITUATION PROFESSIONNELLE OCS INVENTORY NG ET GLPI

«clustering» et «load balancing» avec Zope et ZEO

Fiche Produit IPS Global Directory & Options

ShareLatex, éditeur Latex collaboratif auto-hebergé : retour d expérience au LE2I

Module 0 : Présentation de Windows 2000

DirXML License Auditing Tool version Guide de l'utilisateur

TP Git. Author : Cedric Dumoulin Date : 2 déc Rev : 9 Dec. 2014

Jahia. Guillaume Monnette École Ingénieurs 2000 Marne-La-Vallée IR3

Service de Virtualisation de la DSI UJF

Mise en place de serveurs Galaxy dans le cadre du réseau CATI BBRIC

COMMENT INSTALLER LE SERVEUR QIPAIE

VAMT 3. Activation de produits Microsoft

Cours LG : Administration de réseaux et sécurité informatique. Dans les Paramètres Système onglet Processeur, le bouton "Activer PAE/NX"

Business Intelligence avec SQL Server 2012

Fiche Produit Global Directory pour Jabber

Standard. Manuel d installation

BONJOURGRID : VERSION ORIENTÉE DONNÉE & MAPREDUCE SÉCURISÉ

Accès externe aux ressources du serveur pédagogique

Installation de Joomla avec Filezilla

FileMaker Server 14. Aide FileMaker Server

GUIDE D'INSTALLATION. AXIS Camera Station

Une solution opensource d'affichage dynamique - XIBO

Guide de l utilisateur Faronics Core

FORMATION PcVue. Mise en œuvre de WEBVUE. Journées de formation au logiciel de supervision PcVue 8.1. Lieu : Lycée Pablo Neruda Saint Martin d hères

Monitor Wall 4.0. Manuel d'installation et d'utilisation

«Clustering» et «Load balancing» avec Zope et ZEO

PROCEDURE ESX & DHCP LINUX

04/02/2014 Tutoriel. Lubuntu & glpi. thomas [NOM DE LA SOCIETE]

Les journées SQL Server 2013

FileMaker Server 14. Guide de démarrage

Jalios Delivery Engine 1.0 (JADE) Manuel d installation et d exploitation

Organiser vos données - Big Data. Patrick Millart Senior Sales Consultant

Avant-propos 1. Avant-propos Organisation du guide À qui s'adresse ce guide?...4

Charte d'utilisation des infrastructures de la plate-forme bioinformatique Genotoul

Manuel d installation serveurs

Tutoriel Cloud IFB - Initiation -

Le filtrage de niveau IP

BPEL Orchestration de Web Services

7 Développement d une application de MapReduce

TrueCrypt : installation et paramétrage

Authentification unique Eurécia

DE VOS NOMS DE DOMAINE : Cette méthode est particulièrement efficace pour un référencement optimal sur une cible bien définie.

Anticiper et prédire les sinistres avec une approche Big Data

Installation et configuration de SQL Server 2008 R2 (v3)

Plan global Outils de développement et compilation. Ce que l on veut éviter. Plan. Git : gestion de code source et versionnement.

Manuel utilisateur. des. listes de diffusion. Sympa. l'université Lille 3

10 tâches d administration simplifiées grâce à Windows Server 2008 R2. 1. Migration des systèmes virtuels sans interruption de service

DÉMATÉRIALISATION DES MARCHÉS

table des matières Administration système

Transcription:

Galaxy@GenOuest Aurélien Roult Yvan Le Bras Mathieu Bahin Olivier Quenez Cyril Monjeaud Olivier Collin LibreOffice Productivity Suite

Plan Gestion de Galaxy@GenOuest Fichiers importants dans l'arborescence Galaxy Création d'outils -> exemple Logol Mise à dispo des databanks au sein d'un outil Toolshed

Premiers pas Septembre -> Novembre 2012 Première instance mise en place Développement outils du groupe Symbiose Mais difficulté lors du dev / mise à jour Novembre 2012 -> Maintenant ( 7 mois ) Création d'un dépôt GIT central (gitlab.irisa.fr) 2 instances communicantes Développement Production -> galaxy.genouest.org Une autre à venir : toolfactory & telechargement des tools (xml, py)

Le système de gestion Dépôt central bitbucket galaxy-dist hg pull Dépôt central gitlab.irisa.fr git push git pull REMOTE LOCAL clone Dev galaxy.genouest.org galaxy.genouest.org dev + commits BDD BDD DEV PROD

Les fichiers / dossiers importants /opt/galaxy-dist/ universe_wsgi.ini tool_conf.xml datatypes_conf.xml database/ files/ 000/ 001/ dataset_000.dat tools/ alignment/ glint.xml glint.py data_source/ Fichier de configuration (database, admin, server,...)

Configuration Passage par un proxy apache Connexion via LDAP Pas de guest, pas de création, pas d'accès hors GenOuest Puissance de calcul Local (très peu) Via Genocluster SGE : 8 cores / 144 Go de ram / 11To 2 queues (dev et prod) Intégré au système de ticket OTRS ISO 9001

Les fichiers / dossiers importants /opt/galaxy-dist/ universe_wsgi.ini tool_conf.xml datatypes_conf.xml database/ files/ 000/ 001/ dataset_000.dat tools/ alignment/ glint.xml glint.py data_source/ Ensemble des tools (emplacements des descripteurs xml, structure du panel)

tool_conf.xml

Les fichiers / dossiers importants /opt/galaxy-dist/ universe_wsgi.ini tool_conf.xml datatypes_conf.xml database/ files/ 000/ 001/ dataset_000.dat tools/ alignment/ glint.xml glint.py data_source/ Ensemble des datatypes (emplacements des classes python)

datatypes_conf.xml

lib/galaxy/datatypes/sequence.py

Les fichiers / dossiers importants /opt/galaxy-dist/ universe_wsgi.ini tool_conf.xml datatypes_conf.xml database/ files/ 000/ 001/ dataset_000.dat tools/ alignment/ glint.xml glint.py data_source/ Emplacement des datasets ( cryptés en fichier.dat) Inputs et outputs

Les fichiers / dossiers importants /opt/galaxy-dist/ universe_wsgi.ini tool_conf.xml datatypes_conf.xml database/ files/ 000/ 001/ dataset_000.dat tools/ alignment/ glint.xml glint.py data_source/ Emplacement des descripteurs / wrappers

Lancement d'un job GALAXY WEB INTERFACE Job XML.py.perl.sh (R) Définition des paramètres Création de la ligne de commande Pré-traitements sur fichiers inputs / outputs Local / cluster job_conf.xml

Lancement d'un job GALAXY WEB INTERFACE tmp/ job_working_directory/ Job XML.py.perl.sh (R) Définition des paramètres Création de la ligne de commande Pré-traitements sur fichiers inputs / outputs Local / cluster job_conf.xml

Lancement d'un job GALAXY WEB INTERFACE tmp/ job_working_directory/ Job XML.py.perl.sh (R) Définition des paramètres Création de la ligne de commande Pré-traitements sur fichiers inputs / outputs Local / cluster job_conf.xml

Exemple de tool : logol logol.xml

Exemple de tool : logol logol.sh

Exemple de tool : logol tool_conf.xml

Exemple de tool : logol

Exemple de tool : logol http://wiki.galaxyproject.org/admin/tools/toolconfigsyntax

Le travail réalisé Quelques outils intégrés Outils Symbiose : Protomata, protomatch, gassst, compareads, logol,... Logiciels : QtlMap, Cap3, Phylip, blat, crass, Triage, SSpace, usearch,... Outils maisons : Genolink, genosend, genoftp, ftpsend, zip, Metadata Management (lien avec le projet EMME), text manipulation,...

Databank inside a tool bowtie2.xml tool_data_table_conf.xml

Databank inside a tool tool_data_table_conf.xml

Databank inside a tool

Toolshed Server sur port 9009 Boîte à outils Déposer descripteurs xml + wrappers (+ dependencies) Mise à disposition à la communauté Facile aux autres instances de Galaxy à installer (sans redémarrage) Beaucoup d'outils sur http://toolshed.g2.bx.psu.edu/ http://testtoolshed.g2.bx.psu.edu/ Accessible via l'onglet «Admin»