irods Un nouveau système logiciel de grille de données.
Télécharger maintenant

irods Classement & Résumé

irods Mots clés

la grille Grille de données Infrastructure de sécurité réseau Technologie SRB GSI SRB

irods La description

Un nouveau système de logiciels de grille de données. IRODS est un nouveau système d'applications de grille de données développé par le Courtier de stockage de stockage de San Diego SuperComputers (SDSC) (SRB) et collaborateurs. Le système repose sur l'expertise gagnée par l'application de la technologie SRB à l'appui des grilles de données, des bibliothèques numériques, des archives persistantes et des systèmes de données en temps réel.Les politiques de gestion (ensembles d'affirmations que ces communautés font de leurs collections) sont être caractérisé en termes de règles et d'informations de l'état. Au noyau IRODS, un moteur de règle interprète les règles pour décider de la manière dont le système est de répondre à diverses demandes et conditions. IRODS est open source (sous une licence de type BSD). Nous soutenons SDSC SRB tout en développant des IROD en parallèle et le feront pour un certain temps à venir. À un moment donné, nous fournirons des outils à migrer de SDSC SRB en IROD pour ceux qui souhaitent le faire. Quoi de neuf dans cette version: · Fédération. Une fédération de zone a été ajoutée qui fournit des installations pour deux systèmes indépendants d'IRODS indépendants pour interagir les uns avec les autres et permettre un accès homogène de données et de métadonnées à travers ces systèmes IRODS. Ces systèmes s'appellent des zones IRODS, chaque zone exécutant son propre domaine ICAT et administratif. La Fédération IRODS nécessite moins de synchronisation entre zones que le système de fédération SRB similaire. Voir Administration de la Fédération et de la Fédération pour plus d'informations. · Master / esclave icat avec Oracle. Une installation ou une zone d'IRODS peut être configurée pour fonctionner avec un seul maître ICAT plus ICAT plus zéro ou plus d'esclaves. Le but de l'esclave ICAT est d'améliorer la réactivité des requêtes sur un réseau large-zone. Les icats esclaves sont utilisés pour les requêtes de type "en lecture seule". Les icommandes suivants ont été convertis pour utiliser l'esclave ICAT par défaut: ICD, IGET, ILS, ILSRESC et IQSTAT. Cela utilise la fonctionnalité RDBMS pour sychroniser les bases de données ICAT et est donc disponible lors de l'utilisation d'Oracle comme ICAT SDBMS. · Outil de migration initiale de la SRB à IRODS. Il existe maintenant une version préliminaire d'un outil pour vous aider à convertir une instance SRB en Irodes une. Le script 'm2icat.pl' utilise Spullméta pour obtenir des informations et crée des informations de SRB-MCAT et exécute des ensembles de commandes pour IADMIN, PSQL et IMEA pour créer des ressources, des collections, des donnéesObjects et des utilisateurs dans l'instance IRODS. Le système IRODS peut alors accéder aux données d'ancien-SRB sans déplacer les fichiers physiques. Cela est toujours incomplet et ne peut pas gérer de nombreuses fonctionnalités de la SRB, mais vous voudrez peut-être expérimenter avec elle. Voir le script pour plus d'informations et contactez-nous pour nous aider à planifier des extensions supplémentaires. · Améliorations des infrastructures de sécurité de la grille (GSI). Un problème important dans l'interface IRODS à GSI a été corrigé, permettant aux utilisateurs réguliers de l'IROD d'authentifier avec GSI. Les utilisateurs peuvent également désormais définir la variable d'environnement Server_DN pour authentifier le serveur via le système GSI (effectuer une authentification mutuelle). · Les IRODS fusionnent des améliorations. Le fusible IRODS fonctionne maintenant avec les dernières versions de fusible au lieu de la seule version 2.7.0. Caching Fichiers et répertoires Résultats des requêtes Pour améliorer les performances de l'appel GetatTtri qui appelle fréquemment par fusible. Les petits fichiers sont mis en cache pour améliorer les performances d'E / S sur de petits fichiers. Les modes de fichiers de fichiers ont été activés pour que Chmod de fichiers fonctionne maintenant. Vous devriez voir une amélioration des performances notable des commandes telles que LS ou CP de petits fichiers. · Explorateur IRODS pour Windows. Le nouvel explorateur IRODS pour Windows est disponible depuis la mi-septembre. Comme décrit sur la page Windows, il s'agit d'un navigateur IRODS qui fonctionne en tant que Windows native binaire et fournit une interface utilisateur graphique riche et une navigation rapide de la structure de fichiers de collecte hiérarchique à l'intérieur IRODS. En outre, les utilisateurs peuvent ajouter, modifier et afficher des métadonnées avec de longues valeurs de chaîne via une boîte de dialogue Metadata conviviale. · Datamode préservé. Un élément de métadonnées "Datamode" a été ajouté de sorte que le mode de fichier de fichiers téléchargés sur IRODS et téléchargé à partir d'IRODS peut être préservé. "Datamode" est l'état en lecture-écriture-exécuté pour l'utilisateur, le groupe, l'autre, d'un fichier. · Nouveau regroupement. Une nouvelle commande « ibun » est utilisé pour gérer le regroupement des petits fichiers dans des fichiers structurés tels que les fichiers tar. Il peut être utilisé pour le téléchargement, le téléchargement et l'archivage d'un grand nombre de petits fichiers. Par exemple, pour télécharger un grand nombre de petits fichiers, un utilisateur peut utiliser la commande normale tar UNIX Tar ces fichiers dans un fichier tar unique. Ce fichier tar unique peut alors être transféré à iRODS en utilisant la commande iput. La commande « ibun -x » peut être utilisé pour demander au serveur iRODS pour décompresser ce fichier dans de nombreux petits fichiers et enregistrer ces petits fichiers avec le iCat. De même, la commande « ibun -c » peut être utilisé pour télécharger efficacement un grand nombre de petits fichiers. · Nouveau 'ipasswd' Commande. « Ipasswd » permet aux utilisateurs de changer leur mot de passe iRODS. Comme pour la commande iadmin correspondant, le mot de passe est masquée pour le transfert de réseau. · Data Access (RDA) axé sur les règles à Oracle porté. RDA est désormais pris en charge sur Oracle, ainsi que PostgreSQL précédente. RDA donne accès à des bases de données arbitraires à travers le système de iRODS, un peu comme le SRB DAI (Database Interface d'accès), mais mis en uvre par des règles et des micro-services. · D'autres améliorations de la RDA. a été mis en uvre un micro-services msiRdaRollback; des fuites de mémoire ont été fixés; et une forme brouillée du mot de passe de RDA peut être définie dans le fichier de configuration RDA. · La langue de la règle « break ». Une déclaration « break » est maintenant accepté dans la langue iRODS Règle de sortir de for, while et boucles foreach. · Fédération utilisateur et des changements administratifs. Dans les commandes iadmin et Imeta, les utilisateurs sont maintenant représentés avec un nom de zone en option (utilisateur ), où la zone locale est par défaut. iadmin a mkzone, modzone et rmzone subcommands pour manipuler l'information à distance de la zone. ilsresc, FSIAT et irmtrash maintenant '-Z ZONENAME' options de travail avec des zones distantes. En interne, l'authentification de l'utilisateur utilise un nom de zone en option. · Fédération serveur d'authentification. Une capacité a été ajouté lorsque le serveur iRODS qui authentifie un client pour une zone éloignée, est lui-même authentifiées. Cette option est facultative, mais fortement recommandé pour les zones fédérées pour améliorer la sécurité. Voir - pour plus d'informations. · Zone renomme. L'outil iadmin peut maintenant être utilisé pour renommer votre zone locale, la manipulation de la conversion de l'information sur les zones et l'utilisateur et renommer des collections d'accueil de l'utilisateur (via une nouvelle règle et micro-services). Cela peut être utile avec la Fédération iRODS Zone. · Option -T de connexion temporisée. Une nouvelle option -T a été ajouté à la iput, iget, irepl et commandes icp qui renouvelle la connexion de socket entre le client et le serveur après 10 minutes de connexion. Cela contourne le problème des prises se chronométré par le pare-feu tel que rapporté par certains utilisateurs. · Nouveau RBUDP mode de transfert de données. Un nouveau mode de transfert de données - RBUDP (UDP fiable BLAST) a été ajouté, en plus de l'existant le séquentiel (un seul flux TCP) et parallèle des modes (de flux multi-TCP) actuellement pris en charge par iRODS. RBUDP est développé par Eric He, Jason Leigh, Oliver Yu et Thomas Defanti de U de Ill à Chicago. http://www.evl.uic.edu/cavern/RBUDP/Reliable souffle UDP.html Il utilise le protocole UDP pour le transfert de données à haute performance. Une nouvelle -Q option a été ajoutée à la iput, iget, irepl et commande icp pour spécifier l'utilisation du protocole de RBUDP. · Améliorations HDF5 / iRODS. Le client HDF5 / iRODS peut maintenant être construit sans la lier à la bibliothèque de HDF5. Une capacité JNI pour le client JAVA un tel hdfView, a été ajouté. Une fuite de mémoire a été fixée. · Hérité des autorisations d'accès. Un attribut d'héritage peut être défini sur une collection pour provoquer de nouvelles données-objets et des sous-collections créées dans le cadre d'acquérir les droits d'accès (ACLs) de la collection. Voir « ichmod -h » et « -A NIT » pour plus d'informations. · Améliorations de l'ICAT. Le logiciel d'interface de catalogue IRODS MetaData (ICAT) a été amélioré de différentes manières, en plus des modifications de la Fédération de la zone IRODS. L'accès aux tables d'audit via les requêtes est maintenant restreinte par défaut. Un bogue a été corrigé de traiter de manière récursive contrôle d'accès sur des objets de données répliqués. Les problèmes pour obtenir le totalRowwcount (à la demande) ont été résolus (pour Oracle et Postgres). Dans la requête générale, tout nombre de conditions composées (séparées par || ou) peut maintenant être traitée (au lieu de deux seulement). Après diverses erreurs, les fonctions ICAT (lors de l'utilisation de PostgreSQL) feront un retour automatique pour permettre à SQL ultérieure de fonctionner. Certaines fuites de mémoire ICAT-Oracle ont été trouvées et fixées. IMETA et les requêtes d'AVU ICAT peuvent désormais accepter plusieurs conditions séparées par "et" et un seul "ou". 'isysméta' peut désormais définir le type de données d'un objet de données. Pour une maintenance à long terme améliorée, des modifications internes ont été apportées à la manière dont les requêtes générales de l'ICAT sont structurées. · Micro-services supplémentaires. Un certain nombre de nouveaux micro-services ont été ajoutés pour permettre de nouvelles fonctionnalités, notamment certaines des fonctionnalités décrites dans ces notes de version. Celles-ci peuvent également être utilisées dans vos propres règles et comme des exemples de développement de vos propres micro-services. Voir les micro-services relâchés pour la liste actuelle. Un merci spécial à Romain Guinot du centre open source - Atos Origin (http://www.portaildulibre.fr) pour fournir certains des nouveaux micro-services, à la fois pour le cur et comme module séparé (Guinot '). · Test d'améliorations. Comme auparavant, la version de développement d'Irods est construite et testée en permanence sur des hôtes de dés locaux et parfois sur diverses plates-formes de l'installation de construction et de test NMI. Les tests ICAT ont été étendus pour couvrir de nouvelles fonctionnalités de l'ICAT. Certains tests lourds ont été développés. · Améliorations d'installation / de contrôle. Une variété de modifications ont été apportées aux scripts d'installation et de contrôle des IROD pour gérer des situations d'erreur spécifiques; En outre, finitionTetup.pl à jour maintenant ~ / .oDBC.ini pour inclure la section qui est également stockée dans le fichier ... / pgsql / etc / odbc.ini, pour éviter les problèmes sur certains hôtes, etc. , les scripts de fabrication vont maintenant automatiquement les modules de relier automatiquement des fichiers source mis à jour. Et 'iinit' créera le répertoire ~ / .irods s'il n'est pas présent et invite et stocke les éléments nécessaires. Les scripts d'installation sont maintenant par défaut à Postgres 8.3.5. · Nouvelle journalisation de transfert. Lorsqu'il est activé (manuellement), les opérations de transfert d'obtenir, mettre, répliquer et rsync sont enregistrées. Voir les commentaires dans rsdataobjclose.c pour plus d'informations. · Imkdir peut créer une collection parent. Une option A -P a été ajoutée à la commande Imkdir pour la faire créer des collections parent si elles n'existent pas déjà. · Autres correctifs de bugs. Comme toujours, d'autres bugs ont été corrigés et de nombreuses petites améliorations apportées; trop nombreux pour décrire.

irods Logiciels associés