irods Un nuevo sistema de software de cuadrícula de datos.
Descargar ahora

irods Clasificación y resumen

irods Etiquetas

red Cuadrícula de datos Infraestructura de seguridad de la red Tecnología SRB GSI Srb

irods Descripción

Un nuevo sistema de software de cuadrícula de datos. Irods es un nuevo sistema de aplicaciones de red de datos desarrollado por el Equipo y colaboradores del Broker (SRB) del Centro de Almacenamiento (SDSC) de San Diego Supercomputer (SDSC). El sistema se basa en la experiencia obtenida a través de la aplicación de la tecnología SRB en apoyo de las cuadrículas de datos, las bibliotecas digitales, los archivos persistentes y los sistemas de datos en tiempo real. Las políticas de gestión (conjuntos de afirmaciones que realizan estas comunidades sobre sus colecciones) son Ser caracterizado en términos de reglas y información del estado. En el núcleo de IRODS, un motor de reglas interpreta reglas para decidir cómo el sistema responderá a varias solicitudes y condiciones. Irods es de código abierto (bajo una licencia de tipo BSD). Estamos apoyando SDSC SRB mientras desarrollan irods en paralelo, y lo hará durante bastante tiempo. En algún momento, proporcionaremos herramientas para migrar de SDSC SRB a IRODS para aquellos que desean hacerlo. ¿Qué hay de nuevo en este lanzamiento: · Federación. Se ha agregado la Federación de Zona, que proporciona instalaciones para dos o más sistemas de IROD independientes para interactuar entre sí y permitir un acceso perfecto de datos y metadatos en estos sistemas de IRODS. Estos sistemas se denominan zonas de Irods, con cada zona que ejecuta su propio Dominio ICAT y administrativo. La federación de Irods requiere menos sincronización entre las zonas que el sistema de federación SRB similar. Consulte Administración de federación y federación para obtener más información. · Maestro / esclavo ICAT con Oracle. Se puede configurar una instalación o zona de IRODS para que se ejecute con un solo maestro ICAT más cero o más icats esclavos. El propósito del esclavo ICAT es mejorar la capacidad de respuesta de las consultas en una red de área amplia. Los listas de los esclavos se utilizan para las consultas de tipo "lector solo". Los siguientes icmands se han convertido para usar el esclavo ICAT de forma predeterminada: ICD, IGET, ILS, ILSRESC e IQStat. Esto hace uso de la funcionalidad de RDBMS para syachronizar las bases de datos de ICIAT y, por lo tanto, está disponible cuando se usa Oracle como el ICAT RDBMS. · Herramienta inicial de migración de SRB a IRODS. Ahora hay una versión preliminar de una herramienta para ayudar a convertir una instancia de SRB a uno de los irods. El script 'M2ICAT.PL' usa SpullMeta para obtener información de SRB-MCAT y crea y ejecuta conjuntos de comandos para IADMIN, PSQL e IMETA para crear recursos, colecciones, datos y usuarios y usuarios en la instancia de IRODS. El sistema IRODS puede acceder a los datos anteriores SRB sin mover los archivos físicos. Esto sigue siendo incompleto y no puede manejar muchas de las características de SRB, pero es posible que desee experimentar con él. Consulte el script para obtener más información y contáctenos para ayudarnos a planificar extensiones adicionales. · Mejoras de Infraestructura de Seguridad de Grid (GSI). Se corrigió un problema importante en la interfaz IRODS a GSI, lo que permitió a los usuarios regulares de Irods autenticar con GSI. Los usuarios también pueden configurar ahora la variable de entorno Server_dn para autenticar el servidor a través del sistema GSI (realizar autenticación mutua). · Irods Fusible mejoras. Irods Fuse ahora funciona con las últimas versiones de fusible en lugar de solo la versión 2.7.0. Los archivos de almacenamiento en caché y los directorios consultan los resultados para mejorar el rendimiento de la llamada GetAtTri, que se llama con frecuencia por fusible. Los archivos pequeños se almacenan en caché para mejorar el rendimiento de E / S en archivos pequeños. Los modos de archivo de archivos se han habilitado para que el CHMOD de los archivos ahora funciona. Debe ver la mejora de rendimiento notable en los comandos como LS o CP de archivos pequeños. · Irods Explorer para Windows. El nuevo explorador de Irods para Windows ha estado disponible desde mediados de septiembre. Como se describe en la página de Windows, este es un navegador de Irods que se ejecuta como un binario nativo de Windows y proporciona una interfaz de usuario gráfica rica y una navegación rápida de la estructura de archivo de recolección jerárquica dentro de Irods. Además, los usuarios pueden agregar, modificar y ver metadatos con valores largos de cadena a través de un diálogo de metadatos fáciles de usar. · Datamode conservado. Se agregó un elemento de metadatos "DATAMODE" de modo que se puede preservar el modo de archivo de archivos cargados a los irods y descargarse de IRODS. "Datamode" es el estado de ejecución de lectura-escritura para usuario, grupo, otro, de un archivo. · Nuevo paquete. Se usa un nuevo comando 'Ibun' para manejar el paquete de archivos pequeños en archivos estructurados, como los archivos de alquitrán. Se puede utilizar para la carga, la descarga y el archivo de una gran cantidad de archivos pequeños. Por ejemplo, para cargar una gran cantidad de archivos pequeños, un usuario puede usar el comando Normal Unix TAR para tardar estos archivos en un solo archivo de alquitrán. Este único archivo de alquitrán se puede cargar en Irods usando el comando iput. El comando "Ibun -x" se puede usar para solicitar al servidor IRODS que no destruya este archivo en muchos archivos pequeños y registre estos archivos pequeños con el ICAT. De manera similar, el comando "IBUN -C" se puede usar para descargar de manera eficiente una gran cantidad de archivos pequeños. · Nuevo comando 'IPASSWD'. 'IPASSWD' permite a los usuarios cambiar su contraseña de Irods. Al igual que con el comando IADMIN correspondiente, la contraseña está ofuscada para la transferencia de red. · Acceso a datos orientado a las reglas (RDA) portado a Oracle. RDA ahora es compatible con Oracle, así como el postgresql anterior. RDA proporciona acceso a las bases de datos arbitrarias a través del sistema IRODS, algo así como la SRB DAI (Interfaz de acceso a la base de datos), pero se implementó a través de Reglas y Micro-Services. · Otras mejoras de RDA. Se implementó un micro-servicio MSirDarollback; Se solucionaron algunas fugas de memoria; Y se puede configurar una forma ofuscada de la contraseña RDA en el archivo de configuración RDA. · Languageo de reglas 'Break'. Ahora se acepta una declaración de 'Break' en el lenguaje de las reglas de Irods para romper, mientras que, y foreach Bucles. · Usuario de la Federación y cambios administrativos. En los comandos de IADMIN y IMETA, los usuarios ahora están representados con un nombre de zona opcional (usuario ), donde la zona local es predeterminada. IADMIN tiene subcomandos Mkzone, Modzone y Rmzone para manipular la información de la zona remota. ILSRESC, IMETA e IRMTRASH ahora tienen opciones de '-Z Zonename' para trabajar con zonas remotas. Internamente, la autenticación de usuario utiliza un nombre de zona opcional. · Autenticación del servidor de la Federación. Se agregó una capacidad donde el servidor IRODS que está autenticando a un cliente para una zona remota, está autenticada. Esto es opcional, pero altamente recomendado para las zonas federadas para mejorar la seguridad. Ver - para información adicional. · Cambiar el nombre de la zona. Ahora se puede usar la herramienta IADMIN para cambiar el nombre de su zona local, manejar la conversión de la zona de la zona y la información del usuario y cambiar el nombre de las colecciones de usuarios de usuarios (a través de una nueva regla y micro-servicios). Esto puede ser útil con la Federación de la Zona Irods. · Conexión cronometrada -t opción. Se agregó una nueva opción a los comandos IPUT, IGET, IREPL e ICP que renueva la conexión del zócalo entre el cliente y el servidor después de 10 minutos de conexión. Esto se convierte en el problema de los sockets que se agotan en el momento del firewall según lo informado por algunos usuarios. · Nuevo modo de transferencia de datos RBudP. Se agregó un nuevo modo de transferencia de datos: se agregó RBudP (Blast Fiable UDP), además de los modos Secuencial Secuencial (Secuenciado TCP) y los modos paralelos (flujos de MULTI TCP) actualmente son compatibles con los irods. RBudP es desarrollado por Eric He, Jason Leigh, Oliver Yu y Thomas Defanti de U of Ill en Chicago. http://www.evl.uic.edu/cavern/rbudp/Reliable Blow UDP.HTML Utiliza el protocolo UDP para la transferencia de datos de alto rendimiento. Se ha agregado una nueva opción -Q al comando iPUT, IGET, IREPL e ICP para especificar el uso del protocolo RBUDP. · Mejoras HDF5 / IRODS. El cliente HDF5 / IRODS ahora se puede construir sin enlazar a la biblioteca HDF5. Se agregó una capacidad de JNI para el cliente Java, como HDFVIEVIA, se agregó. Se solucionó una fuga de memoria. · Permisos de acceso heredado. Se puede establecer un atributo de herencia en una colección para causar nuevos datos y sub-colecciones creados en virtud de él para adquirir los derechos de acceso (ACL) de la colección. Consulte 'Ichmod -H' y 'ILS -A' para obtener más información. · Mejoras de ICAT. El software de interfaz de catálogo de Metadata Irods (ICAT) se mejoró de varias maneras, además de los cambios para la Federación de la Zona IRODS. El acceso a las tablas de auditoría a través de las consultas ahora está restringido de forma predeterminada. Se solucionó un error al tratar recursivamente el control de acceso a los objetos de datos replicados. Los problemas para obtener la totalización total (cuando se solicitan) se resolvieron (tanto para Oracle como para postgres). En la consulta general, ahora se pueden manejar cualquier número de condiciones compuestas (separadas por || o) (en lugar de dos). Después de varios errores, las funciones de ICAT (cuando se usan PostgreSQL) realizarán una reversión automática para permitir que SQL posterior funcione. Algunas fugas de memoria ICAT-Oracle fueron encontradas y fijas. IMETA y las consultas AVU de ICAT ahora pueden aceptar múltiples condiciones separadas por 'y' y un solo 'o'. 'IsisMeta' ahora puede configurar el tipo de datos de un objeto de datos. Para un mejor mantenimiento a largo plazo, se realizaron cambios internos de la forma en que se estructuran las consultas generales de ICAT. · Micro-servicios adicionales. Se han agregado una serie de nuevos micro-servicios para habilitar una nueva funcionalidad, incluidas algunas de las características descritas en estas notas de la versión. Estos también se pueden utilizar en sus propias reglas y en los ejemplos para desarrollar sus propios microestores. Consulte los Micro Servicios listos para la lista actual. Agradece especial a Romain Guinot del Centro de SourCueros Open - Atos Origin (http://www.portaildulibre.fr) para proporcionar algunos de los nuevos micro-servicios, tanto para el núcleo como como un módulo separado ('Guinot'). · Mejoras de prueba. Como antes, la versión de desarrollo de Irods se construye y se prueba continuamente en los hosts de dados locales y, ocasionalmente, en varias plataformas en la instalación de compilación y prueba de NMI. Las pruebas de ICAT se expandieron para cubrir la nueva funcionalidad de ICAT. Se desarrollaron algunas pruebas de carga pesada. · Mejoras de instalación / control. Se hicieron una variedad de cambios a los scripts de instalación y control de IRODS para manejar situaciones de error específicas; Además, FinkSetup.pl ahora actualizará ~ / .ODBC.INI para incluir la sección que también se almacena en el archivo ... / PGSQL / etc / odbc.ini, para evitar problemas en algunos hosts, etc. , los scripts de fabricación ahora volverán a vagar automáticamente los módulos que tengan los archivos de origen actualizados. Y 'iinit' creará el directorio ~ / .irods si no está presente y solicita y almacena los elementos necesarios .irodsenv si faltan. Los scripts de instalación ahora predeterminados para postgres 8.3.5. · Nuevo registro de transferencia. Cuando está habilitado (manualmente), se registran las operaciones de transferencia de GET, PUT, REPLICATE y RSYNC. Vea los comentarios en rsdataobjclose.c para obtener más información. · Imkdir puede crear una colección de padres. Se agregó una opción -p al comando IMKDIR para hacer que cree colecciones de padres si aún no existen. · Otros correcciones de errores. Como siempre, se han fijado otros errores y se hicieron muchas mejoras pequeñas; Demasiado numeroso para describir.

irods Software relacionado