دانلود ترجمه مقاله پیشبرد مدیریت داده‌های پراکنده برای سیستم اطلاعات هیدرولوژیکی

1. مقدمه 2. پیش‌زمینه 2.1. کارهای مرتبط 3. مدیریت داده‌های بزرگ مبتنی بر iRODS در HydroShare 3.1. کار کردن حول محدودیت‌های انتقال فایل http 3.2. استفاده از اتحاد iRODS 3.3. مدیریت سهمیه 3.3.1. تشویق به‌اشتراک‌گذاری داده‌ها از طریق سیاست‌های سهمیه‌ی ساده‌شده 3.3.2. سهمیه‌ها و اتحاد 3.4. ایجاد و به روزرسانی بسته‌ی منابع بر اساس تقاضا 4. بحث و بررسی و پژوهش های آتی 4.1. تجزیه و تحلیل داده‌های مدل آب ملی (NWM) در HydroShare 4.2. برنامه‌های کاربردی وب برای پردازش، تجزیه و تحلیل، و بصری‌سازی داده‌های بزرگ در HydroShare 4.3. وارد کردن شرکا در اکوسیستم HydroShare 4.4. بهره‌گیری از اکوسیستم iRODS 4.5. سایر کارهای در حال انجام و آتی 5. نتیجه گیری

چکیده – HydroShare (https://www.hydroshare.org)، یک سیستم همکارانه‌ی آنلاین برای پشتیبانی از به اشتراک‌گذاری بازِ داده‌های هیدرولوژیکی، ابزار تحلیلی، و مدل‌های کامپیوتری است. داده‌ها و مدل‌های هیدرولوژیکی، اغلب بزرگ هستند و تا مقیاس چند گیگابایت یا ترابایت توسعه می‌یابند و در نتیجه، مقیاس‌پذیری مدیریت داده‌های متمرکز، چالش‌هایی را برای سیستمی همچون HydroShare ایجاد می‌کند. بنابراین، یک چارچوب مدیریت داده‌ی پراکنده که ذخیره‌سازی و مدیریت داده‌های فیزیکی پراکنده در مکان‌های مختلف را امکان‌پذیر می‌سازد، ضروری می‌شود. ما از میان‌افزار شبکه‌ی داده‌ی iRODS (سیستم داده‌های قواعد-محور یکپارچه)، به عنوان انتهای پشتی (back end) مدیریت و ذخیره‌سازی داده‌های پراکنده در HydroShare استفاده می‌کنیم. iRODS، یک سیستم فایل مجازی متحد را برای ذخیره‌سازی فیزیکی پراکنده در مکان‌های متعدد فراهم می‌کند و اتحاد داده‌ها در بین نهادهای با پراکندگی جغرافیایی در سراسر جهان را فراهم می‌کند. در این مقاله، رویکردهای مدیریت داده‌های پراکنده‌ی مبتنی بر iRODS که در HydroShare اجرا شده است را برای ارائه‌ی نمایش عملی یک سیستم تولید برای حمایت از داده‌های بزرگ در علوم محیطی، توصیف می‌کنیم.

HydroShare (https://www.hydroshare.org) is an online collaborative system to support the open sharing of hydrologic data, analytical tools, and computer models. Hydrologic data and models are often large, extending to multi-gigabyte or terabyte scale, and as a result, the scalability of centralized data management poses challenges for a system such as HydroShare. A distributed data management framework that enables distributed physical data storage and management in multiple locations thus becomes a necessity. We use the iRODS (Integrated Rule-Oriented Data System) data grid middleware as the distributed data storage and management back end in HydroShare. iRODS provides a unified virtual file system for distributed physical storages in multiple locations and enables data federation across geographically dispersed institutions around the world. In this paper, we describe the iRODS-based distributed data management approaches implemented in HydroShare to provide a practical demonstration of a production system for supporting big data in the environmental sciences.