ARC: Тор желісін есептеу құралдарының платформасы

Кіріспе

Желілік есептеу бағдарламалық жасақтамасы

infobox бағдарламалық жасақтамасы
| name = ARC
| logo = Logo ARC.png
| logo alt = ARC логотипі

| скриншот = ng мониторы.jpg
| caption = ARC логотипі және монитор скриншоты
| collapsible = yes
| developer = NorduGrid, NeIC, EU жобалары
| latest release version = 6.19
| latest release date = 2024 04 10
| released = 2004 04 13
| repo =
| operating system = Linux, Microsoft Windows, Mac OS X
| programming language = C++, PHP, Perl, Python, Shell
| language = ағылшын, орыс, швед
| genre = Желілік есептеу
| license = Apache License 2.0 ARC CE функционалдығы деректерді дайындау және кэштеуді қамтиды, бұл деректерге көп көлемді үлестірілген есептеуді қолдау үшін әзірленген. ARC – Apache License 2.0 лицензиясы бойынша таратылатын ашық кодты бағдарламалық қамтамасыз ету.

Тарих

ARC пайда болды (және әлі де жиі аталады) NorduGrid орталық бағдарламасы ретінде, бастапқыда Globus Toolkit-тің үстіндегі архитектура ретінде ұсынылған, ол Үлкен Адрондық Соққыштың эксперименттері үшін жоғары энергиялық физика есептеулерінің қажеттіліктеріне оңтайландырылған. ARC-ті NorduGrid сынақ ортасына алғаш рет 2002 жылдың жазында орнатты, ал 2003 жылы ол күрделі есептеулерді қолдау үшін пайдаланылды. ARC-тің тұрақтандырылған алғашқы нұсқасы (0.4 нұсқасы) 2004 жылдың сәуірінде GNU General Public License лицензиясы бойынша шықты. Бұл нұсқада "Advanced Resource Connector" атауы орталық бағдарламалық жасақтаманы инфрақұрылымнан ажырату үшін енгізілді. Сол жылы Швецияның ұлттық желісі Swegrid жобасы ARC-ге негізделген алғашқы үлкен салааралық инфрақұрылым болды. 2005 жылы NorduGrid ARC дамуын қолдау және үйлестіру үшін бірлескен жұмыс ретінде ресми түрде құрылды. 2006 жылы екі тығыз байланысты жоба іске қосылды: ARC-ге негізделген паннордтық e-ғылым инфрақұрылымын іске асыратын Nordic Data Grid Facility және ARC-ді келесі буынның Grid орталық бағдарламасына айналдыруға бағытталған KnowARC. ARC v0.6 2007 жылдың мамыр айында шығарылды, ол екінші тұрақты нұсқа болды. Оның басты ерекшелігі – жоғары деңгейдегі қосымшаларды оңай әзірлеуге мүмкіндік беретін клиенттік кітапхананы енгізу болды. Бұл сонымен қатар ашық стандарттарды қолданатын ARC-тің алғашқы шығарылымы болды, өйткені ол JSDL-ді қолдады. Сол жылдың соңында ARC орталық бағдарламалық жасақтамасының келесі буынының алғашқы технологиялық алдын ала көрінісі қолжетімді болды, бірақ ARC-тің өзімен бірге таралмады. Жаңа тәсілге веб-қызметтерге негізделген архитектураға көшу және жалпы алғанда негізгі кодты қайта құру кірді. 2008 жылы NorduGrid консорциумы барлық ARC компоненттері үшін Apache лицензиясын қабылдады. 0 желісінің соңғы тұрақты нұсқасы ARC v0.8 болды, ол 2009 жылдың қыркүйегінде шығарылды. Ақырында оған жаңа орындау қызметінің алдын ала нұсқасы – A REX және басқа да бірнеше компоненттер, мысалы Chelonia, ISIS, Charon және arcjobtool GUI кірді. ARC v0.8 нұсқасымен қатар, 2009 жылдың қарашасында EU KnowARC жобасы тұжырымдамалық ARC NOX жиынтығын шығарды, ол толық желілік шешім болды, ол толықтай веб-қызмет технологияларына негізделген. NOX атауы шын мәнінде шығарылу күнін көрсетеді: Бұқа жылының қарашасы. ARC 6 2019 жылдың мамыр айында шығарылды және бірдей интерфейстерге ие болғанымен, ол толығымен қайта құрылған конфигурация мен жаңа басқару құралын ұсынады.

ARC appeared (and is still often referred to) as the NorduGrid middleware, originally proposed as an architecture on top of the Globus Toolkit optimized for the needs of High Energy Physics computing for the Large Hadron Collider experiments. First deployment of ARC at the NorduGrid testbed took place in summer 2002, and by 2003 it was used to support complex computations. The first stable release of ARC (version 0.4) came out in April 2004 under the GNU General Public License. The name "Advanced Resource Connector" was introduced for this release to distinguish the middleware from the infrastructure. In the same year, the Swedish national Grid project Swegrid became the first large cross discipline infrastructure to be based on ARC. In 2005, NorduGrid was formally established as a collaboration to support and coordinate ARC development. In 2006 two closely related projects were launched: the Nordic Data Grid Facility, deploying a pan Nordic e Science infrastructure based on ARC, and KnowARC, focused on transforming ARC into a next generation Grid middleware. ARC v0.6 was released in May 2007, becoming the second stable release. Its key feature was introduction of the client library enabling easy development of higher level applications. It was also the first ARC release making use of open standards, as it included support for JSDL. Later that year, the first technology preview of the next generation ARC middleware was made available, though was not distributed with ARC itself. The new approach involved switching to a Web service based architecture, and in general a very substantial re factorisation of the core code. In 2008, the NorduGrid consortium adopted the Apache License for all ARC components. The last stable release in the 0 line was ARC v0.8, shipped in September 2009. It eventually included a preview version of the new execution service the A REX and several other components, such as Chelonia, ISIS, Charon and the arcjobtool GUI. In parallel to ARC v0.8, the EU KnowARC project released in November 2009 the conceptual ARC NOX suite, which was a complete Grid solution, fully based on Web service technologies. The name NOX actually indicates the release date: November of the Year of the Ox. ARC 6 was released in May 2019 and while having same interfaces it features a completely redesigned configuration and a new management tool.

Бастапқы код

ARC – NorduGrid ашық репозиторийінен тегін қолжетімді бағдарламалық қамтамасыз ету, түрлі Linux жүйелері үшін екілік пакеттер түрінде де, бастапқы код түрінде де, сондай-ақ GitHub-та да қолжетімді. ARC аралық бағдарламалық жасақтамасын ашық көзбен әзірлеуді NorduGrid ынтымақтастығы үйлестіреді. Бағдарламалық қамтамасыз етуге, құжаттамаға және тарату шараларына үлес қосушылар қауымдастықтан және әртүрлі жобалардан келіп түседі, мысалы, EU KnowARC және EMI жобалары, NDGF, NeIC және түрлі ұлттық инфрақұрылымдық және ғылыми-зерттеу жобалары.

Версияларды басқару

2011 және 2018 жылдар аралығында ARC жеке компоненттерден құралған жинақталған шығарылымдар үшін Ubuntu-ға ұқсас нұсқалау жүйесін қолданды. Жеке компоненттердің әрқайсысы код таңбаларына сәйкес келетін өз нұсқаларына ие. Күнделікті қарым-қатынаста негізгі ARC пакеттерінің нұсқасы ресми шығарылым нөмірінің орнына көбінесе пайдаланылады. ARC6 (2019) нөмірінен бастап шығарылымның нұсқа нөмірі код таңбасының нөмірімен толық сәйкес келеді.

Стандарттар мен өзара іс-қимыл қабілеттілігі

ARC бірнеше Ашық Желі Форумы стандарттарын, атап айтқанда, JSDL, Glue2, BES, UR/RUS және StAR-ды қолданады.

Еуропалық ортақ құралдар бастамасы

2010-2013 жылдары бірнеше маңызды ARC компоненттері – ең бастысы HED, A REX, клиенттер және кітапханалар – European Middleware Initiative (EMI) бағдарламалық кешеніне қосылды. EMI арқылы ARC Еуропалық желілік инфрақұрылымның (EGI) Бірыңғай орталық құралдар таратуының (UMD) құрамына кірді.

Скандинавиялық DataGrid және NeIC

ARC — WLCG 1-ші деңгейлі орталығын құрайтын Скандинавиялық дерек желісінің (NDGF) есептеу инфрақұрылымының негізі болып табылады. 2006-2010 жылдары NDGF ARC-ны дамытуға белсенді үлес қосты, ал 2010 жылдан бері EGI ішінде ARC-ны енгізу бойынша тәжірибелік көмек көрсетеді. 2012 жылдан бастап NDGF Солтүстік электрондық инфрақұрылымдық ынтымақтастығының құрамына Солтүстік 1-ші деңгейлі (NT1) жобасы ретінде қосылды.

KnowARC жобасы

"Арк қызметтеріне және ашық стандарттарға негізделген желілік технологияларды бөлісу қалай жүзеге асырылады" (KnowARC) жобасы – 2006 жылдың маусымынан 2009 жылдың қарашасына дейін "Қосымша желілік технологиялар, жүйелер және қызметтер" IST 2005 2.5.4 басымдығы бойынша қаржыландырылған Еуропалық Одақтың Алтыншы аяқталған бағдарламасының мақсатты ғылыми-зерттеу жобасы болды. Көп жағынан, осы жоба Арк-тің қалыптасуына ықпал етті. Басты мақсаты – Арк-ті ашық қоғамдық стандарттарға негіздеу болды, ал маңызды нәтижелердің бірі – Арк қызметтері үшін стандартталған хостинг ортасын (HED) құру еді. Басты міндеті Арк-ті одан әрі дамыту, сондай-ақ медицина және биоинформатика салаларында Желілік және Арк технологияларын қолдануды кеңейту болды. 2009 жылдың шілдесінде KnowARC Fedora және Debian репозиторийлеріне Globus Toolkit компоненттерін қосу арқылы Желілік технологияларды ресми Linux репозиторийлеріне енгізуге үлес қосқанын хабарлады.