Globus数据传输

内容

Globus数据传输

概述

球可以让你使用一个web浏览器或命令行接口提交转让和同步请求玛蒂尔达之间的大型数据集HPC和其他机构,或本地工作站。

源系统和目标系统之间的数据传输直接Globus曲调性能参数,维护安全、监控进展,并验证正确性。你可以随时检查传输状态通过Globus活动页面并将收到电子邮件时,传输完成。

球提供了安全、快速文件/端点之间的数据传输,并旨在促进科研合作。此外,球是主要致力于大型数据集的转移而不是数量大或小的小文件。

创建一个Globus ID

创建一个Globus帐户ID,导航到GlobusID页面和填写要求字段。你可以使用任何电子邮件地址您希望创建您的Globus ID(它没有对应你的你的电子邮件地址)。你是否选择把你的或者电子邮件与你的Globus ID,你仍然需要去通过你的单点登录(SSO)当你登录到玛蒂尔达端点,我们将在下面说明(您还需要授权访问玛蒂尔达)。Globus ID是方便的,因为它允许用户把多重身份在一起在一个ID。例如,欧玛蒂尔达访问(通过你的NetID)和密歇根州立大学冷藏工人(HPCC)访问。您还可以使用它来设置一个个人的端点(上鞋楦的讨论)在您的个人工作站(s)。

玛蒂尔达的数据收集

可访问的目录内球被定义为“数据收集”。玛蒂尔达配置了以下数据收集:

玛蒂尔达HPC -用户的主目录
玛蒂尔达-嘁喳的空间,可以在用户或项目的水平
玛蒂尔达项目——项目目录空间
玛蒂尔达的档案进行归档存储,和客人集合-特殊空间

这些被称为“映射集合”,因为每个定义集合映射到特定的存储空间或挂载。存储挂载,玛蒂尔达集群的一个组成部分是:

/home/<信> / <用户名>——您的主目录
/ scratch -为用户提供空间和项目相关
/项目——提供空间项目目录

映射的集合“玛蒂尔达档案”只有通过挂载点/档案,只有在hpc-data节点上。hpc-data节点不用户通过SSH访问,它仅用于Globus文件传输。以下部分描述标准文件传输的玛蒂尔达的集群,项目和空间。的讨论档案提出后。

开始

开始使用Globus玛蒂尔达,首先导航到Globus网站,然后单击“登录”按钮。

接下来从下拉框选择“奥克兰万博ManBetX登录大学”,然后单击“继续”:

在点击“继续”你将被重定向到奥克兰大学的登录页面。万博ManBetX登录输入你NetID和密码,然后单击“登录”:

登录后,您将被重定向到Globus文件管理器:

在顶部,你会看到一盒标签“集合”。搜索可用的玛蒂尔达集群集合,在集合框中输入“玛蒂尔达”,您应当会看到类似如下:

现在选择感兴趣的集合。在本例中,我们将选择“玛蒂尔达HPC”集合对应于用户的主目录:

(注:你第一次访问一个新的集合,你可能会被要求确认您的权限访问集合。请给予建议的权限。)

这现在应该给你一个清单的文件和文件夹在您的主目录。

可以使用相同的过程来访问其他集群集合:“玛蒂尔达抓”和“玛蒂尔达的项目”。

注意,访问“玛蒂尔达抓”将带您到根目录“/划痕”。从那里,点击“用户”或“项目”文件夹,然后在相应的用户或项目空间。同样,对于“玛蒂尔达项目”,你将被引导到根目录“/项目”。从那里,点击项目所需的空间。

文件传输

正如前面提到的,玛蒂尔达和其他机构之间的文件传输是可能的公开访问Globus端点。也可以在本地工作站之间传输文件,并使用Globus玛蒂尔达。下面的例子将说明玛蒂尔达之间的转移和密歇根州立大学的HPCC端点(请注意这个例子只会工作,如果你有一个MSU HPCC用户帐户)。

以访问你的家目录下停“玛蒂尔达HPC”集合,点击菜单项在Globus“转移或同步. .”。您现在应该看到你的家目录列表在左边的窗格中,和一个“搜索”框在右窗格中:

现在在搜索框中输入“MSU的hpcc”在右窗格中,找到冷藏工人的密歇根州立大学hpcc集合(注意:系统会提示您进行身份验证访问集合使用你指定MSU NetID和密码)。一旦选定,你现在应该看到你左边的玛蒂尔达的主目录清单,和密歇根州立大学HPCC右边的主目录:

传输文件,单击源的目录清单,选择文件或文件夹(s)你想转让,并简单地把它们拖到目标窗格中。

从这个目录视图可以删除文件或文件夹,创建文件夹,上传文件的数据收集从你的本地机器上,或者从收集到您的本地机器上下载文件。

请注意:在大多数情况下,您将提供访问另一个机构的公共集合(或私人分享),并将搜索,或直接输入集合名称开始转移到或从玛蒂尔达。截至2022年11月,你有订阅Globus。这意味着用户生成私人股票从玛蒂尔达外部机构现在可能,但只有在档案馆收藏这是研究后。然而外部用户无法访问,请注意,玛蒂尔达股份“玛蒂尔达HPC”,“玛蒂尔达抓”,或“玛蒂尔达项目”没有一个OU NetID和玛蒂尔达HPC帐户。

球连接的个人

球连接个人是一个应用程序,该应用程序可以下载到你的个人工作站。Globus连接个人本质上创建一个个人“集合”,对应于当地的桌面或笔记本电脑和促进本地工作站和另一个端点之间的传递。的球连接个人网站提供安装说明在Windows、Mac和Linux客户端。

Globus连接个人开始时它会询问你的登录信息为您的工作站和一个名字“集合”。这将创建一个个人端点将活跃每当连接个人正在运行。文件传输可以通过点击Globus连接个人发起的系统托盘图标,并选择“网络转移”。这将打开一个网页与当地球收集左窗格中显示。简单地搜索收集所需的搜索框右边选择文件/文件夹,开始转移。

玛蒂尔达的档案

玛蒂尔达档案空间设计以适应π是谁需要档案的存储空间来存储数据在集群工作操作不常用。此外,它是设置允许π与合作者是谁的共享数据不隶属于欧通过创建客人集合。客人集合与non-OU分享的人是不允许在国内,项目,或者挠空间。只有欧玛蒂尔达的用户帐户可以访问这些数据收集。然而,这些π的人之前安排了生产可以请求一个空间/档案,其中存储的数据可能与外部共享或者人。请联系生产为更多的信息。

一旦你/档案空间设置和数据转移到它,你可以共享数据与外部合作者。这是一个两部分的过程;首先,你必须定义客人收集你想分享,第二,建立权限(例如只读或读/写),人应该访问。一旦完成,会产生一个链接,你可以与合作者分享。电子邮件也可以由Globus合作者与客人收集信息。