下载数据集
如果您想获取传神社区平台上的数据集并下载至本地,当前我们支持通过Git、Web端下载、命令行下载以及SDK四种方式下载模型。
使用Git下载数据集
- 您可以通过HTTP下载数据集:
git lfs install
git clone https://opencsg.com/datasets/demo/test_dataset.git
- 您也可以通过SSH下载数据集:
git lfs install
git clone ssh://git@hub.opencsg.com/datasets/demo/test_dataset.git
注:需要将 SSH 公钥添加到您的用户设置才能推送更改或访问私有存储库。
在Web端下载数据
在文件列表页点击下载按钮可直接下载文件
使用命令行下载数据
使用命令行工具 csghub-cli
可以方便的下载数据,安装方法如下:
pip install csghub-sdk
使用方法如下:
export CSG_TOKEN=your_access_token
# donwload dataset
csghub-cli download demo/test_dataset -t dataset
使用SDK下载数据
CSGHub SDK 提供了一个 Python Libaray,可以在代码中通过SDK下载数据。
示例代码如下:
from pycsghub.snapshot_download import snapshot_download
token="xxxx"
endpoint = "https://hub.opencsg.com"
repo_id = 'AIWizards/tmmluplus'
repo_type="dataset"
cache_dir = '/Users/xiangzhen/Downloads/'
result = snapshot_download(repo_id, repo_type=repo_type, cache_dir=cache_dir, endpoint=endpoint, token=token)