gsutil下载Waymo数据集

安装 Google Cloud CLI 并配置代理

前置条件：

确保你的 Ubuntu 系统已经配置好了代理。你可以参考 我的配置过程。

正式步骤如下：

1. 下载并安装 Google Cloud CLI

首先，下载 Google Cloud CLI 的安装包并解压，然后运行安装脚本：

curl -O https://dl.google.com/dl/cloudsdk/channels/rapid/downloads/google-cloud-cli-linux-x86_64.tar.gz
tar -xf google-cloud-cli-linux-x86_64.tar.gz
./google-cloud-sdk/install.sh

2. 初始化并授权

运行 gcloud init 命令进行初始化，并根据提示设置代理。以下是默认配置：

gcloud init  # 会提示你设置代理

# 默认配置为：
# proxy/type: http
# address: 127.0.0.1
# port: 7890
# name 和 password 根据自己设置
# 接着会要求你打开链接进行验证，验证完成后配置就完成了

3. 下载数据集

使用 gsutil 下载数据集到指定的本地目录。以下命令会将数据从 Google Cloud Storage 下载到你的本地目录 /root/autodl-tmp/Pointcept-main/data_process/raw_data/waymo/：

gsutil -m cp -r "gs://waymo_open_dataset_v_1_4_3/archived_files" "gs://waymo_open_dataset_v_1_4_3/individual_files" /root/autodl-tmp/Pointcept-main/data_process/raw_data/waymo/

#/root/autodl-tmp/Pointcept-main/data_process/raw_data/waymo/ 为下载的本地目录