数据采集 |
Flume、Logstash、Kafka、Canal |
数据存储 |
HDFS、S3、HBase、Redis、MySQL、Elasticsearch |
实时计算 |
Flink、Spark Streaming |
离线计算 |
Spark、Hive |
模型训练 |
TensorFlow、PyTorch、XGBoost、LightGBM |
模型部署 |
TensorFlow Serving、TorchServe、Triton Inference Server |
特征工程 |
Feast、Horovod、FeatureStore |
服务框架 |
Flask、FastAPI、gRPC |
容器编排 |
Docker、Kubernetes |
监控告警 |
Prometheus、Grafana、ELK |