Skip to content

zhengkai15/DeepSuite

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

10 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

DeepSuite

DeepSuite 是一个面向深度学习开发者的通用工具库,基于 PyTorch 和 PyTorch Lightning 设计开发。它致力于为深度学习项目提供高效、灵活的工具支持,覆盖从配置管理、数据处理到模型训练和推理的完整流程,旨在提升开发效率,减少重复性工作。

通过安装 DeepSuite,开发者可以快速集成常用工具,专注于核心算法开发和业务逻辑实现。

功能模块

DeepSuite 工具箱包含以下主要模块,每个模块均包含常用的深度学习开发组件:

  1. Config 配置管理
  • 随机种子:统一设置随机种子以保证实验可复现性。
  • 参数解析:支持从命令行或脚本中解析参数。
  • 配置文件加载:从 YAML 配置文件中加载实验配置。
  • 动态更新配置:支持从命令行或其他来源动态更新配置内容。
  1. Dataloader 数据加载器
  • 支持多种数据格式和数据增强方法。
  • 提供便捷的多进程加载支持,优化数据读取效率。
  • 可扩展自定义数据预处理流程。
  1. Train 模型训练
  • 学习率调度器:集成多种学习率调度策略,灵活控制学习率变化。
  • 早停机制:提供简单易用的 Early Stopping 工具,防止过拟合。
  • 优化器支持:内置主流优化器(如 SGD、Adam),并支持自定义优化器。
  1. Eval 模型评估
  • 提供通用的评估方法,支持多种任务类型的评估指标(如分类、回归)。
  • 支持自定义评估指标的扩展。
  1. Inference 模型推理
  • 简化模型推理流程,便于快速部署和测试。
  • 提供批量推理支持和结果保存功能。
  1. Model 模型定义
  • 提供常用神经网络模型架构的模板(如 CNN、RNN、Transformer)。
  • 支持快速搭建自定义模型。
  1. Loss 损失函数
  • 内置多种常用损失函数(如交叉熵、均方误差)。
  • 支持组合损失和自定义损失函数扩展。
  1. Utils 工具函数
  • 时间装饰器:方便统计函数运行时间,优化代码性能。
  • 日志工具:集成灵活的日志记录工具,支持多种日志级别输出。
  • 其他工具:如进度条显示、结果可视化辅助工具等。

安装方法

通过以下命令将 DeepSuite 安装到开发环境中:

pip install -e .

使用场景

DeepSuite 适用于以下场景:

  • 深度学习项目的快速开发与验证。
  • 模型训练、评估和推理流程的标准化与模块化。
  • 需要灵活调整配置、多次实验的研究型项目。

About

深度学习(DL)工具套件(Suite)

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published