aiforge/README.md

• 1.目标
• 2.我们所提供的
• 3.架构介绍
• 4.使用说明
• • 4.1 编译
  • 4.2 启动
• 5.技术选型

English

OpenData - open data project management

1.目标

OpenData 的首要目标是提供对开源数据的大存储支持和管理，旨在为国家开源项目的建设贡献力量。为软件行业中的开源项目的发展提供助力。

2.我们所提供的

• 项目管理
• git代码管理
• 大数据集存储管理，最高单个数据集限制为1TB
• 初期为社区项目免费提供30PB的算力，后续根据使用情况逐步增加

3.架构介绍

本项目的开发基于gitea，除gitea本身的功能外，还提供了数据集管理以及算力支持等功能。总体架构如下图所示：

其中，OpenData是本项目的后台服务；云脑提供智能算力服务；文件服务提供内部文件操作服务，如数据集解压缩、查看数据集目录结构等；
minio提供数据集存储服务。

4.使用说明

• node版本 >= v10.13.0
• golang版本 >= 1.13.3

4.1 编译

make build

4.2 启动

./opendata web

5.技术选型

• web框架：Macaron
• 数据库框架：xorm