发布日志

Release 2.17.1🎉 @2022.08.15

🎊 很高兴发布了V2.17.1的版本，平台全新上线可视化的设计器建模组件！支持用户低门槛，拖拽式的快速完成建模工作。🎊

[bug修复 🐛]

1. 修复了SDK项目、模型环境变量配置错误的问题；

2. 修复了源基础镜像被更新后不存在时，点击重构后界面报错的问题；

3. 修复了添加主机时，私钥超过限定长度而无法保存的问题；

4. 修复了特征库任务绑定管理员可能引起的bug；

5. 修复了部分场景下更新系统镜像未更新成功的问题；

6. 修复代码建模默认模型排序错误的问题；

7. 设计器建模（ML Designer）实验的训练步骤列表，正在运行的数据添加时间展示；

8. 设计器建模（ML Designer）部分场景下注册工作流不成功的问题；

[新特性 ✨]

1. 重构自定义镜像功能，平台支持基于系统镜像，快速生成自己业务所需镜像，可以在后续选择基础镜像时，选择已经预生成的自定义镜像，从而进一步加快打包速度。另外当遇到系统lib库so找不到的问题，可以通过自定义镜像的方式来完成添加，不再受系统镜像不支持的限制；

2. 自定义镜像支持生成多个版本，并且支持两种构建策略：重新构建，增量构建。当缺少库需要打补丁时，优选增量构建；当需要替换库版本或者差异较大时，优选重新构建，由用户根据业务需要自行决定。

3. 设计器建模（ML Designer）支持对画布运行生成的各个节点的运行结果数据回流注册到数据集中，持久化为资产，便于后续的再使用；

4. 校验时支持上传多张图片进行批量校验；

[功能增强 💪]

1. 优化设计了图片在线校验展示组件，支持按标签分组、全面支持缩放（ctrl+滚轮）、支持标注框选择后联动，支持显示隐藏标签等功能；

2. 优化默认进入校验界面时，默认选中当前最新版本作为后续校验的默认版本，而不再需要每次手动选择；

3. 校验时支持对所有校验时填写数据、选择的图片保存示例，可以用于后续再校验或者发布时默认选择使用；

4. 当发布服务未启动时，调用接口返回code值，从200调整至503 Service Unavailable；

5. 设计器建模（ML Designer）添加运行时间的展示；

6. 调整图像展示的数据格式：1.支持列表返回，每组数据代表一个标注框对应的数据信息；支持对象返回，需要将标注框本身信息统一放置bndbox中才可被识别，其他可自行添加业务所需数据字段信息；

Release 2.17.0🎉 @2022.07.28

🎊 重磅发布V2.17.0的版本，本次更新重点提升了核心功能的性能指标，整体使用体验将更加平滑顺畅。对部分重构了底层构建逻辑，大幅提升训练推理速度，以及模型服务接口！🎊

[bug修复 🐛]

1. 支持了再校验时配置CPU、内存、GPU等参数配置，避免默认的0.5core，0.5G导致大型的模型无法启动的bug；

2. 修复了部分场景下，活动日志记录不全的问题；

3. 修复了SDK不支持下载小波数据的原始数据的问题；

4. 修复了设计器建模（ML Designer）相关的权限问题，与平台整体角色定义的权限保持一致体验；

5. 修复了设计器建模（ML Designer）相关的活动日志记录不全的问题；

[新特性 ✨]

1. 升级AI引擎，支持更多新特性，支持通过配置pip所需的requirements.txt注册模型，而非conda；

2. 大幅提升了训练、部署的镜像构建速度，部分重构了底层构建逻辑，摒弃conda，不再强调多语言支持的兼容性，以支持Python语言作为核心能力，更加专注于模型的应用和落地层面，全面转向pip安装依赖库；有效避免了conda下载速度大多较慢、无法有效利用缓存、经常需要从头构建、容器+conda双虚拟环境的套娃模式等弊端。调整后生成的容器大小普遍降低30%以上，打包速度降低至原有的50~95%不等，训练和部署的体验大大提升;

3. 数据集图片类型添加多边形标注场景的支持，包括多边形标注，数据格式调整，多边形标注的数据展示，多边形标注的校验，多边形标注的数据导出等；

4. 数据集图片类型的现已支持上传已标注的图片，支持 xml、txt、json等多种标注文件格式，支持标注/未标注上传图片在线预览等功能；

5. 设计器建模（ML Designer）支持MR任务，调整训练、预测节点，支持多个算法模型算子，统一汇总预测结果到一处，方便进行多模型的自动寻优；

6. 设计器建模（ML Designer）支持定时任务；

7. 添加对模型库文件内容直接修改的支持。方便快速调整错误代码，加快校验过程，大大提升体验；

8. 简化发布时的参数配置逻辑，添加最佳性能的一键配置选项；

9. 添加实验列表导出csv的功能；

10. 特征库新增支持了更多的图片格式可供下载使用：添加YOLO V3 KERAS、YOLO V3 DARKNET、YOLO V5数据格式的导出；

11. SDK新增支持了更多的图片格式可供下载使用：添加YOLO V3 KERAS、YOLO V3 DARKNET、YOLO V5数据格式的导出；

[功能增强 💪]

1. 部分重构服务API网关的设计，大幅提升了发布服务的并发性能，单进程性能指标可提升2-10倍，通过系统提供的最佳性能参数，普遍可达700QPS；

2. 优化校验时的逻辑，可以选择已构建镜像，可以选择重新构建镜像，整体使用更加合理；优化自定义环境变量和运行参数的使用；

3. 支持在查看校验发布日志时，展示当前部署所在的主机；

Release 2.16.4 @2022.05.23

🎊 重磅发布V2.16版本，平台全新上线可视化的设计器建模组件！支持用户低门槛，拖拽式的快速完成建模工作，快来体验吧！🎊

[bug修复 🐛]

1. 修复了部分场景下，git分支拉取项目失败的问题；

2. 修复了部分场景下，活动日志记录不全的问题；

3. 修复了SDK不支持下载小波数据的原始数据的问题；

4. 修复了部分场景下实验状态更新不及时的问题；

[新特性 ✨]

1. 平台全新上线可视化的设计器建模，调整原有模型板块为代码建模（Code Lab）和设计器建模（ML Designer）两种模型类型和入口;

2. 设计器建模（ML Designer） 支持模型画布的缩略图展示，支持画布数据的导入导出；

3. 设计器建模（ML Designer） 提供50+AI常用的算子，包括数据读取、数据预处理、数据可视化、统计分析、特征工程、机器学习、模型评估等多个模块，支持拖拽拉的方式组合流程，用于数据、建模等场景；

4. 设计器建模（ML Designer） 提供强大的设计器引擎作为支撑，支持各类算子和算子链流程的运行、暂停、停止等流程操作，并记录节点、流程等的日志、元信息等内容；

5. 设计器建模（ML Designer） 支持对工作流画布进行版本管理，包括创建新版本、还原版本、查看关联实验等功能；

6. 设计器建模（ML Designer） 支持创建实验，对工作流画布的每次运行进行持久化管理，支持对历史实验所需所有资产数据、画布状态、节点数据等的存储、展示；

7. 设计器建模（ML Designer）支持对训练生成的模型注册到模型库中。后续流程与原有的校验发布体验统一；

8. 设计器建模（ML Designer）支持对实验任务，自定义选择运行资源进行调度，提供容器化的环境用于工作流的运行；

9. 设计器建模（ML Designer）提供统一的算子管理模块，支持算法分类、算子上传、更新，版本管理等操作；

10. 设计器建模（ML Designer）自定义算子 DSL语法，支持编写自定义算子，集成到算子库中用于后续使用（DSL仍在完善中，暂不开放规则）；

[功能增强 💪]

1. SDK支持内网加速，支持配置环境变量自定义修改URL地址到内网IP；

2. SDK支持下载更多的数据格式类型；

3. 调整优化多机发布的逻辑，仅有经过验证，生成镜像的模型库版本，才可选择多个发布终端进行发布；

Release 2.15.3 @2022.03.03

🎊 很高兴发布了V2.15的版本！🎊

[bug修复 🐛]

1. 修复了部分场景下，git拉取项目失败的问题；

2. 修复了部分场景下，特征库打包下载小波数据元数据信息的不完整的问题；

3. 修复了发布服务接口， 添加授权后异常调用的问题；

4. 修复了发布服务接口，开关授权时存在缓存不及时的问题；

5. 修复API详情显示版本错误的问题；

[新特性 ✨]

1. 支持选择git代码分支进行模式的训练，更好的满足生产、预发布、研发等阶段不同代码管理的需求;

[功能增强 💪]

1. 改进在线校验模型时，返回结果展示格式不易阅读的情况，当服务返回错误时，区域变红；

2. 改进校验/发布启动服务日志功能，现在将会显示更多报错信息，方便快速定位解决问题；

3. 改进了数据集、特征库，大文件数据展示时卡顿的问题；

Release 2.15.2

[bug修复 🐛]

1. 修复校验模型部分场景下状态未更新的问题；

2. 修复校验和发布的活动日志数据展示问题；

3. 平台训练默认添加当前项目和模型信息，无需再在代码中进行配置；

4. 修复主机异常掉线的问题；

5. 修复第三方生成的镜像文件大小不对的问题；

6. 修复上传文件本身包含shell关键字无法保存的情况；

7. 添加任务和集成的活动记录；

8. 修改部分场景下系统镜像同步时缺失镜像的问题；

9. 创建实验会更新最新的基础镜像，防止基础镜像更新后没有生效的问题；

10. 修复集成重名校验异常的问题；

11. 修复了文件类型数据详情页，单项数据太长导致的页面可读性差的问题；

[新特性 ✨]

1. 支持外部数据源下载原始数据，如网易猛犸 🆕;

2. SDK支持外部数据源下载原始数据;

3. 添加了许可证支持优化使用体验;

4. 现在支持在校验、发布时保存当前参数;

[功能增强 💪]

1. 重新设计日志模块，优化训练、校验、发布日志的展示和体验；

2. 对于运行日志进行了格式化，优化展示效果；

3. 支持在训练和发布时，动态获取宿主机pypi和conda加速信息；

4. 创建实验时展示基础镜像，并添加基础镜像获取的相关连接说明；

5. 优化数据概览界面的生成过程；

6. 优化了图片类型预览时，图片信息的展示效果；

Release 2.14.1

为支持更为丰富的使用场景和管理需求，我们对平台进行了全面的升级，详情请见更新日志。

[新特性 ✨]

1. 平台UI全面改版！去除了原有的业务数据组织模式，以项目为切面来组织来统一开展您的业务功能，工作更加专注；
2. 平台全局实现了新版本的面包屑导航栏，大大提升了相关联的多模块切换速度，进退有度，更加从容；
3. 平台提供了项目和模型的卡片式的数据展示，可以提供更多有用有效的信息；
4. 平台提供了全系统的活动日志记录，对所有平台业务操作均进行了实时记录，满足适合团队合作和项目管理的要求；
5. 平台活动日志记录支持了业务模块跳转，业务一步触达；
6. 添加了个人中心的模块，可以查看到对应用户的活动记录及项目的情况；
7. 项目、模型支持设置公开和私有，公开后的项目/模型，无需加入成为成员，即可访问，提升了分享的属性；
8. 项目、模型支持添加成员，项目的成员拥有旗下所有模型的对应权限，支持配置成员的有效期；
9. 平台的角色内置，不同角色对应又不同的资源权限；每个项目中都可承担不同的角色，互不冲突；
10. 平台全系统支持了最近的业务操作，方便找到常用的活跃的项目/模型，从而实现快速的继续工作；
11. 平台为全系统提供了系统、项目两种资源类型。项目资源仅项目独有，系统资源为全系统共用；
12. 平台添加了大量业务统计信息，方便管理和了解项目开展情况；
13. 平台添加了实验看板，所有成员均可以方便的共享查看可视化的结果；
14. 平台调整了系统管理的入口，与标准业务接口进行了分离，更加安全；
15. 添加系统许可证配置，支持不同模块的单独配置和授权；

[功能增强 💪]

1. 平台SDK更新到当前业务数据接口版本；
2. 平台SDK支持内网加速；
3. 平台SDK更新到了新版的业务接口；
4. 优化了平台SDK下载上传的进度条展示；
5. 优化页面上传组件，支持大文件和多文件的场景，优化了进度显示；

Release 2.13.5

[bug修复 🐛]

1. 修复ssh连接超时导致的异常；

2. 修复用户列表的最后登录时间显示；

3. 修复发布多个主机缺失上下文的问题；修复部分情况下启动失败的问题；

4. 修复things使用用户账号，无法正确获取数据的问题，修复当前账号下设备为空时的异常处理；

5. 修复部分场景下上传文件路径错误问题；

6. 修复上传大文件路径解析错误的问题；

7. 修复图片标注部分场景下显示异常的问题；

8. 修改面包屑模块遇到多级路由报错的问题；

[新特性 ✨]

1. 应用更名为项目，项目、模型添加公开/私有标识；

2. 添加项目，默认生成App Key,用于发布接口的安全调用；

3. 添加系统许可证配置，支持不同模块的单独配置和授权；

[功能增强 💪]

1. 发布和校验模型添加推送镜像日志；

2. 前后端敏感数据加密的功能增强；

3. 图标数据分模块加载，提升访问速度；

Release 2.12.3

[bug修复 🐛]

1. 修复部分情况下scp拷贝文件失效的问题；

2. 修复部分代码日志没有输出的问题；

3. 修复校验模型未返回原始错误信息的问题；

4. 修复市场服务数据指标更新错误的问题；

5. sdk修复创建模型模型版本,返回数据错误的问题；

6. 修复部分情况下使用机器人账号登陆harbor失败的问题；

[新特性 ✨]

1. 系统升级为JWT令牌登陆，提升安全性和用户体验；

2. 在线模型训练支持自定义初始镜像(可以来自docker hub)，支持PIP形式，读取requirement.txt文件自动安装依赖，并提供install log；

3. 图像数据导出除原有Pascal VOC，新增支持COCO格式;

4. 线上训练操作环境变量，使用sdk完成模型训练过程中的模型和参数保存，不再直接连接数据库和oss对象存储，提升安全性，并支持外网训练；

5. 简化sdk的使用：sdkinit()将再接口调用时自动进行，不再强制要求；

6. 实验数据支持隐藏、归档操作，方便大量实验记录存在时，快速找到需要的实验数据信息；

[功能增强 💪]

1. worker-node git授权回收不再能自主拉取代码，统一由主节点scp分发code，提升安全性和稳定性；

2. 系统集成支持用户名为邮箱的形式；

3. 主机添加状态并自动更新；

4. 主机请求数据统一加密，增强安全性；

5. 统一对系统模型字段内容进行安全合规校验，提升系统安全性；

Release 2.11.1

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 支持创建实验用于线下Tracking，而不进行线上训练，支持按创建时间、最后运行时间排序

2. 重构实验中运行列表的展示、查询、过滤、排序等功能，现在可以更方便的查看训练参数、指标等信息，支持任意项排序和筛选

3. 支持删除训练项、终止训练项

[功能增强 💪]

1. 优化训练时Git下载代码的过程，大大提升个人Git信息的安全性和下载代码的速度

2. 优化训练可视化展示的相关功能，提升折线图、柱状图的易上手度，加快图表展示速度

Release 2.10.3

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 全面支持Python SDK waveletai 调用库。提供包括应用、数据集、模型、实验、训练跟踪记录、模型注册等一系列功能:

   • 进一步降低算法同学的学习成本，仅需下载使用SDK即可使用平台功能
   • 对于模型建模阶段，提供了SDK，实现了线下训练，线上Tracking，帮助算法人员记录建模过程，强化项目管控能力

2. 优化实验模块状态的展示，包含其中所有运行的状态均可在列表页查看，提供运行数据的统计信息，查看数据更直观

3. SDK支持统一数据集/特征库ID下载数据，特征库数据为zip，支持自动解压

[功能增强 💪]

1. 数据集文件预览速度大大提升

2. 添加应用到模型的快速跳转

3. 支持所有模块通过ID查询

4. feature 时序数据异步打包，完成后直接下载

5. 添加集成模块、任务列表模块的访问控制

6. 删除发布时，将会自动查询相关发布服务并添加提示，防止操作失误

Release 2.9.0

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 上线系统集成模块，支持与外部系统进行交互，上线与小波物联(WThings)系统的互联互通。

2. 新上线时序数据标注功能,完成时序数据标注的任务:

   • 自动获取WThings账号下设备列表、遥测属性列表
   • 基于选择设备和属性，按指定时间段、聚合方式拉取设备数据，生产曲线
   • 设定自定义标签，选择标签在曲线上选择时间区域完成标注
   • 支持页面/SDK导出标注数据，用于后续offline-training建模下一阶段的任务

[功能增强 💪]

1. 数据集文件类型支持多级目录上传

Release 2.8.0

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 新增上线Python SDK:waveletai,提供数据集上传下载、模型库注册等功能，用于更好的支持offline-training模型建模任务

2. 数据集文件类型支持多文件上传

3. 添加airflow服务，简化pythonDAG完成自定义任务功能，适用于实时数据定时完成预处理的场景

4. 市场添加查看所有公开模型界面，支持类别查询、最新/最热查询

[功能增强 💪]

1. 优化图像标注数据的实时展示，可以在预览界面直接看到标注好的图片，点击图片可以查看标注信息和图片信息等

Release 2.7.1

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 市场添加支持多步骤在线调用模式，对多步骤连续性的业务也可以完成在线演示

2. 发布模型除原有的restfulHTTP调用外，新增MQ消息队列调用功能！试用于算法模型执行时间较长，或存在大量并发请求的场景：

   • 平台将提供内置的MQ服务，模型库类型为自定义模型在发布时，可以选择MQ队列发布
   • 发布时提供入口队列供订阅用于接收请求和参数，提供结果队列供订阅获取模型输出结果

[功能增强 💪]

1. 模型库支持后续增补文件列表，在文件树上可以上传/删除/更新您的文件

2. 系统提供了多种基础镜像供选择，用于加快系统训练/发布速度: amd64架构下的cpu、cv、gpu、gpu-dl、tensorflow、pytorch、scikitlearn armV8架构下,适用于jetson平台的pytorch、onnx的系统镜像

3. 提升发布服务的系统稳定性，自动资源回收

4. 服务接口加入缓存机制，大大提升平台

Release 2.6.1

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 自动判别部署主机是否在同一内网，内网服务支持加速，打打提升响应速度

2. 添加市场入驻企业信息管理

3. 重新设计市场服务上线界面，交互式完成发布模型的公开服务

4. 市场添加支持格式化数据、音频识别等多种形式的在线调用模式

5. 市场添加点击、点赞、调用等统计信息，并用于模型排序

[功能增强 💪]

1. 添加系统镜像，支持边缘设备 jetson平台上的模型的部署

2. 提升主机、服务状态监测机制，提升稳定性

3. 优化展示镜像推送进度

4. 对基础镜像进行优化，对系统配置进行优化，大大提升打包镜像的速度

Release 2.5.3

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 平台支持已经训练好的模型，直接注册模型库，支持镜像模型(docker image)、自定义模型(Python)

2. 平台发布全部由conda虚拟环境迁移至docker容器环境，全面容器化，确保发布模型可以快速迁移和启动

3. 添加镜像管理界面，支持上传第三方镜像，支持镜像下载

4. 支持批量发布服务：允许同时部署服务到多台主机

[功能增强 💪]

1. 优化公开服务页面展示内容

2. 添加发布模型详情页面

Release 2.4.4

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 提供平台基础使用的示例项目

2. 平台online-training 支持docker容器环境进行训练

3. 添加harbor作为平台镜像仓库存储系统镜像，打通和同步harbor镜像数据

4. 市场添加支持原始请求 、图片识别、视频识别的在线调用服务模式

[功能增强 💪]

1. 支持发布模型添加自定义参数，可以通过自定义参数提高服务请求的并发能力

2. 优化训练界面展示

Release 2.3.1

[bug修复 🐛]

1. 若干系统bug修复，提升稳定性

[新特性 ✨]

1. 升级系统文件存储架构，从frp到oss对象存储，大大提升系统文件存储性能

[功能增强 💪]

1. 优化文件类型的数据集记录的预览速度

2. 升级ml服务引擎版本

Release 2.2.0

[新特性 ✨]

1. 添加个人中心，支持 SSH-Keys 和 Access Token两个模式的标准Git认证。

2. 代码仓库升级，支持http/ssh链接

3. 提供系统基础镜像用于模型训练

[功能增强 💪]

1. 升级AI引擎版本，提升训练和记录参数的性能

2. 标注支持自动保存草稿

Release 2.1.0

[bug修复 🐛]

1. 标注后再添加标签的bug

2. 用户管理的bug

3. 标注全屏展示的bug

[新特性 ✨]

1. 添加产品使用手册

2. 模型库文件支持下载

[功能增强 💪]

1. 优化系统登录流程

2. 优化指标可视化，支持指标的图表展示

3. 优化AI市场视频服务的速度

Release 2.0.0

[新特性 ✨]

1. 前后端结构完整分离，前端整体技术框架迁移，所有模块展示效果升级

2. 新增AI服务能力市场，发布服务可以公开能力到市场中

3. 添加特征库的业务概念，可以聚合多个数据集统一作为一个特征库使用

4. 支持自定义拆分训练集/验证集，支持标注图片数据生成PASCAL_VOC格式下载

[功能增强 💪]

1. 添加用户组，支持业务层级的权限控制

Release 1.4.0

[bug修复 🐛]

1. 数据集图像标注bug修复

[新特性 ✨]

1. 平台支持图片类型数据的在线模型校验

2. 数据集多类型支持（图片、文件、视频帧）

3. 支持注册的模型丢弃

4. 支持视频流抓图任务获取视频帧图像数据

[功能增强 💪]

1. 优化大量日志前端展示性能

Release 1.3.0

[新特性 ✨]

1. 数据集添加图片数据标注功能，支持矩形、原型、多边形数据标注

2. 支持图片缩略图展示

Release 1.2.0

[bug修复 🐛]

1. 修复训练列表日志加载的问题

2. ssh公钥检查超时的问题

3. 修复面包屑导航在复杂场景下的展示问题

[新特性 ✨]

1. 训练运行界面支持动态展示参数和指标，支持单项指标排序

2. 支持已经发布的模型直接版本升级

[功能增强 💪]

1. git项目关联添加预先校验

2. 主机管理查看服务器信息内容优化

3. 主机IP校验功能增强

4. 界面优化

Release 1.1.0

[bug修复 🐛]

1. 修复模块排序问题

2. 修复主机信息配置的bug

[新特性 ✨]

1. 添加模型库的业务概念，支持模型调优后，保存最优模型到模型库

2. 在线发布模型，提供restful服务

[功能增强 💪]

1. 模型调优支持线上展示，每次训练的不同运行结果支持线上比对

Release 1.0.0

小波AI平台初版上线

[新特性 ✨]

1. 提供数据集的资源管理

2. 支持git项目托管、主机SSH配置等资源管理模块

3. 创建应用、模型、实验的业务管理模块

4. 支持模型基于conda环境的online-training、online-tracking