IDP:云原生的“Jupyter”,让算法团队更高产 | Q推荐

2022 年 1 月 14 日 InfoQ

2022 年 1 月 14 日,国产自研的云原生 AI 开发生产平台——IDP(Intelligent Development Platform) 试用版正式发布。IDP 由白海科技研发,目标在于为数据科学家、算法工程师等提供易用的 AI 开发与生产工具,填补该领域国产软件的空白,打造更具极致体验的“Jupyter”。
1 AI 时代已至,但国产易用软件尚为空白

在数据、算法和算力“三驾马车”的协同推进下,AI 的应用飞速发展,已逐渐渗透进国民经济的各行各业。伴随 AI 大生产而来的,是数据的庞杂繁芜、模型的日益复杂和计算量的指数级增长,算法开发团队亟需数据治理、模型开发、高性能计算等 AI 基础软件,以帮助其低成本、低门槛地进行 AI 开发与生产。

然而,目前国内市场对数据科学家和算法工程师在 AI 开发生产中的痛点关注不足,缺乏易用的、一体化的国产 AI 开发与生产工具。现存市场解决方案普遍为国外产品,这些产品或存在跨境使用速度较慢、体验受损的问题,或价格高昂、加重企业利用 AI 技术进行智能化转型的负担。

因此,白海科技创始团队决定打造 AI 智能开发平台 IDP,专注赋能数据科学家、算法工程师以及欲转型为数据科学家的大数据工程师,为其提供易用的 AI 开发与生产工具,让其更加专注于模型开发和数据分析本身,提升工作效能,同时帮助企业提升效率,降低 AI 开发与应用成本。

2 云原生、专业轻量和按需使用

企业数据上云已成为不可逆转的趋势,从渗透率的角度讲,云服务已难以被称为一种“新兴技术”。根据红杉中国《2021 企业数字化年度指南》中的调研数据,已有超过 70% 的企业使用了云服务,47% 的企业正在大规模推广并应用。同时,随着企业业务的复杂化和云服务玩家的多元化,多云部署也成为新的趋势。

随着云服务的蓬勃发展,云原生应用也凭借快速部署、灵活扩展、降低成本等优势,逐渐受到广大企业的关注和喜爱。作为新一代 AI 开发生产平台,IDP 致力于打造云原生的“Jupyter”,将 Jupyter 的交互式开发体验和云原生的卓越性能进行完美结合,为广大开发者和企业客户提供更加易用、灵活、高效、可迁移的 AI 开发生产工具。

IDP 并非工具集成式的、厚重且大而全的机器学习平台,而是以 IDE 为唯一入口,专业轻量、按需使用的工具平台。

IDP 以集成开发环境 IDP Studio 为唯一用户交互界面,通过内置可灵活安装与卸载的机器学习库 / 包、算法开发涉及的各功能组件等,让使用者可在 IDP Studio 内一站式、稳定、高效地完成包括数据准备、数据探索、模型构建、模型训练、模型评估模型部署与发布的全流程工作。IDP Studio 同时支持直接使用 SQL 进行数据处理,并支持团队协作编程和实时共享。

此外,值得一提的是,为满足专业算法开发团队对性能的要求,IDP 以高性能分布式计算引擎 IDP Engine 为核心支撑,帮助企业实现智能分布式执行,提升算法开发效率,降低资源消耗成本。

3 易用、性能和协同

IDP 主要具有三大核心特征:

易用:本地 IDE 级使用体验

IDP 可提供与本地 IDE 同样优质的使用体验,同时满足交互式和非交互式编程的需求;且编程环境提供代码智能补全、代码自动修复等编码辅助功能,提升开发效率。

数据科学家可在同一开发环境中稳定、便捷地实现 SQL 处理和 ML 全流程工作,无需切换工具和平台;同时,可依托 IDP Studio 内置的主流数据科学库包和多种机器学习框架,快速上手算法开发。

性能:高效率、低成本

IDP 通过可视化工作流编排与管理功能,帮助数据科学家和算法开发团队对数据预处理、数据探索、机器学习、深度学习、DB Engine 等工作进行统一调度,提升开发效率。

IDP 可帮助企业进行精细化的算力资源管理,支持抢占式调度和计算资源自动扩容,具备进程级别的断点续跑和自动休眠功能,帮助企业提升资源利用效率、减少资源浪费、缩短训练等待时间。

另外,IDP 通过数据并行、代码分片、代码编译优化等方法对单机版代码进行优化,实现智能分布式执行。

协同:团队协作、多云兼容

IDP 支持协作编程,算法团队可进行模型和项目的实时共享、协同编辑、评论交互等,以最大化团队生产力。

作为云原生的 AI 开发生产平台, IDP 天然支持多云部署,为客户提供多样便捷的选择。

4 未来重点计划:核心开源

下一步,白海科技计划将 IDP 中 IDP Studio 的核心功能开源。同时,白海将进一步完善产品功能,一方面持续优化 IPD Studio,以便更高效地满足企业对于团队协作和 AI 生产的基本需求;另一方面,夯实分布式计算引擎 IDP Engine, 助力企业提升算法开发与训练的质量和效率。

白海科技创始人兼首席执行官卢亿雷表示:“提升专业数据科学家的生产力、促进企业的 AI 创新是 IDP 的初心,更是引领 IDP 未来发展的灯塔。我们希望通过开源 IDP Studio,弥补国产易用 IDE 的市场空白,让算法开发团队有更多专业、简单、易上手的工具选择;希望通过开放的生态,与广大行业伙伴、开发者和客户,携手推进 AI 的开发、应用和落地,加速企业智能化转型与创新。”

荣誉体验官,IDP 等你来

IDP 试用版面向极客数据科学家和迫切希望提升算法团队生产力的企业,开放少量优先试用名额,您将有机会抢先体验 IDP 核心功能,探秘国产 AI 开发生产工具的惊喜。

与此同时,希望您积极反馈和分享实际场景下的试用体验,推动 IDP 的成长,共创中国 AI 基础软件工具的未来!

请点击链接申请试用:https://www.baihai.co/invitation

或扫描下方二维码联系您的专属顾问


登录查看更多
0

相关内容

Jupyter Notebook是以网页的形式打开,可以在网页页面中直接编写代码和运行代码,代码的运行结果也会直接在代码块下显示的程序。如在编程过程中需要编写说明文档,可在同一个页面中直接编写,便于作及时的说明和解释。
阿里云发布《中国云原生数据湖应用洞察白皮书》
专知会员服务
42+阅读 · 2022年4月15日
2021年中国云原生AI开发平台白皮书
专知会员服务
54+阅读 · 2021年12月4日
2021年中国AI开发平台市场报告
专知会员服务
72+阅读 · 2021年10月26日
人工智能AI中台白皮书(2021年),45页pdf
专知会员服务
284+阅读 · 2021年9月18日
2021年中国人工智能在零售领域应用行业短报告,30页pdf
专知会员服务
68+阅读 · 2021年4月22日
【腾讯IDC】数实共生:未来经济白皮书2021,81页pdf
专知会员服务
74+阅读 · 2021年1月24日
中间件+云原生= ?| DIVE
InfoQ
0+阅读 · 2022年3月10日
开发人员新常态,和云原生相爱相杀
CSDN
0+阅读 · 2022年1月11日
2021年中国云原生AI开发平台白皮书
专知
0+阅读 · 2021年12月4日
热招 | Top团队+Hot职位,快来斩获最佳Offer
微软招聘
0+阅读 · 2021年7月16日
各厂推荐算法!
程序猿
17+阅读 · 2018年1月13日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
Transparent Shape from Single Polarization Images
Arxiv
0+阅读 · 2022年4月19日
Meta-Learning to Cluster
Arxiv
17+阅读 · 2019年10月30日
VIP会员
相关VIP内容
阿里云发布《中国云原生数据湖应用洞察白皮书》
专知会员服务
42+阅读 · 2022年4月15日
2021年中国云原生AI开发平台白皮书
专知会员服务
54+阅读 · 2021年12月4日
2021年中国AI开发平台市场报告
专知会员服务
72+阅读 · 2021年10月26日
人工智能AI中台白皮书(2021年),45页pdf
专知会员服务
284+阅读 · 2021年9月18日
2021年中国人工智能在零售领域应用行业短报告,30页pdf
专知会员服务
68+阅读 · 2021年4月22日
【腾讯IDC】数实共生:未来经济白皮书2021,81页pdf
专知会员服务
74+阅读 · 2021年1月24日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员