随着互联网技术和数字化生存带来的众多商业模式创新,企业不断加速数字化转型,挖掘数据价值、指导业务决策,而高效流畅的协同能力却成为了企业组织管理和数据驱动的瓶颈。
在企业数字化团队内部,由于所需支持的业务条线众多,且发展目标各不相同,因而成员专注于各自独立板块开展工作的情况十分常见。然而,伴随着企业数字化转型的需求更密集也更复杂,很多基础性的工作可以共建,对于数据的要求也不再是相对独立的、单一的数据展示和资源挖掘,需要更多综合性、交叉性的开发利用,越来越多的数字化团队开始寻求突破,以更协同的形态提高整体效率。在数据研发团队内部建立起横向协同机制,能够大幅提升团队工作效能已成为了共识。
同业务部门相比,数据团队的工作涉及到数据管理、建模分析环境、代码过程文件等众多要素,复杂度更高,若缺乏明确的流转机制,各要素的可获得性和可复现性将成为协同工作的阻碍。本文将通过某企业真实案例及对应数据科学协同平台 ModelWhale 所提供的解决方案作深入解析。
“信息孤岛”的困扰
金融公司 A 以量化投资为主营业务。量化投资是指利用计算机技术进行交易的证券投资方法,通过对庞大的历史数据建模分析,海选出能带来超额收益的多种“大概率”事件,持续计算生成定量化的投资信号,自动交易投资。制定量化交易策略的团队即典型的数字化团队。
量化策略具有一定时效性,一旦市场上其他投资者也采取相同的策略或市场环境发生了变化,就可能会导致所带来的超额收益越来越小,因此团队需要持续优化量化投资策略,提高交易速度,使收益最大化。然而目前团队内部存在的一系列“协同问题”给他们造成了困扰。
由于前期各个量化研究员都是独立开展工作,而后续策略的优化,如根据市场信息补充新的数据或使用新的特征等,却需要以之前的工作为基础,这些既有生产资料不仅仅来源于自身,也有可能来源于团队内的其他人。前期形成的“信息孤岛”导致团队成员后期在获取他人的数据和模型时频繁出现数据版本错误或代码版本错误等情况。同时,所使用的编程语言、版本模块不同形成的研究环境差异,也给复现造成了困难。数据、环境、代码三要素难以同步获得与复现,严重拖缓了投资决策,让 A 公司错过了很多稍纵即逝的市场机会。
ModelWhale 的解决方案
作为数据科学云平台,ModelWhale 由点及面,帮助量化团队解决了制定策略时全要素的内部协同问题。
首先,每个研究员都可以通过平台自由调取存放在数据库、对象存储以及 NAS 空间的各类数据,或者根据分析需要上传本地的数据集开展策略研究。团队的数据管理员可将各个成员的数据需求与其所在部门或策略小组相结合,将数据定向分发,并灵活设置每个人使用、下载的权限。如果某个研究员在其后续的策略优化过程中为数据集增加了新的特性,可以生成新的数据版本,则团队内部其他成员也能够根据分析需要选择特定的数据版本建模分析。在后期进行策略的持续迭代时,数据版本的选定即可快速统一,减少了成员间的沟通成本,也避免产生数据偏差。
其次,量化研究员除了可以使用平台预置的分析环境外,还可以根据需要,利用表单、Bash 指令等方式构建自定义分析环境。所构建的自定义镜像环境皆可一键分享给团队内的其他成员使用,管理员也可以配置统一的镜像在团队内部共享。ModelWhale 会自动记录每一次代码运行时的镜像环境,当成员需要合作训练模型或在他人的策略之上进行优化时,所使用的分析环境将自动匹配,实现快速复现。
此外,量化研究员在分析建模时,每取得一部分阶段性成果即可将其保存为一个版本,并备注下版本的关键信息,则后续即使再与他人合作编辑,也依然能找回自己已有的历史版本。通过版本间对比,研究者可以快速查阅他人对于代码的“增”、“删”、“改”的情况,或是接受修改,或是文件级退回或 Cell 级回溯实现快速还原,全部修订完成后也可生成新的版本,为后续的工作打下基础。
版本对比页面示例
无论是数据、分析环境还是代码文件,在 ModelWhale 上都可以通过主动分发和申请审核来实现权限控制。生产要素一体化管理,快速获得与复现,让数字化团队分析建模的内部协同过程更便捷,也更自在。
数字技术的确在重构着这个世界,互联互通的程度更高、更快、也更复杂,建立完善的协同机制是深度挖掘数据价值的核心利器,也是企业应对变化的生存选择。基于 ModelWhale ,企业可实现以生产要素和数字资产为核心的互联互通、高效复用,形成资源聚集的规模效应。
ModelWhale 提供即开即用的云端分析环境,更将数字资产管理、Notebook 交互式 & Canvas 拖拽式编程、建模分析、模型服务、任务及权限管理等功能深度整合,除分析建模过程全要素的可获得与可复现外,可一体化解决企业大数据分析的多种协同问题。过去5年来,来自气象、医药、制造、金融、新零售等多个领域的先进企业都与 ModelWhale 进行深入合作。ModelWhale 综合各类业务场景,持续升级产品功能,完善全方位服务体系,欢迎更多组织共同交流沟通。
ModelWhale 数据科学协同平台将帮助企业突破瓶颈,为数字化转型提供高效协同最佳实践。
关注 ModelWhale 官方微信公众号、视频号,了解其他企业数字化转型协同场景解析,如
数据分析建模成果结构化整合沉淀
业务部门协同探索模型开发优化
模型应用全生命周期管理
数字化研究成果对外发布应用
引进外部专家协同工作
还有更多企业数据智能化转型、升级解决方案。
ModelWhale 同时支持 SaaS 云端使用及本地私有化部署,可满足不同组织需求,欢迎进入入 ModelWhale.com 免费试用。
免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。
文章投诉热线:156 0057 2229 投诉邮箱:29132 36@qq.com