12月16日至18日,第11届全球软件案例研究峰会(以下简称TOP 100Summit)在线召开。来自FreeWheel、Unity、Google等100位一线研发团队负责人及业界专家共同参与了此次峰会。会上,TOP 100组委会正式发布了2022年度全球软件案例研究峰会榜单(壹佰案例),作业帮成功入围。作业帮数据仓库技术负责人严晓炜参会并分享了“作业帮数据治理体系的思考与实践”。
今年是作业帮第二次入选TOP 100榜单。作业帮成立于2015年,一直致力于用科技手段助力教育普惠,运用人工智能、大数据等前沿技术,为学生、老师、家长提供更高效的学习、教育解决方案,智能硬件产品等。
作业帮此次入选榜单专题为“数据治理”。随着业务的高速发展以及数据分析体系的日益完善,数据成为业务日常运作中重要的指南针和风向标;另一方面,数据和指标的日益膨胀,导致数据质量、数据易用性、存储成本等方面的问题层出不穷。如何能够最大限度发挥数据的价值,更加合理的使用计算存储资源,成为共同面临的新挑战。
作为“数据治理”专题中的入选案例,作业帮数据仓库技术负责人严晓炜在会上作分享。在分享中,严晓炜基于作业帮大数据中台团队在业务数仓建设过程中遇到的数据易用性、成本、安全性等问题,从数据生产环节的指标和数据模型的构建、元数据管理和血缘分析、数据质量和数据安全、以及配套平台的建设等方面,详细阐述作业帮整套数据治理解决方案和落地实施的过程。
严晓炜说,结合作业帮业务的战略转型,从野蛮生长到精细化治理,数据治理能够成功的4个基本关键点:首先,数据建设标准和规范落地是数据治理的基础,制定一套通用完善的数据建模标准和开发规范并推广业务数仓研发使用是后续数据治理的前提条件;其次,数据的准确性、稳定性和时效性是数据治理的核心,通过建设数据质量管理平台等数据治理工具,为业务提供稳定可信赖的数据服务;第三,数据ROI评估是数据治理的主要抓手,通过打通数据生产全链路,客观评估数据价值,自动识别冗余数据和无效任务,为后续的计算、存储资源治理提供依据,从而抑制数据成本的无序增长;最后,建立数据开放共享机制是最大化数据价值的重要手段,在保障数据安全可用的前提下,降低数据获取门槛、增强数据易用性,从而充分发挥数据的价值。
“数据的核心价值是支撑业务决策,技术最终是为业务服务的,所以数据治理是以保障现有业务数据应用需求为首要前提的。”结合作业帮的实践,严晓炜分享了数据治理的经验启示。他说,标准、规范的制定和落地对于数据治理至关重要,能够降低数据治理整套方案实施的难度与风险。此外,数据治理的理念需要与相应的数据治理系统平台相结合,光靠理论和规范约束无法真正的达到预期目标,同时系统平台的落地和使用也会反过来进一步完善数据治理理论体系。“而数据安全是一切的底线”,严晓炜表示,一切不以数据安全为基础的数据治理都是空谈。
全球软件案例研究峰会“壹佰案例”是科技界一年一度的案例研究榜单,旨在发现有案例教学意义的项目或方法论,如同商业领域的哈佛案例,科技界的壹佰案例榜单每年精选100件案例题材。壹佰案例榜单崇尚专业的力量和案例落地实践,向领先公司和早期实践者征集年度里程碑或杰出成果背后的案例故事。过往十年,壹佰案例榜单涵盖了Facebook、Google、Airbnb、Apple、LinkedIn、Amazon、Microsoft、Twitter、淘宝、京东、华为等国内外知名软件、互联网企业。
推广
