Shopify如何解决数据发现的挑战


Shopify 撰写了有关 Artifact、其数据发现和数据管理工具的文章,以提高生产力、提供更大的数据可访问性并允许更高级别的数据治理。该博客讲述了构建数据发现服务的挑战,从获取元数据到转换、建模和应用以使其更易于使用。

数据使用的本质是问题驱动的,这意味着数据资产(表格、报告、仪表板等)是从底层数据资产中聚合而成的,以帮助制定特定业务问题的决策、提供机器学习算法或作为输入另一个数据资产。此过程重复多次,有时针对相同的问题,并导致大量数据资产用于各种用途。数据发现和管理是对这些数据资产和所有适用的元数据进行分类的实践,它可以为数据专业人员节省时间,增加数据回收,并为数据消费者提供对组织数据资产的更多访问权限。
为了理解 Shopify 的所有这些数据资产,我们构建了一个名为 Artifact 的数据发现和管理工具。它旨在提高生产力,提供更大的数据可访问性,并允许更高级别的数据治理。

详细点击标题