当今的数据工程正经历着两大主要转变——职能转变和形式转变。第一种转变显而易见：人工智能正在从根本上重新定义数据工程师在各个层面的职能。它对数据的无限需求给数据工程团队带来了过度的要求——这些要求对于成功至关重要，然而却极其难以维持。第二种转变是形式上的转变，即数据工程师必须如何满足这些新增长的需求。我们已经看到数据工程师从主要从事重复性、手动劳动转变为更具战略性的执行，借鉴软件开发的最佳实践来提升他们的工作。他们不再仅仅是数据管道工和管道构建者；他们是任何数据驱动型组织的运营架构师。而且，此时已无法回头。