数据开发的痛处

快手是一家数据驱动的公司，数据扮演了非常重要的角色，而数据的生产加工主要依靠数据开发工程师，其工作内容会涉及多个方面。

数据开发工程师则首先根据业务需求开发好高质量的数据，通常是结构化数据(数据表);其次，开发稳定可靠的数据服务，并通过 API 方式交付给业务方使用。

数据开发工程师有两个痛点，这其中包括：

• 开发数据服务门槛高
• 重复开发数据服务

开发数据服务门槛高

数据开发工程师除了开发完数据表外，通常还需要思考如下问题：

①数据如何交付：业务通常期望使用数据接口方式来使用数据，而非数据表，这会更加灵活、解耦、高效。数据开发工程师因此需要建立对应的数据服务。

②服务如何开发：数据服务有多种形式，通常要求开发工程师有微服务知识、服务发现注册、高并发等。

③权限、可用性问题：开发完数据服务后，需要考虑权限问题，确保数据资源能被安全的访问;此外还需要考虑可用性问题，要以多种手段保障数据访问的稳定性。

④运维问题：数据服务本身涉及多种运维问题，如扩容、迁移、下线、接口变更、服务报警等。

以上问题都需要数据开发工程师去解决。这要求数据开发不仅仅是开发出数据表，还需要将数据表包装成一个独立的、灵活的、高可用的、安全的数据服务。

这对于数据开发工程师要求很高：除了具备基本的业务需求捕获、数据建模、SQL 开发等能力外，还要具备开发高可用、高性能的数据服务能力(包括 Java 开发、微服务等)。

（编辑：应用网_丽江站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!