FabCon Europe 2024 – 展望 Microsoft Fabric 的未来
Posted: Tue Jan 28, 2025 8:26 am
在微软宣布全面推出其最新数据平台 Microsoft Fabric 近一年后，首届 Microsoft Fabric 会议于 2024 年 9 月 24 日至 27 日在欧洲举行。欧洲微软社区大会，简称FabCon，吸引了来自欧洲和世界各地的行业专家、开发人员和IT专业人士来到斯德哥尔摩。作为 adesso 团队的一员，我也在现场并参与了行动。
有这么多令人兴奋的讲座、主题演讲和研讨会（数量超过 130 个），决定参加哪一场并不是那么容易。我特别从蛋糕中挑选了我个人的葡萄干 - 这些会议似乎特别令人兴奋并且与我作为云和数据架构师的工作相关。从对已实施用例的深入了解到功能路线图的最新发展，我获得了许多令人兴奋的信息。在这篇博文中，我想深入了解我从 FabCon 中获得的最有趣的时刻和关键见解。
开发人员工作流程和 CI/CD
Microsoft Fabric 提供了不同的方法，具体取决于您的需求和偏好。一方面，有机会使用 Git、Azure DevOps 和 Fabric API 等工具创建灵活的代码密集型体验。另一方面，结构部署管道支持更简单、无代码的方法。目前使 律师电子邮件列表 用 Fabric API 时仍然存在一些障碍，特别是由于服务主体身份验证的实施不一致。不过，微软承诺在今年年底前解决这个问题。有关当前支持服务主体的 API 端点的详细信息，请参阅随附的链接。此外，Fabric Connections API 即将推出，支持以编程方式操作数据连接。
配置即代码
对于 Terraform 粉丝来说，有个好消息：自 9 月底以来，Microsoft Fabric 的官方 Terraform Provider 已提供公共预览版，这对于在 Fabric DevOps 中使用 Terraform 的人员来说是一个重要的补充。尽管社区对此表现出了明显的兴趣，但目前路线图上并未包含 ARM/Bicep 的部署。
Fabric 中的 Python
Microsoft Fabric 的一个有趣的创新是能够使用纯 Python 笔记本，而无需在后台运行 Spark 会话。此功能特别受欢迎，因为它显着简化了内务任务的执行以及频繁、数据匮乏的作业的处理 - 例如定期的外部 API 调用。未来开发人员如何在用户数据函数（链接）和 Python Notebook 之间分配工作负载以最大限度地提高效率，将会很有趣。
管道中的高并发 Spark 会话
Microsoft Fabric 的另一个重要更新自 9 月底开始发布，涉及 Fabric Pipelines 中高并发 Spark 会话的使用（链接）。此功能允许 Spark 会话在多个笔记本之间共享。如果没有此功能，结构管道中可以同时启动的笔记本数量会受到严重限制，因为必须为每个笔记本启动一个新会话。此更新为更高效的资源管理开辟了新的可能性。
有这么多令人兴奋的讲座、主题演讲和研讨会（数量超过 130 个），决定参加哪一场并不是那么容易。我特别从蛋糕中挑选了我个人的葡萄干 - 这些会议似乎特别令人兴奋并且与我作为云和数据架构师的工作相关。从对已实施用例的深入了解到功能路线图的最新发展，我获得了许多令人兴奋的信息。在这篇博文中，我想深入了解我从 FabCon 中获得的最有趣的时刻和关键见解。
开发人员工作流程和 CI/CD
Microsoft Fabric 提供了不同的方法，具体取决于您的需求和偏好。一方面，有机会使用 Git、Azure DevOps 和 Fabric API 等工具创建灵活的代码密集型体验。另一方面，结构部署管道支持更简单、无代码的方法。目前使 律师电子邮件列表 用 Fabric API 时仍然存在一些障碍，特别是由于服务主体身份验证的实施不一致。不过，微软承诺在今年年底前解决这个问题。有关当前支持服务主体的 API 端点的详细信息，请参阅随附的链接。此外，Fabric Connections API 即将推出，支持以编程方式操作数据连接。
配置即代码
对于 Terraform 粉丝来说，有个好消息：自 9 月底以来，Microsoft Fabric 的官方 Terraform Provider 已提供公共预览版，这对于在 Fabric DevOps 中使用 Terraform 的人员来说是一个重要的补充。尽管社区对此表现出了明显的兴趣，但目前路线图上并未包含 ARM/Bicep 的部署。
Fabric 中的 Python
Microsoft Fabric 的一个有趣的创新是能够使用纯 Python 笔记本，而无需在后台运行 Spark 会话。此功能特别受欢迎，因为它显着简化了内务任务的执行以及频繁、数据匮乏的作业的处理 - 例如定期的外部 API 调用。未来开发人员如何在用户数据函数（链接）和 Python Notebook 之间分配工作负载以最大限度地提高效率，将会很有趣。
管道中的高并发 Spark 会话
Microsoft Fabric 的另一个重要更新自 9 月底开始发布，涉及 Fabric Pipelines 中高并发 Spark 会话的使用（链接）。此功能允许 Spark 会话在多个笔记本之间共享。如果没有此功能，结构管道中可以同时启动的笔记本数量会受到严重限制，因为必须为每个笔记本启动一个新会话。此更新为更高效的资源管理开辟了新的可能性。