在今年的Spark + AI 峰會(huì)上，微軟宣布.NET for Apache Spark，并推出了首個(gè)預(yù)覽版本 v0.1.0，這是一個(gè)用于 Spark 大數(shù)據(jù)的 .NET 框架，可以讓 .NET 開發(fā)者輕松地使用Apache Spark。

.NET for Apache Spark 提供了高性能的 .NETAPI 以便輕松地在 C# 和 F# 程序中使用Apache Spark。你可以訪問最受歡迎的 Dataframe 和 SparkSQL ，可以處理結(jié)構(gòu)化數(shù)據(jù)和 Spark Structured Streaming 流數(shù)據(jù)。

.NET for Apache Spark 架構(gòu)如下：

.NET for Apache Spark 兼容 .NET 標(biāo)準(zhǔn)，支持 Windows, Linux 和macOS ，使用 .NET Core，或者是 Windows 下使用.NET Framework。同時(shí)也可以運(yùn)行在主流的云平臺(tái)上，包括：Azure HDInsight Spark,Amazon EMR Spark,AWS&AzureDatabricks。

.NET for Apache Spark 性能表現(xiàn)：