Databricks认知服务：name＆＃x27; textsentiment＆＃x27;未定义

Question

我正在尝试使用以下指南实施认知服务

我已经实现了示例代码：

from mmlspark.cognitive import *
from pyspark.sql.functions import col

# Add your subscription key from the Language service (or a general Cognitive Service key)
service_key = "ADD-SUBSCRIPTION-KEY-HERE"

df = spark.createDataFrame([
  ("I am so happy today, its sunny!", "en-US"),
  ("I am frustrated by this rush hour traffic", "en-US"),
  ("The cognitive services on spark aint bad", "en-US"),
], ["text", "language"])

sentiment = (TextSentiment()
    .setTextCol("text")
    .setLocation("eastus")
    .setSubscriptionKey(service_key)
    .setOutputCol("sentiment")
    .setErrorCol("error")
    .setLanguageCol("language"))

results = sentiment.transform(df)

# Show the results in a table
display(results.select("text", col("sentiment")[0].getItem("score").alias("sentiment")))

我已经安装了库Azure：mmlspark：0.17，

但我继续遇到错误：

name 'TextSentiment' is not defined

有什么想法吗？

Answer 1

我发现当前，只有一种群集类型可以使本教程工作是 databricks运行时版本：6.4扩展支持（包括Apache Spark 2.4.5，Scala 2.11），因为库仅支持运行时版本7.0或以下。另外，似乎您需要将最新版本的库在集群上安装到以下内容：

坐标：
com.microsoft.ml.spark：mmlspark_2.11：1.0.0-rc3
存储库：
https://mmlspark.azuredge.net/maven

请参阅屏幕截图。