页面树结构

2017-07-25 Apache Spark 2.2.0 官方文档中文版发布 : http://spark.apachecn.org/docs/cn/2.2.0/


MachineLearning 优酷地址 : http://i.youku.com/apachecn

转至元数据结尾
转至元数据起始
  • Spark 1.6 中,默认情况下服务器在多会话模式下运行。这意味着每个 JDBC / ODBC 连接拥有一份自己的 SQL 配置和临时注册表。缓存表仍在并共享。如果你想在单会话模式服务器运行,请设置选项 spark.sql.hive.thriftServer.singleSession 为 true。您既可以将此选项添加到 spark-defaults.conf,或者通过 --conf 将它传递给 start-thriftserver.sh

    ./sbin/start-thriftserver.sh \
         --conf spark.sql.hive.thriftServer.singleSession=true \
         ...
  • 1.6.1 开始,在 sparkR withColumn 方法支持添加一个新列或更换数据框同名的现有列。
  • Spark 1.6 开始,LongType 强制转换为 TimestampType 秒,而不是微秒。这一变化是为了匹配 Hive 1.2 ,保证从数值类型转换到 TimestampType 的一致性。见 SPARK-11724 了解详情。