spark1.6がリリースされました。 Spark 1.6.0 released | Apache Spark 詳しい変更点は上記を見ていただくとして、ここではDatasetとメモリ管理方式の変更について紹介します。 メモリ管理の変更 Spark1.6ではメモリ（ヒープ）の管理が柔軟になり、より効率…

あけましておめでとうございます。 恒例の占い企画です。 2013年はPython、2014年はHaskell、2015年はGoで占いをしました。今年はScalaです。 scala> import scala.util.Random import scala.util.Random scala> Random.shuffle(List("大凶", "凶", "大吉", …