kafkaのパーティション数を選択する際に考慮する点について、kafka作者のブログにまとめられていました。 How to choose the number of topics/partitions in a Kafka cluster?blog.confluent.io 自身の理解のために、ちょっとまとめてみようと思います。 ※…

最近はSparkにお熱ということで、spark-summit 2014で催されたSpark StreamingでTwitterのタイムラインからハッシュタグの出現頻度を抽出する、というお題をやってみたいとおもいます。 spark-summit 2014のhands on資料 Stream Processing w/ Spark Streami…

あけましておめでとうございます。一昨年はpython, 去年はHaskellだったので今年はGoで占いします。以下の.goを作ります。 // lottery.go package main import ( "fmt" "math/rand" "time" ) func main() { rand.Seed(time.Now().Unix()) values := []string…