Hadoop 2.6.3 + Spark 1.6.0 + Cassandra 2.2.5的配置备忘录
-
- guavaの依存性問題でそのままでは動かない問題がある。
-
- 根本解決はおいておいて、hadoop/common/lib, hadoop/yarn/lib以下にある、guava 0.11.jarを全てguava-0.18.jarに変更して、workerに配る
-
- cassandra java driverは ver 3.0を使う
-
- cassandra connectorは ver. 1.5でよい
- spark は 本家の1.6 binaryでそのまま動く