Hadoop 2.6.3 + Spark 1.6.0 + Cassandra 2.2.5的配置备忘录

    • guavaの依存性問題でそのままでは動かない問題がある。

 

    • 根本解決はおいておいて、hadoop/common/lib, hadoop/yarn/lib以下にある、guava 0.11.jarを全てguava-0.18.jarに変更して、workerに配る

 

    • cassandra java driverは ver 3.0を使う

 

    • cassandra connectorは ver. 1.5でよい

 

    spark は 本家の1.6 binaryでそのまま動く
广告
将在 10 秒后关闭
bannerAds