xiyangyang
V2EX  ›  Hadoop

创建一个基于 Spark 的生产平台,什么样的硬件配置是最普遍的

  •  
  •   xiyangyang · Mar 16, 2016 · 3757 views
    This topic created in 3899 days ago, the information mentioned may be changed or developed.

    每天数据量大约是 1000 万条,大部分是文本,需要快速查询出结果。
    spark 对内存要求比较高,业内普遍的服务器配置里面 CPU 和内存是怎么配置的?

    谢谢!

    2 replies  •  2016-03-17 07:59:35 +08:00
    knightdf
    knightdf
    Mar 16, 2016
    1
    才 1000W 而已嘛,啥配置不行。。。
    ming2050
    ming2050
    Mar 17, 2016 via Android
    2
    貌似数据量有点小
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   931 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 44ms · UTC 21:11 · PVG 05:11 · LAX 13:11 · JFK 16:11
    ♥ Do have faith in what you're doing.