https://github.com/yahoo/streaming-benchmarks
yahoo/streaming-benchmarks
Benchmarks for Low Latency (Streaming) solutions including Apache Storm, Apache Spark, Apache Flink, ... - yahoo/streaming-benchmarks
github.com
Streaming flatform 을 테스트할 수 있는 benchmark 이다.
아래와 같은 streaming flatform들을 benchmarking 할 수 있다.
STORM_TEST - Run the test using Storm on a single node
SPARK_TEST - Run the test using Spark on a single node
FLINK_TEST - Run the test using Flink on a single node
APEX_TEST - Run the test using Apex on a single node
'Spark' 카테고리의 다른 글
| [Spark] Local Spark 와 AWS S3 연동하는 방법 (0) | 2019.12.19 |
|---|---|
| [Spark] spark context, spark session 만드는 방법 (0) | 2019.12.18 |
| [Scala] map vs flatmap 차이 (0) | 2019.12.09 |
| [Spark] 성능 튜닝 참고 링크들 (0) | 2019.11.21 |
| [Spark] Required executor memory (2048), overhead (384 MB), and PySpark memory (0 MB) is above the max threshold (2048 MB) of this cluster! 에러 원인 파악 및 해결 (0) | 2019.11.08 |