- 主题:最近看大数据方面的选型，轮子太多了 (转载)
【 以下文字转载自 Java 讨论区 】
发信人: iwannabe (I wanna be), 信区: Java
标 题: 最近看大数据方面的选型，轮子太多了
发信站: 水木社区 (Tue Aug 17 15:51:25 2021), 站内
这玩意儿比java的轮子还多，一般的大数据分析系统什么比较成熟？
还有个时序数据库（influxdb，timescaledb，tdengine），这玩意儿怎么和olap结合起
来
### 技术栈
- Parquet
- olap引擎
- hive
- hawq
- spark sql
- presto
- impala
- **clickhouse**：适合宽表查询
- greeplum
- kylin:
- 数据传输
- datax
- **waterdrop**
- kafka
- nosql
- **cassendra**
- hbase
- mongodb
- Couchbase
--
FROM 119.139.198.*
都得用，招聘一个数据分析师必然要用自己得一套。
【 在 iwannabe (I wanna be) 的大作中提到: 】
: 标 题: 最近看大数据方面的选型，轮子太多了
: 发信站: 水木社区 (Tue Aug 17 15:51:38 2021), 站内
:
: 【 以下文字转载自 Java 讨论区 】
: 发信人: iwannabe (I wanna be), 信区: Java
: 标 题: 最近看大数据方面的选型，轮子太多了
: 发信站: 水木社区 (Tue Aug 17 15:51:25 2021), 站内
:
: 这玩意儿比java的轮子还多，一般的大数据分析系统什么比较成熟？
: 还有个时序数据库（influxdb，timescaledb，tdengine），这玩意儿怎么和olap结合起
: 来
:
: ### 技术栈
:
: - Parquet
:
: - olap引擎
:
: - hive
: - hawq
: - spark sql
: - presto
: - impala
: - **clickhouse**：适合宽表查询
: - greeplum
: - kylin:
:
: - 数据传输
:
: - datax
: - **waterdrop**
: - kafka
:
: - nosql
: - **cassendra**
: - hbase
: - mongodb
: - Couchbase
:
: --
:
: ※ 来源:·水木社区 mysmth.net·[FROM: 119.139.198.*]
--
FROM 111.197.239.*
你列的这堆只有 spark 和 kafka 堪用。
Clickhouse 再等它成熟点，现在正开发很疯狂。
【 在 iwannabe 的大作中提到: 】
: 发信人: iwannabe (I wanna be), 信区: Java
: 标 题: 最近看大数据方面的选型，轮子太多了
: 发信站: 水木社区 (Tue Aug 17 15:51:25 2021), 站内
: ...................
--
FROM 124.64.120.*
有的需要精通，大部分了解，会用就行
--
FROM 114.242.206.*