文件名称:大数据技术体系-人工智能自适应教育行业研究报告
文件大小:1.12MB
文件格式:PDF
更新时间:2024-07-15 01:55:01
hadoop 星环
大数据技术概览2.2 大数据技术体系 电商、社交网络、智能硬件等 数据源 Sqoop (结构化数据 | 数据导入导出) 数据采集 HDFS(分布式文件系统)、HBase / Hyperbase / Cassandra / Redis / Mongodb(分布式NoSQL数据库) 数据存储 YARN(资源管理框架)、Mesos / Kubernetes / TOS(数据中心操作系统) 资源管理 通用计算 Spark Streaming / Slipstream / Storm / Flink DataStream (流处理引擎) Hive / Spark SQL / Inceptor (SQL引擎) 数据分析 Spark MLlib / Discover (机器学习) Impala / Holodesk / Presto (OLAP) ElasticSerach / Search / Solr (搜索引擎)Z o o K e e p e r ( 分 布 式 协 调 服 务 ) ECharts、D3、Cboard等 数据可视化 Flume、Kafka (半结构化、非结构化数据 | 日志采集、分布式消息队列) MapReduce(批处理框架)、Spark Core(高性能计算框架)、Flink Dataset