文件名称：java8集合源码分析-spark-sql:spark学习
文件大小：1.92MB
文件格式：ZIP
更新时间：2024-06-24 11:47:13
系统开源
java8 集合源码分析 Spark 阅读Spark SQL相关官方文档笔记,见SparkSQLDoc.md Spark Streaming 相关， 见SparkStreaming.md 奇淫巧技 IDEA，按住ALT，并按住左键进行框选也能实现多行编辑 Linux的vi编辑。 使用A进入输入模式，再进行复制。如果使用a进入输入模式，复制东西时开头几个字符常常会被删除。 分布式的基于内存的列式存储计算框架 MapReduce局限性 代码繁琐 只支持map和reduce方法, 效率低 不适合迭代多次/交互式/流式处理 框架多样化：会导致学习/运维成本都提高 批处理（离线）：MapReduce、Hive、Pig 流式处理（实时）： Storm、JStorm 交互式计算：Impala Spark就能完成上面这些所能做的事 注意点 mvn命令中 -D的参数是指pom.xml中properties中的参数, -P的参数是指pom.xml中profile中的参数 如果mvn命令提示仓库中已有xxx包,可以使用-U命令 mvn -X,查看到更详细的错误信息 jps -m 查看更详细的信息 代码中的s