字节宝
  • 分类
  • 教程
  • 文章
  • 官方文档
  • 技术
  • 入门教程
  • 文章
  • VIP会员
/spark/
Spark Streaming基本概念
  • 赞
  • 收藏
  • 更多文章
  • 目录

  1. Spark 编程指南
    1. 引入 Spark
    2. 引入 Spark
    3. 引入 Spark
    4. 引入 Spark
    5. 初始化 Spark
    6. Spark 共享变量
  2. Spark 快速上手
    1. Spark 独立应用程序
    2. Spark Shell
    3. Spark 运行程序
  3. Spark RDDs
    1. Spark 并行集合
    2. Spark 外部数据集
    3. Spark RDD 操作
    4. Spark RDD持久化
  4. Spark Streaming
    1. Spark Streaming示例
    2. Spark Streaming基本概念
      1. Spark Streaming关联
        1. 初始化StreamingContext
          1. Spark Streaming离散流
            1. 输入DStreams
              1. DStream中的转换
                1. DStream的输出操作
                  1. DStreams缓存或持久化
                    1. Spark Streaming Checkpointing
                      1. Spark Streaming部署应用程序
                        1. Spark Streaming监控应用程序
                        2. Spark Streaming性能调优
                          1. Spark Streaming减少批数据的执行时间
                            1. Spark Streaming设置正确的批容量
                              1. Spark Streaming内存调优
                              2. Spark Streaming容错语义
                            2. Spark SQL
                              1. Spark SQL开始
                              2. Spark SQL性能调优
                              3. Spark SQL其他接口
                              4. 编写语言集成(Language-Integrated)的相关查询
                              5. Spark SQL数据类型
                              6. Spark SQL数据源
                                1. Spark SQL RDDs
                                  1. Spark SQL parquet文件
                                    1. Spark SQL JSON数据集
                                      1. Spark SQL Hive表
                                    2. GraphX编程指南
                                      1. Spark GraphX开始
                                      2. Spark GraphX图算法
                                      3. Spark GraphX例子
                                      4. Spark GraphX提交应用程序
                                      5. 独立运行Spark
                                      6. 在yarn上运行Spark
                                      7. Spark GraphX属性图
                                      8. Spark配置
                                      9. Spark GraphX图操作符
                                      10. Spark GraphX Pregel API
                                      11. Spark GraphX图构造者
                                      12. Spark GraphX顶点和边RDDs
                                    阅读(1676) 赞(4)

                                    Spark Streaming基本概念

                                    2016-02-23 16:25:29 更新

                                    Spark Streaming基本概念

                                    在了解简单的例子的基础上,下面将介绍编写Spark Streaming应用程序必需的一些基本概念。

                                    • 关联
                                    • 初始化StreamingContext
                                    • 离散流
                                    • 输入DStreams
                                    • DStream中的转换
                                    • DStream的输出操作
                                    • 缓存或持久化
                                    • Checkpointing
                                    • 部署应用程序
                                    • 监控应用程序
                                    ← Spark Streaming示例
                                    Spark Streaming关联 →

                                    推荐文章

                                    • 学电脑办公软件一定要参加培训班吗?本篇文章告诉你!
                                    • java语言的三大特性是什么?如何理解?
                                    • 后端是做什么的?后端开发者需要具备哪些技能?
                                    • 前端入门到工作要多久?结果可能颠覆你的认知!
                                    • Python开发网站好吗?为什么是个好选择?

                                    推荐教程

                                    • 设计模式、高可用性、高弹性、运维、监控与自动化
                                    • 前后端分离的思考与实践
                                    • Susy 2 入门教程
                                    • 让web app更快的HTML5最佳实践
                                    • Stack Overflow 揭秘程式开发者15 个不为人知的秘密

                                    技术文章

                                    • 在 C# 中获取操作系统相关信息
                                    • AI 检索器(AI Retriever):RAG的重要组成部分,超强的商业优势
                                    • 基于知识库、工作流的智能体实践
                                    • 前端性能优化
                                    • 玩转腾讯混元 | 腾讯混元大模型AIGC系列产品技术有奖征文活动

                                    Copyright©2023  字节宝字节宝| |

                                    违法和不良信息举报电话:|举报邮箱:3111859717@qq.com