发表评论取消回复
相关阅读
相关 [Spark、hadoop]Spark Streaming整合kafka实战
目录 一.KafkaUtils.createDstream方式 二.KafkaUtils.createDirectStream方式 -------------------
相关 hadoop组件---spark实战-----airflow----调度工具airflow定时运行任务的理解
我们在前面已经初步了解了 airflow: [hadoop组件—spark实战-----airflow----调度工具airflow的介绍和使用示例][hadoop_spar
相关 hadoop组件---spark实战-----airflow----调度工具airflow部署到k8s中使用
在之前的文章中 我们已经了解了airflow 和 它的工作原理。 [hadoop组件—spark实战-----airflow----调度工具airflow的介绍和使用示例][
相关 hadoop组件---spark实战-----airflow----调度工具airflow的介绍和使用示例
Airflow是什么 Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行。airflo
相关 hadoop组件---spark实战----遇到问题---executor无法删除
遇到问题----executor无法删除一直重启序号自增 如下: [zzq@localhost spark-2.4.4-bin-hadoop2.7]$ kube
相关 hadoop组件---spark实战----spark on k8s模式k8s原生方式---cluster mode调用运行spark程序
我们在上篇文章中已经记录了 如果 安装spark on k8s模式k8s原生方式—cluster mode。 [hadoop组件—spark实战----spark on k8
相关 hadoop组件---spark实战----spark on k8s模式k8s原生方式安装spark2.4.4 cluster mode
[目前最新稳定版本2.4.4的官方安装文档][2.4.4] 环境准备 1、使用spark2.3以上的spark版本 2、已经在运行的k8s集群版本需要大于1.6
相关 hadoop组件---spark实战----spark on k8s模式Spark Standalone on Docker方式安装spark
在本文的例子中,你将使用 Kubernetes 和 Docker 创建一个功能型 Apache Spark 集群。 你将使用 Spark standalone 模式 安装一个
相关 Spark的Lost executor错误问题
Spark的Lost executor错误问题 问题一 问题二 问题一 19/06/17 09:50:52 WARN cluster.Yarn
相关 Hadoop组件
---------Hive--------------------------zooKeeper-------------------------------kafka----
还没有评论,来说两句吧...