about云开发

 找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

订阅

注册免费送体验金平台

确定Apache Flink集群规模时需要考虑的6件事
问题导读 1.集群搭建本文都说了哪些因素? 2.什么情况下需要考虑网络容量? 3.什么情况需要考虑磁盘宽带? 4.除了6个因素,还有哪些需要考虑? 关注最新经典文章,欢迎关注公众号 Apache Flink社区常 ...
分类:    2018-10-18 16:49
Apache Flink如何管理Kafka消费者offsets
问题导读 1.Flink与kafka一起如何做Checkpointing ? 2.发生故障,Flink如何恢复的? 3.Kafka consumer offsets存储在什么位置? 关注最新经典文章,欢迎关注公众号 此篇出现一个词barriers ,需要对 ...
分类:    2018-10-17 17:33
Apache Flink:开发经验总结
问题导读 1.本文的背景是什么? 2.本文介绍了哪些开发经验? 3.本地开发环境正常运行,部署环境出错,原因是什么? 4.本地开发环境正常运行,部署环境出错本文是如何解决的? 5.流处理中,如何更改需求,添加 ...
分类:    2018-10-17 10:00
Spark:你还没用SparkSession吗?已经out了
问题导读 1.Spark2入门是哪个类? 2.为何要产生Spark-Session? 3.Spark-Session如何使用? 关注最新经典文章,欢迎关注公众号 看到很多同学还在使用spark1的相关api,这里将讨论Spark-Session。 为何 ...
分类:    2018-10-17 09:31
Spark Structured Streaming如何将流数据保存到Elasticseach【附代码】
问题导读 1.从哪个版本开始Elasticseach支持spark sql? 2.如何查找Elasticseach和spark sql对应版本? 3.如何实现Spark Structured Streaming数据保存到Elasticseach? 关注最新经典文章,欢迎关注公众号 ...
分类:    2018-9-27 18:40
Spark2.4有哪些新功能【尝鲜】
问题导读 1.Spark有哪些模块发生改变? 2.Barrier Execution是什么? 3.将Spark数据与AI整合的是什么项目? 关注最新经典文章,欢迎关注公众号 Spark开发者公布了Spark2.4新增功能,多模块都做了改变, ...
分类:    2018-9-21 18:45
使用Hadoop进行电子商务数据分析,了解实际工作是怎么进行的
问题导读 1.实际工作中,分析数据有哪些工作? 2.本文涉及了几张表? 3.分析了几张表? 4.本文分析数据任务是什么? 关注最新经典文章,欢迎关注公众号 我们大数据开发与传统开发到底有什么区别 ...
分类:    2018-9-19 15:49
IDEA(spark2.3)Scala如何实现本地调试
问题导读 1.本文的环境是什么? 2.如何打断点? 3.查看变量的数据有几种方式? 关注最新经典文章,欢迎关注公众号 这里重点讲如何调试,也会有视频会放到about云知识星球。 1.准备环境 (1)spark2.3 ...
分类:    2018-9-8 15:33
Spark 高级分析:第七章第14节 用Pregel计算平均路径长度
问题导读 1.计算图中顶点之间的路径长度是什么样的过程? 2.什么是BSP?什么是Pregel? 3.GraphX中如何计算顶点之间路径长度的? 关注最新经典文章,欢迎关注公众号 上一篇:第七章第12,13节 小世 ...
分类:    2018-9-8 15:31
Cloudera Enterprise 6.0发布【集成Hadoop3.0】
问题导读 1.cloudera集成了哪些新的组件? 2.Cloudera Manager可以管理多少节点? 3.升级版本有哪些条件? 关注最新经典文章,欢迎关注公众号 Cloudera宣布Cloudera Enterprise 6.0发布,其中包含许多 ...
分类:    2018-9-2 07:49
Idea初步编程使用需要知道的事情【节省你的一到两周时间】
问题导读 1.Idea中红色字体代表什么含义? 2.灰色字体代表什么含义? 3.找不到相关包和函数原因是什么? 最新经典文章,欢迎关注公众号 Idea如果你初步使用,可能会用不习惯,特别是刚开始学习编程的大学 ...
分类:    2018-8-27 18:59
Hadoop 2.x与Hadoop 3.x的22个点比较:3.x将节省大量存储空间
问题导读 1.Hadoop3.x通过什么方式来容错? 2.Hadoop3.x存储开销减少了多少? 3.Hadoop3.x MR API是否兼容hadoop1.x? 最新经典文章,欢迎关注公众号 1.目的 在这篇文章中,我们将讨论Hadoop 2.x与H ...
分类:    2018-8-27 18:54
使用Kafka和KSQL进行实时系统日志处理 - 第1部分:过滤
问题导读 1.kafka sql的作用是什么? 2.kafka sql如何实现过滤数据? 3.kafka sql对于过去的,现在接受的,以后接受的数据如何过滤? 系统日志是现代计算运行的无处不在的标准之一。 Linux,它在I ...
分类:    2018-7-13 07:22
Kubernetes, Kafka微服务架构模式讲解及相关用户案例
问题导读 1.微服务有什么特点? 2.本文介绍了哪些案例? 3.你认为事件驱动的微服务、容器、Kubernetes和机器学习结合可以带来哪些发展? 随着当今业务和技术的快速变化,开发人员,数据科学家和IT运营 ...
分类:    2018-7-5 18:52
hadoop2.2.0三个以上节点安装指导
hadoop2.2.0稳定版发布,立即下载先搭建测试环境。 1:规划 centOS6.4上搭建hadoop2.2.0环境,java版本7UP21 192.168.100.171 hadoop1 (namenode) 192.168.100.172 hadoop2 (预留当namenode) 192.168.100 ...
分类:    2018-6-17 18:38
12下一页

相关分类

关闭

推荐上一条 /1 下一条

QQ|小黑屋|about云开发-学问论坛|社区 ( 京ICP备12023829号

GMT+8, 2018-10-20 02:46 , Processed in 0.116005 second(s), 13 queries , Gzip On.

Powered by Discuz! X3.2 Licensed

返回顶部