”Spark竞选面试题“ 的搜索结果

     1 var, val和def三个关键字之间的区别? var immutable variable val mutable variable def function defined keyword 2.object 和 class 的区别? object 单例 无构造器 成员变量和method都是static 可以直接访问main...

     1、你觉得spark 可以完全替代hadoop 么? Spark 会替代 MR,Spark 存储依赖 HDFS,资源调度依赖 YARN,集群管理依赖 Zookeeper。 2、Spark消费 Kafka,分布式的情况下,如何保证消息的顺序? Kafka 分布式的单位是 ...

     一、简答题 1.Spark master使用zookeeper进行HA的,有哪些元数据保存在Zookeeper? 答:spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置,包括Worker,Driver和Application...

     1、MRV1有哪些不足 1) 可扩展性(对于变化的应付能力) a) JobTracker内存中保存用户作业的信息 b) JobTracker使用的是粗粒度的锁 2) 可靠性和可用性 a) JobTracker失效会多事集群中所有的运行作业,用户需手动...

     基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务...

     kafka详细面试题集1、Kafka的用途有哪些?使用场景如何?2、 Kafka中的ISR、AR又代表什么?ISR的伸缩又指什么3、Kafka中的HW、LEO、LSO、LW等分别代表什么?4、Kafka中是怎么体现消息顺序性的?5、Kafka中的分区器、...

     大厂面试的基本流程 17 字节跳动 17 阿里 17 腾讯 18 网易游戏 18 面试前需要准备: 18 面试中可以借鉴的套路 19 用简历争取到更多的面试机会 19 自我介绍时,立即全面抛出技术栈和亮点 20 先介绍项目背景,打消...

     京东: 一面: 1、springMVC执行过程 2、线程池执行流程 3、redis分布式锁 4、redis热key会产生什么问题,怎么解决,大量请求访问redis的一个分片,redis崩溃,怎么解决 ...6、@Trans 默认回滚什么异常,什么情况下会...

     在 0.11.0 之前,Kafka 通过 Producer 端和 Server 端的相关配置可以做到,也就是,但是在一些情况下,可能会导致数据重复,比如:网络请求延迟等导致的重试操作,在发送请求重试时 Server 端并不知道这条请求是否...

     Java基础 1. 面向对象的三个基本特征? 面向对象的三个基本特征是:封装、继承、多态 继承:让某个类型的对象获得另一个类型的对象的属性的方法;继承就是子类继承父类的特征和行为,使得子类对象(实例)具有父类的实例和...

     1、kafka是什么?可以用来做什么?...流计算集成(与StreamCompute、E-MapReduce、Spark、Storm等流计算引擎集成) 2、为什么kafka安装需要依赖Zookeeper? 集群管理、节点的管理、admin管理工具、配

      1、kafka的数据存在内存还是磁盘 Kafka最核心的思想是使用磁盘,而不是使用内存,可能所有人都会认为,内存的速度一定比磁盘快,我也不例外。在看了Kafka的设计思想,查阅了相应资料再加上自己的测试后,发现磁盘...

JAVA面试

标签:   java  udp  tcp/ip

     文章目录一、基础篇网络基础**TCP三次握手****1、OSI与TCP/IP 模型****2、常见网络服务分层****3、TCP与UDP区别及场景****4、TCP滑动窗口,拥塞控制****5、TCP粘包原因和解决方法****6、TCP、UDP报文格式****HTTP...

     一、基本说明 ...当然了,大家都不是做底层的分布式系统,比如分布式存储系统,hadoop hdfs,分布式计算系统,hadoop mapreduce,spark,分布式流式计算系统,storm。 分布式业务系统,把原来...

Kafka面试题总结

标签:   kafka  面试

     Kafka高吞吐量介绍:1.producer端消息优化2.磁盘顺序读写3.零拷贝技术4.End-to-end消息压缩Kafka支持多种压缩算法。例如Gzip snappy和lz4和zstd.同时kafka支持end-to-end的压缩方式,消息在生产端杯压缩,broker端...

     CAP原则 在分布式系统要满足CAP原则,一个提供数据服务的存储系统无法同时满足:数据一致性、数据可用性、分区耐受性。 C数据一致性:所有应用程序都能访问到相同的数据。 A数据可用性:任何时候,任何应用程序都...

JAVA面试必备

标签:   java  eclipse  tomcat

     一、基础篇 网络基础 TCP三次握手 1、OSI与TCP/IP 模型 2、常见网络服务分层 3、TCP与UDP区别及场景 4、TCP滑动窗口,拥塞控制 5、TCP粘包原因和解决方法 6、TCP、UDP报文格式 ...1、进程间通.

我的面试题

标签:   java

     上篇 一、基础篇 网络基础 TCP三次握手 1、OSI与TCP/IP 模型 2、常见网络服务分层 3、TCP与UDP区别及场景 4、TCP滑动窗口,拥塞控制 5、TCP粘包原因和解决方法 ... 6、C

3   
2  
1