Zeppelin是一個(gè)基于Web的notebook,提供交互數(shù)據(jù)分析和可視化。后臺支持接入多種數(shù)據(jù)處理引擎,如spark,hive等。支持多種語言: Scala(Apache Spark)、Python(Apache Spark)、SparkSQL、 Hive、 Markdown、Shell等。本文主要介紹Zeppelin中Interpreter和SparkInterpreter的實(shí)現(xiàn)原理。
轉(zhuǎn)載請注明
http://www.cnblogs.com/shenh062326/p/6195064.html
安裝與使用
參考http://blog.csdn.net/jasonding1354/article/details/46822391
原理簡介
Interpreter
Zeppelin中最核心的概念是Interpreter,interpreter是一個(gè)插件允許用戶使用一個(gè)指定的語言或數(shù)據(jù)處理器。每一個(gè)Interpreter都屬于換一個(gè)InterpreterGroup,同一個(gè)InterpreterGroup的Interpreters可以相互引用,例如SparkSqlInterpreter 可以引用 SparkInterpreter 以獲取 SparkContext,因?yàn)樗麄儗儆谕粋€(gè)InterpreterGroup。當(dāng)前已經(jīng)實(shí)現(xiàn)的Interpreter有spark解釋器,python解釋器,SparkSQL解釋器,JDBC,Markdown和shell等。下圖是Zeppelin官網(wǎng)中介紹Interpreter的原理圖。
延伸閱讀
- ssh框架 2016-09-30
- 阿里移動安全 [無線安全]玩轉(zhuǎn)無線電——不安全的藍(lán)牙鎖 2017-07-26
- 消息隊(duì)列NetMQ 原理分析4-Socket、Session、Option和Pipe 2024-03-26
- Selective Search for Object Recognition 論文筆記【圖片目標(biāo)分割】 2017-07-26
- 詞向量-LRWE模型-更好地識別反義詞同義詞 2017-07-26
- 從棧不平衡問題 理解 calling convention 2017-07-26
- php imagemagick 處理 圖片剪切、壓縮、合并、插入文本、背景色透明 2017-07-26
- Swift實(shí)現(xiàn)JSON轉(zhuǎn)Model - HandyJSON使用講解 2017-07-26
- 阿里移動安全 Android端惡意鎖屏勒索應(yīng)用分析 2017-07-26
- 集合結(jié)合數(shù)據(jù)結(jié)構(gòu)來看看(二) 2017-07-26