了解Drill Sandbox《译》
发布时间:2020-12-15 00:46:07 所属栏目:C语言 来源:网络整理
导读:table class="text" tr class="li1" td class="ln"pre class="de1"1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62
<table class="text"> |
<tr class="li1">
<td class="ln"><pre class="de1">1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
?
在本教程中,您查询的数据集,包括hive和HBase和在文件系统中的文件,例如CSV、JSON、Parquet等文件。去访问这些不同的数据源,你连接钻到存储插件。
?
存储插件概述
?
你使用存储插件连接到一个数据源,如文件或Hive元存储。看看存储插件通过打开存储在钻Web控制台定义标签。启动一个web浏览器并去:http://:8047/storage.
?
控制面板来管理存储插件出现。
?
?
?
?
?
?
?
你看到下面的存储插件配置:
?
cp
dfs
蜂巢
maprdb
hbase
蒙戈
单击更新检查配置。
?
如果你使用一个安装钻在使用沙箱之前,你可能会注意到,几个存储插件配置在沙箱不同于相同的存储在钻机安装插件配置。 dfs的沙箱配置,蜂巢,maprdb和hbase存储插件定义在模拟运行的集群环境中发挥作用的教程。
?
dfs
?
的 dfs
存储插件沙箱MapR的连接配置文件系统(MapR-FS)。
?
的 dfs
存储在沙箱中还包含一组插件配置的工作区;每一个代表 在MapR-FS位置:
?
根:根文件系统访问的位置
点击:访问日志嵌套的JSON数据
日志:平(non-nested)访问JSON日志数据的日志目录及其子目录
视图:一个工作区创建视图
的 dfs
配置包括格式定义。
?
{
? "type": "file",? "enabled": true,? "connection": "maprfs:///",? "workspaces": {
? ? "root": {
? ? ? "location": "/mapr/demo.mapr.com/data",? ? ? "writable": false,? ? ? "defaultInputFormat": null
? ? },? ? "clicks": {
? ? ? "location": "/mapr/demo.mapr.com/data/nested",? ? ? "writable": true,? ? ? "defaultInputFormat": "parquet"
? ? },?. . .
?"formats": {
?. . .
? ?"csv": {
? ? ? "type": "text",? ? ? "extensions": [
? ? ? ? "csv"
? ? ? ],? ? ?"delimiter": ","
? },?. . .
? ?"json": {
? ? ? "type": "json"
? },? ?"maprdb": {
? ? ? "type": "maprdb"
? }
?. . .
maprdb
?
maprdb是配置MapR-DB沙箱。 你使用这种格式在沙箱查询MapR-DB / HBase表。
?
蜂巢
?
蜂巢的蜂巢配置数据仓库在沙箱内。 钻连接到蜂巢metastore通过使用配置metastore节俭 URI。 蜂巢的元数据表自动供用户查询。
?
{
? "type": "hive",? "configProps": {
? ? "hive.metastore.uris": "thrift://localhost:9083",? ? "hive.metastore.sasl.enabled": "false"
? }
}
不要使用这个存储插件配置在沙箱之外。 使用的配置 远程或嵌入式metastore配置 。
?
接下来是什么
?
开始去查询 教训1:了解数据 集 。
?
?
?
?
?
?
?
?
?
(编辑:李大同)
【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!