rdd数据块的来源？

一、rdd数据块的来源？

RDD是Spark的基石，是实现Spark数据处理的核心抽象。那么，rdd数据块的来源是:

由于，Hadoop的MapReduce是一种基于数据集的工作模式，面向数据，这种工作模式一般是从存储上加载数据集，然后操作数据集，最后写入物理存储设备。数据更多面临的是一次性处理。

而RDD（Resilient Distributed Dataset）是一个弹性分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变、可分区、里面的元素可并行计算的集合。

RDD具有数据流模型的特点：自动容错、位置感知性调度和可伸缩性。RDD允许用户在执行多个查询时显式地将工

作集缓存在内存中，后续的查询能够重用工作集，这极大地提升了查询速度。

二、spark怎么从hbase数据库当中创建rdd？

val hbaseData = hBaseRDD.map ( result => {

//获取rowkey

val rowkey = Bytes.toString(result._2.getRow)

//通过列族和列名获取列

val typeId = Bytes.toString(result._2.getValue(Bytes.toBytes("列簇名"),Bytes.toBytes("字段名")))

val typeValue = Bytes.toString(result._2.getValue(Bytes.toBytes("TA"),Bytes.toBytes("value")))

(rowkey,typeValue)

}).toDF("rowkey","typeValue")

hbaseData.registerTempTable("table")

val frame = sqlContext.sql("select * from table".stripMargin).show()

三、宇宙之谜大揭秘？

宇宙之谜是解不开的谜，还没有大揭密。如正物质反物质，暗物质，黑洞等。还有宇宙是大爆炸产生的，宇宙在膨胀中，宇宙是基本粒子构成的，宇宙是浩渺垠没边际。宇宙是解不开的谜。

四、雍正继位之谜大揭秘？

雍正的继位，历来是清史研究中的重大谜案之一。不少学者始终认为雍正是篡位，说他在康熙病逝前后，精心策划了夺位阴谋，非法夺得了皇位;亦有不少专家说是康熙钦定雍正，雍正合法继承了皇位;更有其他说法，让雍正即位这一历史事件蒙上了神秘的面纱。是是非非，众说纷纭~

~每个人看待统一件事都会有差别的观点，学者们对雍正继位问题的学术研讨未曾中止，不时地研讨和发明新的后果。

五、麦田怪圈之谜大揭秘？

麦田怪圈由龙卷风引起的。

根据对麦田怪圈形成的时间研究，大多数的麦田怪圈都出现在春季和夏季，这段时间的季节很容易出现龙卷风，因此科学家认为是由于龙卷风的外力作用使得麦田上出现了有规则的几何图形，并且进一步发现，出现麦田怪圈的地方都离山边比较近，这种地段极易容易形成龙卷风。

六、宇宙10大恐怖之谜？

1.加速膨胀的宇宙-从上个世纪二十年代，一系列的证据就表明我们的宇宙在膨胀之中，并且最近科学家发现我们的宇宙不但在膨胀，而且膨胀的速度还在加快。至于它为什么会膨胀？膨胀什么时候停止？停止后会不会收缩？该研究至今毫无进展。

2.虚粒子-世界是由物质组成的，一部分我们能看到，而绝大多数的粒子我们并看不到。根据量子力学的不确定性远离，虚粒子在宇宙中到处都是，尤其是在虚无的地方，只是它不能被检测到！

3.黑洞-黑洞是恒星演化的最后阶段，目前仍旧处于理论阶段，根据黑洞的理论性质，它并不能被看见，只能通过周边天体的运行间接推断黑洞的存在，所以我们能得到的直接证据非常之少。

4.超新星-超新星是恒星死亡的阶段性形态。是一个爆炸过程，可以产生能量巨大的伽马射线，是重金属的加工厂。目前没有找到其爆炸的原因。

5.小行星的小卫星-对于行星卫星的定义，科学家有一个重要标准，就是大小。而在太阳系里，有一个直径145公里的小行星竟然还有一个直径仅十几公里卫星。其原因不明。

6.太阳光晕比太阳表面还热-根据热力学定律，我们知道距离热源越近越热，然而距离太阳最远的大气高达几百万摄氏度，太阳表面却只有数千摄氏度。不知道是什么东西在太空加热太阳的大气。

7.静电悬浮-在阿波罗登月中，宇航员发现月球上的尘埃可以浮起来，经研究发现是太阳光是的尘埃粒子带电才浮起来的。但是为什么地球上的尘埃不带电就不知道为什么了。

8.宇宙射线-火星原本是一颗适宜生命居住的星球，后来就是在宇宙射线的冲击下变的无比荒凉。但是没人知道这些射线从哪里来。

9.中子星-中子星是小质量恒星演化的最后阶段，除了黑洞，它的密度和引力最强。中子星上的所有原子都被压缩到了中子大小，没人知道是什么力量造成了这种情况。

10.褐矮星-褐矮星是一类特殊天体，既不是恒星，也不是行星。经常在宇宙中独自流浪，其形成原因令人费解。

七、世界七大之谜？

这些神秘事件和现象包括：

1. 金字塔之谜：金字塔是古代世界七大奇迹之一，其建造方法和目的至今仍然是个谜。

2. 巨石阵之谜：位于英国的一处史前建筑，其建造方式和用途至今仍然是个谜。

3. 百慕大三角之谜：位于北大西洋的一个区域，船只和飞机在此区域经常发生神秘失踪事件。

4. 麦田怪圈之谜：出现在农田中的神秘圆形图案，是如何形成的至今仍然是个谜。

5. 复活节岛之谜：位于南太平洋的岛屿，其巨大的石像和文明消失的原因至今仍然是个谜。

6. 大地巨画纳斯卡线条之谜：位于秘鲁的一片沙漠，其地面上描绘的巨幅图案是如何绘制的一直令人困惑。

7. 尼斯湖水怪之谜：位于苏格兰的一个湖泊，有关湖中存在神秘生物的传说至今仍未得到证实。

这些未解之谜在全球范围内引起了广泛的关注和讨论，但至今仍然没有确切的答案。

八、世界10大未结之谜？

十大未解之谜按其类型主要分为神秘宝藏之谜、人类未解之谜、考古未解之谜、历史文化之谜、外星来客之谜、宇宙未解之谜、动物未解之谜、植物未解之谜、地球未解之谜、自然未解之谜。

九、巨石阵之谜世界十大未解之谜？

英国的巨石阵恐怕大家都不陌生，被评为世界十大未解之谜！建于公元前4000～2000年的巨石阵，他的用途到底是干什么的，没有人能说得清楚，有人说是古代神庙的遗址，有人说是他是古代的天文台，因为它的主轴线、通往石柱的古道和夏至日早晨初升的太阳，在同一条线上，另外其中还有两块石头的连线指向冬至日落的方向，也有人说他是上一代文明的遗址，也有人说经常在巨石阵附近出现UFO的现象，而被都市传说化，说是外星人登陆地球的基站，当然也有英国的本地人对此不待见的，也曾经被评为英国最无聊的十大景点。

十、大敦煌四大未解之谜？

1、敦煌石窟还有没有新洞窟？

敦煌石窟，是敦煌地区石窟的总称，包括莫高窟石窟、榆林石窟、西千佛洞石窟、东千佛洞石窟、五个庙石窟。这些石窟分布在现今的甘肃省敦煌市、安西县和肃北县境内。目前已经发现石窟八百一十二个，其中分别为莫高窟七百三十五个、西千佛洞二十二个、榆林窟四十二个、东千佛洞七个、五个庙石窟六个。

这些石窟分别建于公元四至十四世纪，最早为前秦建元二年（公元三六六年），其余建于十六国、北魏、西魏、北周、隋、唐、五代、宋、西夏、元等不同时期，这些石窟有相当一部分是本世纪中叶考古工作者通过清理淤沙才发现的。那么，敦煌还有没有未发现的石窟呢？敦煌研究院的考古工作者的回答是，莫高窟因为进行过周密的地质探测，可以断言，莫高窟不会有新窟，但在其它几个窟区，由于没有详细探测，还有没有新洞窟至今还是一个谜。

2、敦煌是否还有藏经洞？

一九OO年六月二十二日，敦煌的道士王圆（竹下加录）发现了藏经洞，从洞中出土四至十一世纪的各种珍贵文物五万多件，其中有佛教经卷、社会文书、剌绣、绢画、法器等，对研究中国及中亚古代历史、地理、宗教、经济、政治、民族、语言、文学、艺术、科技提供了数量极其巨大、内容极为丰富的珍贵资料，被誉为"中古时代的百科全书"和"古代学术的海洋"。

至于藏经洞的来历，目前普遍认同的说法是：公元一O三五年，北宋军队与西夏铁骑会猎于党河之滨，一场恶战之后，西夏人占领了敦煌。在破城之前，僧人进行了一次大规模的坚壁清野。他们将不便带走的经卷、文书、绣画、法器等物分门别类，用白布包起来，整整齐齐地码放在洞窟之中，然后封闭了洞口，又抹上一层泥壁，再绘上壁画，直到公元一九OO年才被发现。

那么，敦煌是否还有藏经洞呢？这是一个中外人士都关心的问题。记者曾就这一问题请教过许多敦煌研究院的专家学者，但都没有得到比较满意的答案，只是被告之，有这种可能，但目前还没有新发展。可是，记者从一位不愿透露姓名的学者处得知，地质部门在莫高窟探测过程中曾发现一个洞窟墙壁有异常现象，至于是否也是藏经洞，因为没有打开，所以仍是一个谜。

3、敦煌文献中有多少个世界第一？

敦煌藏经洞内的五万多件文献，是个内容浩瀚的中古时代百科全书，几乎涉及到社会和自然科学的各个方面，经过中外学者的研究，从中目前已经发现了许多世界第一。

在自然科学方面，敦煌学家从文献中发现了世界上最早的纸、最早的活字、最古老的书籍、最早的报纸、最早的火枪、最早的马具、最早的星象图等；在社会科学方面，科学工作者从中发现了世界上最早的连环画、最早的乐谱、最早的棋经、最早的标点符号、最早的栗特语文书、最早的硬笔书法、最早的舞台演出图等。那么，敦煌文献中还有多少个世界第一，这个谜只有等待全世界的敦煌学专家来回答。

4、敦煌的壁画到底有多少？

壁画是敦煌学的重要内容，敦煌的石窟中大多数都有壁画。据最新统计，敦煌石窟中有壁画的多达五百七十个，壁画面积五万多平方米，是一座博大精美的民族壁画宫殿，也是一条绵延一千六百年的历史画廊，被誉为"墙壁上的美术馆"。

敦煌壁画从公元四世纪至本世纪初每个时期都有，跨越了整整一千六百多年，壁画的内容极其丰富，有佛教尊像画、经变画、佛教故事画、供养人画像、装饰图案等，而壁画反映的内容就更加丰富了，不仅有宗教活动、宫庭生活，还有普通人的生产、生活各方面的情况。敦煌壁画是专家学者们研究中古时代中国和中亚地区社会各方面的生动有形的画卷和珍贵资料。

但是，专家学者们早就发现一个现象：许多早期的壁画上都复盖着晚期的壁画，壁画一层盖一层，多的达到四五层之多。这些被复盖的壁画由于与外界隔绝，壁画保存得都比较完好。现在一般说的敦煌壁画面积是指石窟墙壁最外面一层的总数，并不包括被压在里面的壁画，因此敦煌宝库中到底有多少壁画，壁画面积有多大，这仍是一个谜。