我们可以使用两种方法创建RDD: 1.读取一个外部的数据集，或在驱动器程序里分发驱动器程序中的对象集合。RDD创建之后，其支持两种类型的操作：转换操作（transformation）、行动操作（action）。转换操作会…
kafka的简单使用
前言 之前看了一些招收数据挖掘，机器学习的岗位招聘信息，感觉有些硬性要求自己还差的好远，譬如掌握spark，kafka，Hadoop，hive等。所以革命道路艰且长，同志仍需努力啊。 核心概念 Broker Kafka集…
大数据与分布式
我们可以使用两种方法创建RDD: 1.读取一个外部的数据集，或在驱动器程序里分发驱动器程序中的对象集合。RDD创建之后，其支持两种类型的操作：转换操作（transformation）、行动操作（action）。转换操作会…
前言 之前看了一些招收数据挖掘，机器学习的岗位招聘信息，感觉有些硬性要求自己还差的好远，譬如掌握spark，kafka，Hadoop，hive等。所以革命道路艰且长，同志仍需努力啊。 核心概念 Broker Kafka集…