分类 Big Data 下的文章

  1. 首页
  2. Big Data

Python 执行 Hadoop MapReduce

使用python来执行MapReduce任务，由如下步骤组成1 配置mapred-site.xml首先通...

  • admin
  • 2021 年 08 月 26 日
  • 暂无评论
    •

    Python 操作Hive

    PyHive可以比较方便的操作Hive，但安装的时候需要注意一下，大概步骤如下：1 安装PyHive安装...

  • admin
  • 2021 年 08 月 25 日
  • 暂无评论
    •

    Python HDFS操作

    使用Python操作HDFS，可以使用hdfs库。操作中需要用到iris.csv文件。安装首先安装hdf...

  • admin
  • 2021 年 08 月 25 日
  • 暂无评论
    •

    Spark学习记录5：PySpark MLlib 建模

    这篇文章记录的是使用PySpark调用Spark MLib的Decision Tree在 KDD Cup...

  • admin
  • 2021 年 07 月 14 日
  • 暂无评论
    •

    Spark学习记录4：PySpark 常规操作大全

    WordCountWordCount基础首先来看一个WordCount的例子假设有个words.txt文...

  • admin
  • 2021 年 07 月 14 日
  • 暂无评论