百木园-与人分享,
就是让自己快乐。

安装Spark与Python练习

一、安装Spark

  1. 检查基础环境hadoop,jdk
  2. 下载spark
  3. 解压,文件夹重命名、权限
  4. 配置文件
  5. 环境变量
  6. 试运行Python代码

    二、Python编程练习:英文文本的词频统计

    1. 准备文本文件
    2. 读文件
    3. 预处理:大小写,标点符号,停用词
    4. 分词
    5. 统计每个单词出现的次数
    6. 按词频大小排序
    7. 结果写文件

     


来源:https://www.cnblogs.com/yangliangzai/p/15954433.html
本站部分图文来源于网络,如有侵权请联系删除。

未经允许不得转载:百木园 » 安装Spark与Python练习

相关推荐

  • 暂无文章