文章目录 一、提出问题二、解决问题（一）添加IP到主机名的映射（二）在本地准备Spark库文件（三）在IDEA里创建Scala项目（四）添加Spark库文件到项目（五）创建自定义分区器（六）测试自定义分区器 三、打包上传，提交运行（一）新建测试自定义分区器类（二）利用IDEA将项目

运行在大量廉价商用机器上：硬件错误是常态，提供容错机制简单一致性模型：一次写入多次读取，支持追加，不允许修改，保证数据一致性流式数据访问：批量读而非随机读，关注吞吐量而非时间存储大规模数据集：典型文件大

一.samba提供cifs协议实现共享文件（主要用户Windows与Linux的网络文件系统） 1.SMB文件共享，通用Internal文件系统（CIFS）也称为服务器信息块（SMB），是适用于Microsoft Windows服务器和客户端的标准文件和打印机共享系