当前位置: 首页 > news >正文

购买域名后 可以做网站么seo提高网站排名

购买域名后 可以做网站么,seo提高网站排名,网站风格的设计,asp网站源码免费下载Job那块的断点代码截图省略,直接进入切片逻辑 参考:Hadoop3:MapReduce源码解读之Map阶段的Job任务提交流程(1) 6、CombineFileInputFormat原理解析 类的继承关系 与TextInputFormat切片机制的区别 框架默认的TextI…

Job那块的断点代码截图省略,直接进入切片逻辑
参考:Hadoop3:MapReduce源码解读之Map阶段的Job任务提交流程(1)

6、CombineFileInputFormat原理解析

类的继承关系
在这里插入图片描述
TextInputFormat切片机制的区别

框架默认的TextInputFormat切片机制是对任务按文件规划切片,不管文件多小,都会是一个单独的切片,都会交给一个MapTask,这样如果有大量小文件,就会产生大量的MapTask,处理效率极其低下。
CombineTextInputFormat用于小文件过多的场景,它可以将多个小文件从逻辑上规划到一个切片中,这样,多个小文件就可以交给一个MapTask处理。

所以,这个切片机制是针对处理大量小文件的,效率比TextInputFormat更高。

切片过程说明
生成切片过程包括:虚拟存储过程和切片过程二部分。
在这里插入图片描述
注意
当剩余数据大小超过设置的最大值且不大于最大值2倍,此时将文件均分成2个虚拟存储块(防止出现太小切片)。
例如setMaxInputSplitSize值为4M,输入文件大小为8.02M,则先逻辑上分成一个4M。剩余的大小为4.02M,如果按照4M逻辑划分,就会出现0.02M的小的虚拟存储文件,所以将剩余的4.02M文件切分成(2.01M和2.01M)两个文件。

案例

准备4个文件
在这里插入图片描述
依然用wordcount案例进行演练
指定文件路径和切片类CombineFileInputFormat

		// 如果不设置InputFormat,它默认用的是TextInputFormat.classjob.setInputFormatClass(CombineTextInputFormat.class);//虚拟存储切片最大值设置4mCombineTextInputFormat.setMaxInputSplitSize(job, 4194304);

在这里插入图片描述

查看执行日志:
number of splits:3
在这里插入图片描述
所以,对应的MapTask线程数量就是3个,Reducer线程数是1个。

http://www.bjxfkj.com.cn/article/105310.html

相关文章:

  • 乐陵建设网站营销助手
  • 成都那家网站做的好新浪博客
  • 企业做网站要谷歌首页
  • 佛山公司网站建设企业网站建设报价
  • 做商城网站公司免费seo排名网站
  • 徽章设计制作小程序seod的中文意思
  • 手机app开发工具中文版北京优化网站建设
  • 北京市门户网站比百度强大的搜索引擎
  • wordpress 无广告视频插件下载网站seo推广招聘
  • 电商网站开发教材上海网络推广公司
  • 专做女鞋的网站网络营销课程总结
  • 郑州网站seo诊断小程序开发教程
  • 网站开发设计合同广州头条今日头条新闻
  • 龙湾建设局网站windows优化大师提供的
  • 公司网站开发维护今天新闻最新消息
  • 高邮企业网站建设公司哪家便宜推广引流渠道平台
  • 高端网站建设公司兴田德润可以不樱花12e56
  • 网站因为备案关闭了 怎么办百度seo推广
  • 网站建设开票开什么内容百度 营销怎么收费
  • 张家口网站建设电话怎么做公司网页
  • 谷歌网站入口东莞百度推广排名
  • 营销型外贸网站电商培训
  • 如何查看网站用什么代码做的把百度网址大全设为首页
  • 搭建一个网站教程网站快速被百度收录
  • 网站建设公司提成做企业网站哪个平台好
  • 建各公司网站要多少钱杭州千锋教育地址
  • php网站开发第三章百度seo关键词优化排行
  • 吴谨含厂家不愿做网站站长工具网站备案查询
  • 北京市教学名师奖建设项目网站获客渠道有哪些
  • sql注入网站源码湖南seo服务电话