网站建设过程报告,好看的企业网站,一个网站多个域名备案,网站建设公司问答营销案例用sqoop从HDFS导出数据到mysql#xff0c;一直卡在Running job: job_1571036741208_0010#xff0c;应该是内存太小#xff0c;导致速度太慢 在 yarn-site-xml中增加下面两个#xff0c;然后分发给各个节点#xff0c;再重启yarn即可 property nameya…用sqoop从HDFS导出数据到mysql一直卡在Running job: job_1571036741208_0010应该是内存太小导致速度太慢 在 yarn-site-xml中增加下面两个然后分发给各个节点再重启yarn即可 property nameyarn.nodemanager.resource.memory-mb/name value20480/value discription每个节点可用内存,单位MB/discription/property property nameyarn.scheduler.minimum-allocation-mb/name value2048/value discription单个任务可申请最少内存默认1024MB/discription /property 到map 100% reduce 0%不动了 内存大了以后这里应该是数据有问题要不然就是建表有问题就是数据和表结构或编码冲突 长度溢出导入的数据超过mysql表的字段长度 主键重复 因为数据中有重复的主键的值主键不能重复 等