前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >hadoop报错总结01

hadoop报错总结01

作者头像
Dlimeng
发布2023-06-29 14:55:09
1360
发布2023-06-29 14:55:09
举报
文章被收录于专栏:开源心路开源心路

1.进行矩阵计算的时候,由于持续时间长,往往会出现超时的错误,错误内容如下: INFO mapreduce.Job: Task Id : attempt_1422500209602_0008_m_000000_0, Status : FAILED

AttemptID:attempt_1422500209602_0008_m_000000_0 Timed out after 600 secs

有两种办法可以修复

1)解决办法是在代码中定时report  context.progress();

2)in mapred-site.xml添加或者修改

 mapred.task.timeout

  1800000

2.You have an error in your SQL syntax; check the manual that corresponds to your MySQL serv

er version for the right syntax to use near 'OPTION SQL_SELECT_LIMIT=DEFAULT' at line 1

Mysql-connector-java.jar版本太低,方法不支持

3.Current usage: 280.1 MB of 1 GB physical memory used; 2.7 GB of 2.1 GB virtual me

mory used. Killing container.

清除jvm

Jvm分配情况,清除mapred-site.xml配置

<property>

   <name>mapred.child.java.opts</name>

   <value>-Xmx1024m</value>

 </property>

这个配置影响

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2017-11-27,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
云数据库 MySQL
腾讯云数据库 MySQL(TencentDB for MySQL)为用户提供安全可靠,性能卓越、易于维护的企业级云数据库服务。其具备6大企业级特性,包括企业级定制内核、企业级高可用、企业级高可靠、企业级安全、企业级扩展以及企业级智能运维。通过使用腾讯云数据库 MySQL,可实现分钟级别的数据库部署、弹性扩展以及全自动化的运维管理,不仅经济实惠,而且稳定可靠,易于运维。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档