You are viewing a plain text version of this content. The canonical link for it is here.
Posted to hdfs-user@hadoop.apache.org by "Kartashov, Andy" <An...@mpac.ca> on 2012/10/31 22:05:34 UTC
property mapred.tasktracker.map.tasks.maximum
Guys,
Do you set the above property once on the master NN in in mapred-site.xml or on each DN/TTs.
Similarly, what about property: mapred.child.java.opts. Once on NN or each and every DN/TaskTrackers?
NOTICE: This e-mail message and any attachments are confidential, subject to copyright and may be privileged. Any unauthorized use, copying or disclosure is prohibited. If you are not the intended recipient, please delete and contact the sender immediately. Please consider the environment before printing this e-mail. AVIS : le présent courriel et toute pièce jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur et peuvent être couverts par le secret professionnel. Toute utilisation, copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le destinataire prévu de ce courriel, supprimez-le et contactez immédiatement l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent courriel
Re: property mapred.tasktracker.map.tasks.maximum
Posted by Harsh J <ha...@cloudera.com>.
Anil is correct:
mapred.tasktracker.{map,reduce}.tasks.maximum == TaskTracker Service
Property. Applies via mapred-site.xml at each TT.
mapred.child.java.opts == Per-Job Overridable Property. Applies via
mapred-site.xml at each client, or via code (JobConf, Job, etc.).
On Thu, Nov 1, 2012 at 3:53 AM, anil gupta <an...@gmail.com> wrote:
> Hi Andy,
>
> This property is related to MR so it has got nothing to do with NN. You need
> to put it on each TT.
>
> HTH,
> Anil
>
> On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>
> wrote:
>>
>> Guys,
>>
>> Do you set the above property once on the master NN in in mapred-site.xml
>> or on each DN/TTs.
>>
>> Similarly, what about property: mapred.child.java.opts. Once on NN or each
>> and every DN/TaskTrackers?
>> NOTICE: This e-mail message and any attachments are confidential, subject
>> to copyright and may be privileged. Any unauthorized use, copying or
>> disclosure is prohibited. If you are not the intended recipient, please
>> delete and contact the sender immediately. Please consider the environment
>> before printing this e-mail. AVIS : le présent courriel et toute pièce
>> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
>> et peuvent être couverts par le secret professionnel. Toute utilisation,
>> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
>> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
>> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
>> courriel
>
>
>
>
> --
> Thanks & Regards,
> Anil Gupta
--
Harsh J
Re: property mapred.tasktracker.map.tasks.maximum
Posted by Harsh J <ha...@cloudera.com>.
Anil is correct:
mapred.tasktracker.{map,reduce}.tasks.maximum == TaskTracker Service
Property. Applies via mapred-site.xml at each TT.
mapred.child.java.opts == Per-Job Overridable Property. Applies via
mapred-site.xml at each client, or via code (JobConf, Job, etc.).
On Thu, Nov 1, 2012 at 3:53 AM, anil gupta <an...@gmail.com> wrote:
> Hi Andy,
>
> This property is related to MR so it has got nothing to do with NN. You need
> to put it on each TT.
>
> HTH,
> Anil
>
> On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>
> wrote:
>>
>> Guys,
>>
>> Do you set the above property once on the master NN in in mapred-site.xml
>> or on each DN/TTs.
>>
>> Similarly, what about property: mapred.child.java.opts. Once on NN or each
>> and every DN/TaskTrackers?
>> NOTICE: This e-mail message and any attachments are confidential, subject
>> to copyright and may be privileged. Any unauthorized use, copying or
>> disclosure is prohibited. If you are not the intended recipient, please
>> delete and contact the sender immediately. Please consider the environment
>> before printing this e-mail. AVIS : le présent courriel et toute pièce
>> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
>> et peuvent être couverts par le secret professionnel. Toute utilisation,
>> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
>> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
>> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
>> courriel
>
>
>
>
> --
> Thanks & Regards,
> Anil Gupta
--
Harsh J
Re: property mapred.tasktracker.map.tasks.maximum
Posted by Harsh J <ha...@cloudera.com>.
Anil is correct:
mapred.tasktracker.{map,reduce}.tasks.maximum == TaskTracker Service
Property. Applies via mapred-site.xml at each TT.
mapred.child.java.opts == Per-Job Overridable Property. Applies via
mapred-site.xml at each client, or via code (JobConf, Job, etc.).
On Thu, Nov 1, 2012 at 3:53 AM, anil gupta <an...@gmail.com> wrote:
> Hi Andy,
>
> This property is related to MR so it has got nothing to do with NN. You need
> to put it on each TT.
>
> HTH,
> Anil
>
> On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>
> wrote:
>>
>> Guys,
>>
>> Do you set the above property once on the master NN in in mapred-site.xml
>> or on each DN/TTs.
>>
>> Similarly, what about property: mapred.child.java.opts. Once on NN or each
>> and every DN/TaskTrackers?
>> NOTICE: This e-mail message and any attachments are confidential, subject
>> to copyright and may be privileged. Any unauthorized use, copying or
>> disclosure is prohibited. If you are not the intended recipient, please
>> delete and contact the sender immediately. Please consider the environment
>> before printing this e-mail. AVIS : le présent courriel et toute pièce
>> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
>> et peuvent être couverts par le secret professionnel. Toute utilisation,
>> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
>> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
>> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
>> courriel
>
>
>
>
> --
> Thanks & Regards,
> Anil Gupta
--
Harsh J
Re: property mapred.tasktracker.map.tasks.maximum
Posted by Harsh J <ha...@cloudera.com>.
Anil is correct:
mapred.tasktracker.{map,reduce}.tasks.maximum == TaskTracker Service
Property. Applies via mapred-site.xml at each TT.
mapred.child.java.opts == Per-Job Overridable Property. Applies via
mapred-site.xml at each client, or via code (JobConf, Job, etc.).
On Thu, Nov 1, 2012 at 3:53 AM, anil gupta <an...@gmail.com> wrote:
> Hi Andy,
>
> This property is related to MR so it has got nothing to do with NN. You need
> to put it on each TT.
>
> HTH,
> Anil
>
> On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>
> wrote:
>>
>> Guys,
>>
>> Do you set the above property once on the master NN in in mapred-site.xml
>> or on each DN/TTs.
>>
>> Similarly, what about property: mapred.child.java.opts. Once on NN or each
>> and every DN/TaskTrackers?
>> NOTICE: This e-mail message and any attachments are confidential, subject
>> to copyright and may be privileged. Any unauthorized use, copying or
>> disclosure is prohibited. If you are not the intended recipient, please
>> delete and contact the sender immediately. Please consider the environment
>> before printing this e-mail. AVIS : le présent courriel et toute pièce
>> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
>> et peuvent être couverts par le secret professionnel. Toute utilisation,
>> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
>> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
>> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
>> courriel
>
>
>
>
> --
> Thanks & Regards,
> Anil Gupta
--
Harsh J
Re: property mapred.tasktracker.map.tasks.maximum
Posted by anil gupta <an...@gmail.com>.
Hi Andy,
This property is related to MR so it has got nothing to do with NN. You
need to put it on each TT.
HTH,
Anil
On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>wrote:
> Guys,
>
> Do you set the above property once on the master NN in in mapred-site.xml
> or on each DN/TTs.
>
> Similarly, what about property: mapred.child.java.opts. Once on NN or each
> and every DN/TaskTrackers?
> NOTICE: This e-mail message and any attachments are confidential, subject
> to copyright and may be privileged. Any unauthorized use, copying or
> disclosure is prohibited. If you are not the intended recipient, please
> delete and contact the sender immediately. Please consider the environment
> before printing this e-mail. AVIS : le présent courriel et toute pièce
> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
> et peuvent être couverts par le secret professionnel. Toute utilisation,
> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
> courriel
>
--
Thanks & Regards,
Anil Gupta
Re: property mapred.tasktracker.map.tasks.maximum
Posted by anil gupta <an...@gmail.com>.
Hi Andy,
This property is related to MR so it has got nothing to do with NN. You
need to put it on each TT.
HTH,
Anil
On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>wrote:
> Guys,
>
> Do you set the above property once on the master NN in in mapred-site.xml
> or on each DN/TTs.
>
> Similarly, what about property: mapred.child.java.opts. Once on NN or each
> and every DN/TaskTrackers?
> NOTICE: This e-mail message and any attachments are confidential, subject
> to copyright and may be privileged. Any unauthorized use, copying or
> disclosure is prohibited. If you are not the intended recipient, please
> delete and contact the sender immediately. Please consider the environment
> before printing this e-mail. AVIS : le présent courriel et toute pièce
> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
> et peuvent être couverts par le secret professionnel. Toute utilisation,
> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
> courriel
>
--
Thanks & Regards,
Anil Gupta
Re: property mapred.tasktracker.map.tasks.maximum
Posted by anil gupta <an...@gmail.com>.
Hi Andy,
This property is related to MR so it has got nothing to do with NN. You
need to put it on each TT.
HTH,
Anil
On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>wrote:
> Guys,
>
> Do you set the above property once on the master NN in in mapred-site.xml
> or on each DN/TTs.
>
> Similarly, what about property: mapred.child.java.opts. Once on NN or each
> and every DN/TaskTrackers?
> NOTICE: This e-mail message and any attachments are confidential, subject
> to copyright and may be privileged. Any unauthorized use, copying or
> disclosure is prohibited. If you are not the intended recipient, please
> delete and contact the sender immediately. Please consider the environment
> before printing this e-mail. AVIS : le présent courriel et toute pièce
> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
> et peuvent être couverts par le secret professionnel. Toute utilisation,
> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
> courriel
>
--
Thanks & Regards,
Anil Gupta
Re: property mapred.tasktracker.map.tasks.maximum
Posted by anil gupta <an...@gmail.com>.
Hi Andy,
This property is related to MR so it has got nothing to do with NN. You
need to put it on each TT.
HTH,
Anil
On Wed, Oct 31, 2012 at 2:05 PM, Kartashov, Andy <An...@mpac.ca>wrote:
> Guys,
>
> Do you set the above property once on the master NN in in mapred-site.xml
> or on each DN/TTs.
>
> Similarly, what about property: mapred.child.java.opts. Once on NN or each
> and every DN/TaskTrackers?
> NOTICE: This e-mail message and any attachments are confidential, subject
> to copyright and may be privileged. Any unauthorized use, copying or
> disclosure is prohibited. If you are not the intended recipient, please
> delete and contact the sender immediately. Please consider the environment
> before printing this e-mail. AVIS : le présent courriel et toute pièce
> jointe qui l'accompagne sont confidentiels, protégés par le droit d'auteur
> et peuvent être couverts par le secret professionnel. Toute utilisation,
> copie ou divulgation non autorisée est interdite. Si vous n'êtes pas le
> destinataire prévu de ce courriel, supprimez-le et contactez immédiatement
> l'expéditeur. Veuillez penser à l'environnement avant d'imprimer le présent
> courriel
>
--
Thanks & Regards,
Anil Gupta