Mapper-ի ելքը (միջանկյալ տվյալներ) պահվում է Տեղական ֆայլային համակարգում (ոչ HDFS) յուրաքանչյուր առանձին քարտեզագրողի տվյալների հանգույցներում: Սա սովորաբար ժամանակավոր գրացուցակ է, որը կարող է կազմաձևվել Hadoop ադմինիստրատորի կողմից:
Որտե՞ղ է MapReduce միջանկյալ տվյալները:
- Քարտեզագրողի ելքը (միջանկյալ տվյալները) պահվում է յուրաքանչյուր առանձին քարտեզագրող հանգույցի Տեղական ֆայլային համակարգում (ՈՉ HDFS): …
- կարծում եմ, սա այն պարամետրն է, որը պետք է փոփոխվի՝ միջանկյալ տվյալների գտնվելու վայրը փոխելու համար:
- mapreduce.cluster.local.dir.
- Հուսով եմ, որ սա կօգնի:
Որտե՞ղ է պահվում քարտեզագրողի ելքը:
9) Որտե՞ղ է պահվում Mapper-ի ելքը: Քարտեզագրողի ելքի միջանկյալ հիմնական արժեքի տվյալները կպահվեն քարտեզագրող հանգույցների տեղական ֆայլային համակարգում: Այս գրացուցակի գտնվելու վայրը սահմանված է կազմաձևման ֆայլում Hadoop ադմինիստրատորի կողմից:
Ի՞նչ են միջանկյալ տվյալները MapReduce-ում:
Տվյալների միջանկյալ ֆայլերը ստեղծվում են քարտեզի միջոցով և նվազեցնում են առաջադրանքները տեղային սկավառակի գրացուցակում (տեղանքում): … Քարտեզի առաջադրանքների կողմից ստեղծված ելքային ֆայլեր, որոնք ծառայում են որպես կրճատման առաջադրանքների մուտքագրում: Ժամանակավոր ֆայլեր, որոնք ստեղծվել են կրճատման առաջադրանքների արդյունքում:
Որտե՞ղ է քարտեզագրողի ելքը գրված Hadoop-ում:
Hadoop-ում Mapper-ի ելքը պահվում է տեղական սկավառակի վրա, քանի որ այն միջանկյալ ելք է: Միջանկյալ տվյալների պահպանման կարիք չկաHDFS-ի վրա, քանի որ. տվյալների գրելը ծախսատար է և ներառում է կրկնօրինակում, որն էլ ավելի է մեծացնում ծախսերի արժեքը և ժամանակը:
