idp專項測試卷含答案

idp專項測試卷含答案1.以下哪些權(quán)限可以在權(quán)限中心申請交互查詢權(quán)限(正確答案)庫表讀寫權(quán)限(正確答案)創(chuàng)建臨時函數(shù)權(quán)限(正確答案)超20w下載權(quán)限任務(wù)主題(正確答案)任務(wù)類型(正確答案)資源分類(正確答案)導(dǎo)數(shù)申請(正確答案)2.下面數(shù)據(jù)庫表申請說法錯誤的是a、任何數(shù)據(jù)庫表都可以申請讀寫(正確答案)b、一次性申請幾百個庫表，不管用不用先申請再說(正確答案)c、建表權(quán)限任何人都可以申請(正確答案)d、臨時函數(shù)每次都要申請(正確答案)e、hll_庫表任何人都可以修改讀寫(正確答案)3.如果數(shù)據(jù)庫申請沒有想要的數(shù)據(jù)內(nèi)容，下面的流程正確的是a.先了解對應(yīng)業(yè)務(wù)目前數(shù)據(jù)的來源和存放地方(正確答案)b.直接找數(shù)據(jù)倉庫提供數(shù)據(jù)c.了解業(yè)務(wù)數(shù)據(jù)類型，在導(dǎo)數(shù)申請模塊中，按照對應(yīng)的數(shù)據(jù)類型提供數(shù)據(jù)庫表(正確答案)d.請教數(shù)倉同事了解數(shù)據(jù)更新時間節(jié)點(正確答案)4.線上申請審批中，下面說法正確的是a、工作需要用的系統(tǒng)功能，提前申請，準(zhǔn)備(正確答案)b、發(fā)起了一項申請，馬上就找審批人處理c、提前溝通了解對應(yīng)系統(tǒng)的功能用途，有針對的申請使用(正確答案)d、遇到?jīng)]有權(quán)限的情況下，先群里找個人溝通開通5.下面哪個是大數(shù)據(jù)系統(tǒng)權(quán)限申請入口c、b、a、(正確答案)d、6.新建任務(wù)時，資源分類該如何選擇A.隨意選擇，不講究B.選擇與自己的業(yè)務(wù)需求對應(yīng)的資源分類(正確答案)C.選擇資源最充足的7.新建任務(wù)時，什么是自依賴A.自依賴時，任務(wù)會按實例數(shù)據(jù)時間依次運(yùn)行(正確答案)B.自依賴時，任務(wù)會在設(shè)置的并發(fā)度范圍內(nèi)同時運(yùn)行8.以下字段，哪些不能作為hive建表字段A:date、day、order、sort(正確答案)B:like、drop、data(正確答案)C:user、use、create(正確答案)D:what、why、how9.如果需要使用hive中的保留字段建表，該如何操作A:可以替換非保留字段建表(正確答案)B:直接使用建表C:加上下劃線前綴或后綴D:使用`字段名`建表(正確答案)10.在BigQuery中能夠運(yùn)行的任務(wù)，在BQTask中就會報錯或數(shù)據(jù)不對的原因可能是A:可能存在特殊字符，沒有使用轉(zhuǎn)義符號(正確答案)B:select的字段只能是：中英文字符、非數(shù)字開頭、符號只支持下劃線(正確答案)C:直接找平臺或值班同學(xué)解決問題D:可能是平臺資源不足或運(yùn)氣不好，一會兒再試試11.BQTask的SQL腳本，下面哪些命名字段不會導(dǎo)致任務(wù)失敗A.數(shù)字開頭的B.中英文字符(正確答案)C.非數(shù)字開頭的(正確答案)D.包含下劃線的(正確答案)E.包含特殊字符的12.如何在BigQuery中高效的下載數(shù)據(jù)A:直接運(yùn)行select語句后，點擊下載更多按鈕B:先勾選預(yù)下載按鈕，再運(yùn)行select語句后，點擊下載按鈕(正確答案)C:如果只是對數(shù)據(jù)進(jìn)行簡單驗證，可以選擇下載“當(dāng)前”500條數(shù)據(jù)(正確答案)D:點擊下載更多的“開始下載”按鈕后，可以并閉頁面，稍候再回來下載13.多條sql一起運(yùn)行，勾選預(yù)下載后，如何生效A:全選所有sql，點擊運(yùn)行B:選擇最后一條sql，點擊運(yùn)行C:隨便怎么執(zhí)行，都是可以的，沒這么多講究D:先選擇運(yùn)行前面幾行sql，勾選預(yù)下載后，再運(yùn)行最后的select語句(正確答案)14.天任務(wù)凍結(jié)超過1個月以上，需要重新運(yùn)行最近1天任務(wù)，該如何處理？A.直接解凍，會補(bǔ)錄很多個實例，依次運(yùn)行，占用大量資源B.復(fù)制一個任務(wù)，補(bǔ)錄最近1天的實例運(yùn)行(正確答案)15.創(chuàng)建天任務(wù)時搜索不到指定依賴任務(wù)可能的原因：任務(wù)不存在(正確答案)沒有該任務(wù)主題權(quán)限(正確答案)搜索的任務(wù)為周任務(wù)或月任務(wù)(正確答案)16.任務(wù)一直處于就緒狀態(tài)直接在答疑群尋求幫助點擊診斷按鈕(正確答案)17.關(guān)于日志以下說法正確的是業(yè)務(wù)日志是實例運(yùn)行的詳細(xì)日志，可以看出實例的運(yùn)行細(xì)節(jié)(正確答案)系統(tǒng)日志可以看到實例的運(yùn)行時間，運(yùn)行次數(shù)，所在服務(wù)器，以及簡化的報錯/成功描述信息(正確答案)Yarn資源日志可以看到通過Yarn調(diào)度的任務(wù)實例在Yarn上運(yùn)行的Application記錄(正確答案)一般在業(yè)務(wù)日志中debug實例失敗的原因(正確答案)18.查詢某個字段是否包含{符號，在BigQuery中語法是rlike'\\{'，在HiveTask中下面語法正確的是rlike'\\{'rlike'\\\\{'rlike'\\\\\\{'(正確答案)rlike'\\\\\\\\{'19.BigQuery查詢遇到報錯，效率最高的解決辦法是？A.馬上到答疑群里發(fā)問等閑著沒事想答疑的同事來解答B(yǎng).把報錯那一行截圖到群里@當(dāng)天值班同學(xué)來康康C.查看幫助文檔是否有對應(yīng)報錯的解決辦法，如果沒有，發(fā)送具體的SQL/任務(wù)ID及報錯詳細(xì)堆棧到群里詢問值班同學(xué)(正確答案)D.可能運(yùn)氣不好，等下再試試20.關(guān)于IDP/BigQuery，以下說法錯誤的是：A.BQ的執(zhí)行歷史不會存結(jié)果，只會存最近40條查詢SQLB.只要我的代碼沒改，前幾天運(yùn)行正常的任務(wù)今天也肯定會正常(正確答案)C.IDP/BQ應(yīng)當(dāng)使用自己所在部門的隊列D.不再需要使用的任務(wù)應(yīng)當(dāng)及時凍結(jié)21.下面哪種想法是錯誤的：A.同事的優(yōu)化參數(shù)把跑數(shù)時間減少了90%，我也Copy來用(正確答案)B.我把這個hll_開頭的表drop了再重建應(yīng)該沒問題(正確答案)C.周五早上跑不出來數(shù)先去群里反饋一波(正確答案)D.selectcount(*)from埋點表wheredt<'2020-10-01'(正確答案)22.在BigQuery查詢時，報以下錯誤時該如何處理？

Queriesagainstpartitionedtableswithoutapartitionfilteraredisabledforsafetyreasons.Ifyouknowwhatyouaredoing,pleasesethive.strict.checks.no.partition.filtertofalseandmakesurethathive.mapred.modeisnotsetto'strict'toproceed....sethive.strict.checks.no.partition.filter=falsesethive.mapred.mode=nonstrictshowpartitions查看分區(qū)后，在原有sql上增加分區(qū)條件(正確答案)23.數(shù)據(jù)傾斜、內(nèi)存溢出時（日志中出現(xiàn)OutOfMemoryError:Javaheapspace），以下做法正確是：百度各種設(shè)置參數(shù)set一下把任務(wù)進(jìn)行拆分，使用createtemporarytablexxxxas+select建立臨時表，分步運(yùn)行(正確答案)分清join和leftjoin的區(qū)別，如非必要，使用join進(jìn)行關(guān)聯(lián)(正確答案)去掉代碼中Unionall和withas建表語句，使用createtemporarytable(正確答案)程序中on、group、row_number的key有大量重復(fù)值，可以先進(jìn)行過濾臟數(shù)據(jù)或單獨處理（對key進(jìn)行g(shù)roupby計數(shù)并排序，找到大量重復(fù)值），再進(jìn)行on、group、row_number操作(正確答案)24.Hive表為什么要分區(qū)？A.合理存儲空間(正確答案)B.減少掃描文件數(shù)(正確答案)C.優(yōu)化查詢計劃(正確答案)D.支撐各種數(shù)倉模型25.以下Hivesql語法正確的是select*fromajoinbona.id<>b.idselectsum(a.amt)astotalfromawherea.total>20select*fromajoinbona.id=b.id(正確答案)26.關(guān)于Hive建表基本操作描述正確的是？創(chuàng)建外部表時需要指定external關(guān)鍵字(正確答案)一旦表創(chuàng)建好，不可再修改表名一旦表創(chuàng)建好，不可再修改列名一旦表創(chuàng)建好，不可再增加新列27.有關(guān)Hive中ORDERBY和SORTBY用法正確的是SORTBY用于分組匯總SORTBY用于局部排序，ORDERBY用于全局排序(正確答案)使用完全一致其他說法都不對28.Hive中concat函數(shù)的作用是是將傳入的參數(shù)連接成為一個字符串，則concat('a',null,'b')的結(jié)果是ababNULL(正確答案)29.以下關(guān)于Hive基本操作描述正確的是創(chuàng)建外部表使用external關(guān)鍵字，創(chuàng)建普通表需要指定internal關(guān)鍵字創(chuàng)建外部表必須要指定location信息(正確答案)加載數(shù)據(jù)到Hive時源數(shù)據(jù)必須是HDFS的一個路徑分區(qū)可以在創(chuàng)建表時指定也可在創(chuàng)建表后通過Alter命令添加分區(qū)30.下面關(guān)于IDP小工具EXCEL上傳說法正確的是文件必須為.xlsx格式(正確答案)文件可以有多個Sheet文件大小不得大于300MB。(正確答案)Excel文件中可以使用特殊的函數(shù)和存在鏈接樣式等其它宏用法。31.Hive中sql運(yùn)算出現(xiàn)傾斜的情況，主要的原因有哪些?（）沒加索引業(yè)務(wù)數(shù)據(jù)本身的特性(正確答案)key分布不均勻(正確答案)某些sql本身就有數(shù)據(jù)傾斜(正確答案)32.在IDP中以下時間戳轉(zhuǎn)換函數(shù)使用方式正確的是from_unixtime(1601365665-8*60*60,'yyyy-MM-ddHH:mm:ss')from_unixtime(1601365665+8*