從阿里巴巴筆試試題看資料分析師的職業要求
一、異常值是指什麼?請列舉1種識別連續型變數異常值的方法?
異常值(Outlier) 是指樣本中的個別值,其數值明顯偏離所屬樣本的其餘觀測值。在數理統計裡一般是指一組觀測值中與平均值的偏差超過兩倍標準差的測定值。
Grubbs’ test(是以Frank E. Grubbs命名的),又叫maximum normed residual test,是一種用於單變數資料集異常值識別的統計檢測,它假定資料集來自正態分佈的總體。
未知總體標準差σ,在五種檢驗法中,優劣次序為:t檢驗法、格拉布斯檢驗法、峰度檢驗法、狄克遜檢驗法、偏度檢驗法。
點評:考察的內容是統計學基礎功底。
二、什麼是聚類分析?聚類演算法有哪幾種?請選擇一種詳細描述其計算原理和步驟。
聚類分析(cluster analysis)是一組將研究物件分為相對同質的群組(clusters)的統計分析技術。 聚類分析也叫分類分析(classification analysis)或數值分類(numerical taxonomy)。聚類與分類的不同在於,聚類所要求劃分的類是未知的。
聚類分析計算方法主要有: 層次的方法(hierarchical method)、劃分方法(partitioning method)、基於密度的方法(density-based method)、基於網格的方法(grid-based method)、基於模型的方法(model-based method)等。其中,前兩種演算法是利用統計學定義的距離進行度量。
k-means 演算法的工作過程說明如下:首先從n個資料物件任意選擇 k 個物件作為初始聚類中心;而對於所剩下其它物件,則根據它們與這些聚類中心的相似度(距離),分別將它們分配給與其最相似的(聚類中心所代表的)聚類;然 後再計算每個所獲新聚類的聚類中心(該聚類中所有物件的均值);不斷重複這一過程直到標準測度函式開始收斂為止。一般都採用均方差作為標準測度函式. k個聚類具有以下特點:各聚類本身儘可能的緊湊,而各聚類之間儘可能的分開。
其流程如下:
(1)從 n個資料物件任意選擇 k 個物件作為初始聚類中心;
(2)根據每個聚類物件的均值(中心物件),計算每個物件與這些中心物件的距離;並根據最小距離重新對相應物件進行劃分;
(3)重新計算每個(有變化)聚類的均值(中心物件);
(4)迴圈(2)、(3)直到每個聚類不再發生變化為止(標準測量函式收斂)。
優點:本演算法確定的K 個劃分到達平方誤差最小。當聚類是密集的,且類與類之間區別明顯時,效果較好。對於處理大資料集,這個演算法是相對可伸縮和高效的,計算的複雜度為 O(NKt),其中N是資料物件的數目,t是迭代的次數。一般來說,K<
缺點:1. K 是事先給定的,但非常難以選定;2. 初始聚類中心的選擇對聚類結果有較大的影響。
點評:考察的內容是常用資料分析方法,做資料分析一定要理解資料分析演算法、應用場景、使用過程、以及優缺點。
三、根據要求寫出SQL
表A結構如下:
Member_ID(使用者的ID,字元型)
Log_time(使用者訪問頁面時間,日期型(只有一天的資料))
URL(訪問的頁面地址,字元型)
要求:提取出每個使用者訪問的第一個URL(按時間最早),形成一個新表(新表名為B,表結構和表A一致)
createtable B asselectMember_ID, min(Log_time), URL from Agroup byMember_ID ;
點評:SQL語句,簡單的資料獲取能力,包括表查詢、關聯、彙總、函式等。
另外,這個答案其實是不對的,實現有很多方法,任由大家去發揮吧。
四、銷售資料分析
以下是一家B2C電子商務網站的一週銷售資料,該網站主要使用者群是辦公室女性,銷售額主要集中在5種產品上,如果你是這家公司的分析師,
a) 從資料中,你看到了什麼問題?你覺得背後的原因是什麼?
b) 如果你的老闆要求你提出一個運營改進計劃,你會怎麼做?
表如下:一組每天某網站的銷售資料
作者:大資料首席資料師
連結:
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/3486/viewspace-2815224/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 阿里巴巴筆試題阿里筆試
- 阿里巴巴公司DBA筆試題阿里筆試
- SQL實戰-資料分析師-筆試面試-每日一練SQL筆試面試
- 資料結構考試大綱要求資料結構
- 資料探勘面試筆試題(附答案)面試筆試
- Oracle資料庫筆試題(附答案)Oracle資料庫筆試
- 從執行到專家 詳解資料分析師的職業層級劃分
- 資料分析師職業生涯規劃與等級
- 從一道筆試題題說起筆試
- 資料結構連結串列筆試題資料結構筆試
- 據說是阿里巴巴公司DBA筆試題(zt)阿里筆試
- 作業系統筆試、面試題作業系統筆試面試題
- 資料庫試題資料庫
- 未來最具發展潛力的職業——大資料分析師大資料
- 資料庫筆試面試題庫(Oracle、MySQL等)資料庫筆試面試題OracleMySql
- 測試筆試多選題筆試
- 軟體測試筆試題筆試
- Reddit網友談資料分析師和資料科學家的職業區別資料科學
- 筆試題目——研發工程師筆試題筆試工程師
- DBA筆試試題-考試認證(zt)筆試
- 從測試資料來看Node.js和Java EE的效能區別Node.jsJava
- 騰訊筆試題筆試
- java筆試題Java筆試
- shell 筆試題筆試
- SQL 筆試題SQL筆試
- 寫給自己看的面試題整理-演算法&某東筆試題面試題演算法筆試
- 資料結構(筆試題-棧(入棧出棧)資料結構筆試
- 阿里巴巴的Oracle DBA筆試題參考答案 - SQL tuning類阿里Oracle筆試SQL
- 軟體測試職業規劃
- 找工作學習筆記2------阿里巴巴實習生筆試題(含答案)筆記阿里筆試
- 易學筆記-系統分析師考試-第5章 資料庫系統/5.1 資料庫模式/筆記資料庫模式
- 測試筆試邏輯思維題筆試
- 想要企業資料變現?何不試試企業雲盤
- 騰訊筆試題集筆試
- php筆試題gtalentPHP筆試
- IT公司筆試題(四)筆試
- c++筆試題C++筆試
- SXF科技筆試題筆試