HR大數(shù)據(jù)之?dāng)?shù)據(jù)清洗與數(shù)據(jù)挖掘 ——“人力資源大數(shù)據(jù)實(shí)踐項目”第二課

?智能總結(jié)HR大數(shù)據(jù)之?dāng)?shù)據(jù)清洗與數(shù)據(jù)挖掘 ——“人力資源大數(shù)據(jù)實(shí)踐項目”第二課
2022年3月17日,北京科技大學(xué)經(jīng)濟(jì)管理學(xué)院工商管理系“人力資源大數(shù)據(jù)實(shí)踐項目”開展了第二次課程教學(xué)。按照疫情防控期間相關(guān)要求,本次授課依舊采取騰訊會議的方式進(jìn)行,有幸邀請到新道科技股份有限公司高級講師曹曄進(jìn)行講授。同學(xué)們對曹老師的上課方式已經(jīng)有所熟悉,和著老師的講課節(jié)奏,課程進(jìn)度十分順利。曹老師對同學(xué)們的大數(shù)據(jù)基礎(chǔ)進(jìn)行了摸底測試,緊接著便開始了“干貨”的教學(xué)——數(shù)據(jù)清洗與數(shù)據(jù)挖掘。曹老師從大數(shù)據(jù)來源、數(shù)據(jù)結(jié)構(gòu)類型和一般數(shù)據(jù)收集方法與途徑這三個方面進(jìn)行了講解,并帶領(lǐng)同學(xué)們進(jìn)行了數(shù)據(jù)爬取的實(shí)操。

一、大數(shù)據(jù)來源
曹老師解釋說,關(guān)于大數(shù)據(jù)的來源,從數(shù)據(jù)本體來看分為內(nèi)部來源和外部來源。數(shù)據(jù)內(nèi)部來源有企業(yè)信息管理系統(tǒng),包括人力資源系統(tǒng)、財務(wù)管理系統(tǒng)、客戶關(guān)系管理系統(tǒng)和OA系統(tǒng)——辦公自動化;部門上報數(shù)據(jù),是獲得數(shù)據(jù)的簡易渠道,只需要發(fā)布數(shù)據(jù)需求通知,各分公司或部門就會按照要求填報數(shù)據(jù)上來,收集數(shù)據(jù)的速度較快;內(nèi)部調(diào)查數(shù)據(jù),人力資源部通常會使用問卷調(diào)查來收集所需數(shù)據(jù);物聯(lián)網(wǎng)系統(tǒng),包括智能儀表、智能設(shè)備、視頻監(jiān)控系統(tǒng)等。
數(shù)據(jù)外部系統(tǒng)包括政府公開數(shù)據(jù),這是政府公開信息公開出版的社會經(jīng)濟(jì)數(shù)據(jù),一般通過政府機(jī)構(gòu)網(wǎng)站來獲取數(shù)據(jù),與人力資源相關(guān)的主要是統(tǒng)計局,人社部等官方網(wǎng)站的公開數(shù)據(jù);企業(yè)發(fā)布數(shù)據(jù),通過上市公司發(fā)布的年報,可以獲取一部分可以利用的數(shù)據(jù);人力資源行業(yè)網(wǎng)絡(luò)數(shù)據(jù),包括人力資源行業(yè)商業(yè)調(diào)查數(shù)據(jù)、網(wǎng)絡(luò)招聘平臺發(fā)布的數(shù)據(jù)和線上勞動外包平臺發(fā)布的數(shù)據(jù);公共社交網(wǎng)絡(luò)數(shù)據(jù),包含社交網(wǎng)站發(fā)布的數(shù)據(jù)和在線社區(qū)發(fā)布的數(shù)據(jù)。
二、數(shù)據(jù)結(jié)構(gòu)類型
在數(shù)據(jù)結(jié)構(gòu)類型方面,曹老師介紹了三種數(shù)據(jù)結(jié)構(gòu):結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)。一般情況下非結(jié)構(gòu)化數(shù)據(jù)占用內(nèi)存較大,因為它常常包含圖像、聲音、網(wǎng)頁和視頻等信息。

三、一般數(shù)據(jù)收集方法與途徑
在一般數(shù)據(jù)收集方法與途徑方面,曹老師指出現(xiàn)行一般的數(shù)據(jù)收集方法與途徑有網(wǎng)絡(luò)爬取、數(shù)據(jù)調(diào)用、網(wǎng)絡(luò)搜索、數(shù)據(jù)填報和調(diào)查數(shù)據(jù)這五大類。本次課程主要對網(wǎng)絡(luò)爬取進(jìn)行講解與實(shí)際操作。

隨后,曹老師向同學(xué)們介紹了12款網(wǎng)絡(luò)大數(shù)據(jù)采集工具,并著重介紹了后羿采集器和八爪魚、爬山虎采集器,以及我們熟知的Python。這幾款數(shù)據(jù)采集器也是當(dāng)前比較流行的幾款,功能強(qiáng)大、實(shí)用,上手快,操作簡單。后羿采集器頗受曹老師的青睞,也在后面的舉例中讓我們一睹其風(fēng)采。

曹老師告訴同學(xué)們使用的爬蟲程序不僅可以獲取新道人才網(wǎng)的信息,還可以去其他人才網(wǎng)站爬取人才資源信息,像獵聘網(wǎng)、58同城、BOSS直聘等網(wǎng)站都是選擇的對象,并以獵聘網(wǎng)為例示范了人力資源數(shù)據(jù)爬取的操作。

最后,曹老師進(jìn)行了數(shù)據(jù)清洗、數(shù)據(jù)挖掘的示例教學(xué)。同學(xué)們對這一環(huán)節(jié)非常感興趣,積極參與數(shù)據(jù)清洗與挖掘的練習(xí)。在進(jìn)行模型選擇和建模時,有部分同學(xué)出現(xiàn)了因素選擇操作失誤的問題,曹老師耐心地進(jìn)行了答疑。課后同學(xué)們紛紛表示收獲頗豐,對人力資源大數(shù)據(jù)這一項目的興趣更加深厚。

供稿|工商管理系
責(zé)編|趙西愛
審核|范小華
(本文轉(zhuǎn)載自北京科技大學(xué)經(jīng)濟(jì)管理學(xué)院 ,如有侵權(quán)請電話聯(lián)系13810995524)
* 文章為作者獨(dú)立觀點(diǎn),不代表MBAChina立場。采編部郵箱:news@mbachina.com,歡迎交流與合作。
備考交流
- 【MBAChina 官方社群矩陣】
- 涵蓋 199管理類聯(lián)考備考 · 復(fù)試調(diào)劑 · 博士申請 · 中外合辦學(xué) 四大板塊。
- ??2027 MBA/MPA/MEM/MPAcc /EMBA聯(lián)考備考群
- ??2026 管理類聯(lián)考復(fù)試調(diào)劑群
- ??博士項目交流群
- ??中外合作辦學(xué)項目群
- ?? 添加微信:MBAChina001
- 備注【報考項目】,邀請您加入專屬交流群

掃碼關(guān)注我們
- 獲取報考資訊
- 了解院?;顒?/li>
- 學(xué)習(xí)備考干貨
- 研究上岸攻略
最新動態(tài)
活動日歷
- 01月
- 02月
- 03月
- 04月
- 05月
- 06月
- 07月
- 08月
- 09月
- 10月
- 11月
- 12月
- 06/01 6月1日直播預(yù)告:香港理工大學(xué)SPEED學(xué)院_全新碩士課程專場!26fall入學(xué)!
- 06/03 6月3日活動報名 | 北大光華-凱洛格國際EMBA項目Coffee Chat@上海
- 06/03 【活動報名】中國科學(xué)技術(shù)大學(xué)科技商學(xué)院專題講座重磅開啟!
- 06/04 6月4日 席位鎖定中 | 香港中文大學(xué)(深圳)MBM2027級招生說明會
- 06/06 長春理工大學(xué)2027級工商管理碩士(MBA)考生見面會
- 06/06 重磅!上財?shù)嗡呓?027級全日制金融碩士“新興金融探索日”活動通知
- 06/06 深圳場 | 清華-康奈爾雙學(xué)位金融MBA公開課暨2027級招生說明會報名中!
- 06/06 上海 | 紫荊課堂暨2027級清華MBA招生咨詢會報名開啟!
- 06/06 浪潮已至|南科大科創(chuàng)MBA 2027級招生啟動大會來了
- 06/06 活動報名 | “迅策科技”校友企業(yè)參訪暨清華五道口金融EMBA深圳招生說明會
熱門資訊
掃碼關(guān)注 MBAChina
掃碼關(guān)注
EMBA







