大數據:資料採集與視覺化(2024春季班)
教師: 鄒忠毅
2024/02/19~2024/06/14

摘要

本課程採實作方式,用三個大主題來介紹「大數據」的資料收集、分析與視覺化方法。
 第一個大主題是「大數據與資料視覺化」。本主題在介紹大數據與資料視覺化基本知識後,以政府開放資料庫為資料來源,微軟的 Power BI 為資料視覺化為工具,進行實例演練。

第二個大主題是「利用 Python 與 Excel進行資料整理與分析」。本主題在介紹 Python 程式語言的基本知識與語法後,以由政府開放資料庫的資料檔案為範例,學習用 Excel 與 Python 進行更深入的資料整理與分析。

第三個大主題是「利用 Python 網路爬蟲擷取與分析網路資料」。本主題在介紹網路資料的特性與網頁的一般架構後,學習運用Python 網路爬蟲工具擷取與分析網路資料,配合運用 Power BI 進行視覺化展示。

 注意:本課程使用的微軟 Power BI Desktop 平台,只支援 Window 系統。其他作業系統需有Power BI 帳號,使用Power BI網頁登入雲端平台。


**本課程為跨校通識數位課程,亦開放一般學員選修,112-2學期 學分認抵學校:中國文化大學、國立雲林科技大學、國立高雄科技大學

!學分生請依照各校選課流程辦理,您不需自行註冊!待加退選後由校方依選課名單統一造冊送ewant平台註冊!

!學分生選修詳細資訊請點此

課程目標

在課程中同學將學習到,
1. 大數據的基本知識。
2. Open Data的簡介與應用。
3. 資料的搜索。
4. 資料的格式整理。
5. Power BI 基本使用。
6. Power BI視覺效果的演練。
7. Python 的基本語法。
8. Python 與 Excel 的配合使用。
9. 統計學的一些基本概念。
10. 網路資料的特性與網頁的一般架構。
11.  Python 的網路爬蟲工具。
12. 數個實例演練。

授課教師

鄒忠毅 老師

淡江大學物理研究所博士

經 歷

1. 中國文化大學光電物理系,助理教授、副教授、教授。

2. 中國文化大學102108 學年傑出通識教育教師

3. 中國文化大學103學年度校教學特優教師

4. 102學年度教育部「現代公民核心能力課程計畫」績優計畫。

興趣與專長:

1.彈烏克麗麗,2.玩電動,3.假裝度假,4.送玫瑰花,5. 物理演示教學,6. 統計物理與社會物理學研究,7. 計算物理研究與物理模擬程式寫作。

更多的介紹請參考個人網站:

    https://www.moustachelala.com/

    google 鄒忠毅

課程進度表

單元 1:大數據與資料視覺化與資料視覺化簡介

單元 2:資料的整理與基本視覺化展示

單元 3:座標資料與動態資料的顯示與關聯

單元 4:資料的網頁與雲端呈現

單元 5:資料採集實例演練(一):自然科學類

單元 6:資料採集實例演練(二):人文社會類

單元 7:Python 程式語言的基本知識與語法(一)

單元 8:Python 程式語言的基本知識與語法(二)

單元 9:Python練習:龜龜畫圖學數學

單元 10:網路爬蟲與範例一:星座盤製作

單元 11:網路爬蟲與範例二:由網站取得資料

單元 12:用 Python 產生與整理excel檔案

單元 13:期末報告

單元 14:【學分生限定】實體期末考

上課形式

本課程分為三個主題,每一週由四到八個子單元構成,每子單元影片長度不超過10分鐘,以利同學利用空餘時間學習。每週附有簡單的、檢核性的測驗,用以確認同學學習效果。另安排期末考、作業用以考核學習成果,考核標準請參見「評分標準說明」。

一次面授課程於期中舉行,目的為確認身分與協助同學製作期末成果。外校遠程同學若不克參加,以線上直播與Call in + 額外的報告方式完成。

一次實體學期評量於期末舉行。

 

線上討論區互動事項:

除了使用課程平台外,還會使用FB google 表單作為討論與成果分享平台。

本課程特色:大數據、政府資料庫、Power BI、烏克麗麗

評分標準

【通識學分生】

作業、測驗:

1. 測驗:每個主題結束後,均有對應作業測驗。佔總分50%

2. 作業:執行並修改範例程式。完成後,於線上平臺問卷回報結果。佔總分30%

期末考:

一次實體期末考試。佔總分20%

 

【興趣學習學員】

作業、測驗:每個主題結束後,均有對應作業。佔總分100%

通過標準


課程及格標準:60滿分:100分

先修科目或先備能力

本課程無須背景知識,具備基礎的 Excel知識即可。


常見問答集

1.我修習完此課程是否將獲得相關證書?

   鬍子拉拉回答:可付費申請。且在幾個承認學校中,有學分。。

2.我沒有修過MOOC課程,需要準備什麼?

   鬍子拉拉回答:快樂的心和找時間看影片做作業的毅力。

3.我修習此課程需要具備什麼知識基礎?

   鬍子拉拉回答:具備基礎的 Excel知識即可。

4.我在此課程可以有什麼收穫?

   鬍子拉拉回答:學會學會大數據分析的一些技巧,把報告中的資料用美美的方式展現。

5.此課程是否會提供上課投影片?

   鬍子拉拉回答:理論部分會,實作部分不會。

6.我不小心錯過作業繳交期限了,能不能讓我補交作業?

   鬍子拉拉回答:不能。直接扣分。

7.作業上傳可以使用那些格式?

   鬍子拉拉回答:每次作業會規定

8.我現在才發現有這麼好的資源,來不及上完怎麼辦?

   鬍子拉拉回答:下次上,哈哈哈。

9.課程結束後是否能繼續學習呢?

   鬍子拉拉回答:可以自行找資料庫練習Power BI。

10.為什麼,課程中會有烏克麗麗?

   鬍子拉拉回答:鬍子拉拉喜歡啦。


本課程的烏克麗麗音樂,是鬍子拉拉自己彈的老歌謠。

證書資訊

本課程證書費用:500元

如何申請電子版證書?

1.點選右上方的「小白人」。

2.點選「證書下載」。



3.畫面即會轉到申請證書系統中,請點選「我要申請證書」。

4.點選「我要搜尋」開始申請證書。


5.ewant平台僅提供電子版證書,確認繳費成功後,請點選「我已申請的證書」,再點選「我要搜尋」下載您申請的證書電子檔。

詳細證書下載流程說明請點這裡