大数据:数据采集与可视化
教师: 鄒忠毅
2023/09/18~2023/12/29

概要

本课程采实作方式,用三个大主题来介绍「大数据」的数据收集、分析与可视化方法。
 第一个大主题是「大数据与数据可视化」。本主题在介绍大数据与数据可视化基本知识后,以政府开放数据库为数据源,微软的 Power BI 为数据可视化为工具,进行实例演练。

第二个大主题是「利用 Python 与 Excel进行数据整理与分析」。本主题在介绍 Python 编程语言的基本知识与语法后,以由政府开放数据库的数据文件为范例,学习用 Excel 与 Python 进行更深入的数据整理与分析。

第三个大主题是「利用 Python 网络爬虫截取与分析网络数据」。本主题在介绍网络数据的特性与网页的一般架构后,学习运用Python 网络爬虫工具截取与分析网络数据,配合运用 Power BI 进行可视化展示。

 注意:本课程使用的微软 Power BI Desktop 平台,只支持 Window 系统。其他操作系统需有Power BI 帐号,使用Power BI网页登录云端平台。


**本课程为跨校通识数字课程,亦开放一般学员选修,112-1学期 学分认抵学校:中国文化大学、国立高雄科技大学 

!学分生请依照各校选课流程办理,您不需自行注册!待加退选后由校方依选课名单统一造册送ewant平台注册!

!学分生选修详细信息请点此

课程目标

在課程中同學將學習到,
1. 大數據的基本知識。
2. Open Data的簡介與應用。
3. 資料的搜索。
4. 資料的格式整理。
5. Power BI 基本使用。
6. Power BI視覺效果的演練。
7. Python 的基本語法。
8. Python 與 Excel 的配合使用。
9. 統計學的一些基本概念。
10. 網路資料的特性與網頁的一般架構。
11.  Python 的網路爬蟲工具。
12. 數個實例演練。

授课教师

鄒忠毅 老師

淡江大學物理研究所博士

經 歷

1. 中國文化大學光電物理系,助理教授、副教授、教授。

2. 中國文化大學102108 學年傑出通識教育教師

3. 中國文化大學103學年度校教學特優教師

4. 102學年度教育部「現代公民核心能力課程計畫」績優計畫。

興趣與專長:

1.彈烏克麗麗,2.玩電動,3.假裝度假,4.送玫瑰花,5. 物理演示教學,6. 統計物理與社會物理學研究,7. 計算物理研究與物理模擬程式寫作。

更多的介紹請參考個人網站:

    https://www.moustachelala.com/

    google 鄒忠毅

课程进度表

单元 1:大数据与数据可视化与数据可视化简介

单元 2:数据的整理与基本可视化展示

单元 3:座标数据与动态数据的显示与关联

单元 4:数据的网页与云端呈现

单元 5:数据采集实例演练(一):自然科学类

单元 6:数据采集实例演练(二):人文社会类

单元 7:Python 编程语言的基本知识与语法(一)

单元 8:Python 编程语言的基本知识与语法(二)

单元 9:Python练习:龟龟画图学数学

单元 10:网络爬虫与范例一:星座盘制作

单元 11:网络爬虫与范例二:由网站取得数据

单元 12:用 Python 产生与整理excel文件

单元 13:期末报告

单元 14:【学分生限定】实体期末考

上课形式

本課程分為三個主題,每一週由四到八個子單元構成,每子單元影片長度不超過10分鐘,以利同學利用空餘時間學習。每週附有簡單的、檢核性的測驗,用以確認同學學習效果。另安排期末考、作業用以考核學習成果,考核標準請參見「評分標準說明」。

一次面授課程於期中舉行,目的為確認身分與協助同學製作期末成果。外校遠程同學若不克參加,以線上直播與Call in + 額外的報告方式完成。

一次實體學期評量於期末舉行。

 

線上討論區互動事項:

除了使用課程平台外,還會使用FB google 表單作為討論與成果分享平台。

本課程特色:大數據、政府資料庫、Power BI、烏克麗麗

评分标准

【通識學分生】

作業、測驗:

1. 測驗:每個主題結束後,均有對應作業測驗。佔總分50%

2. 作業:執行並修改範例程式。完成後,於線上平臺問卷回報結果。佔總分30%

期末考:

一次實體期末考試。佔總分20%

 

【興趣學習學員】

作業、測驗:每個主題結束後,均有對應作業。佔總分100%

通过标准


Course grade pass:60Grade Memo:max grade 100 point

先修科目或先备能力

本課程無須背景知識,具備基礎的 Excel知識即可。


常见问答集

1.我修習完此課程是否將獲得相關證書?

   鬍子拉拉回答:可付費申請。且在幾個承認學校中,有學分。。

2.我沒有修過MOOC課程,需要準備什麼?

   鬍子拉拉回答:快樂的心和找時間看影片做作業的毅力。

3.我修習此課程需要具備什麼知識基礎?

   鬍子拉拉回答:具備基礎的 Excel知識即可。

4.我在此課程可以有什麼收穫?

   鬍子拉拉回答:學會學會大數據分析的一些技巧,把報告中的資料用美美的方式展現。

5.此課程是否會提供上課投影片?

   鬍子拉拉回答:理論部分會,實作部分不會。

6.我不小心錯過作業繳交期限了,能不能讓我補交作業?

   鬍子拉拉回答:不能。直接扣分。

7.作業上傳可以使用那些格式?

   鬍子拉拉回答:每次作業會規定

8.我現在才發現有這麼好的資源,來不及上完怎麼辦?

   鬍子拉拉回答:下次上,哈哈哈。

9.課程結束後是否能繼續學習呢?

   鬍子拉拉回答:可以自行找資料庫練習Power BI。

10.為什麼,課程中會有烏克麗麗?

   鬍子拉拉回答:鬍子拉拉喜歡啦。


本課程的烏克麗麗音樂,是鬍子拉拉自己彈的老歌謠。

其它

本課程證書費用:500元

如何申請電子版證書?

1.點選右上方的「小白人」。

2.點選「證書下載」。



3.畫面即會轉到申請證書系統中,請點選「我要申請證書」。

4.點選「我要搜尋」開始申請證書。


5.ewant平台僅提供電子版證書,確認繳費成功後,請點選「我已申請的證書」,再點選「我要搜尋」下載您申請的證書電子檔。

詳細證書下載流程說明請點這裡