Big Data資料加值應用研習班課程分享(105/2/16)
Big Data海量資料的分析概說:
Big Data資料加值應用與相關範例
如何取得Big Data的方式?
開放資料範例
內政部實價登錄、YAHOO股市資料
GOOGLE表單
範例:GOOGLE試算表複選結果資料切割
如何處理與統計分析Big Data?
EXCLE統計函數
範例:黑名單篩選、樂透彩中獎機率
樞紐分析表
範例:銷貨系統分析
開放資料加值應用實例
範例:實價登錄、用EXCEL一鍵批次下載股市資料
EXCLE VBA(與R語言比較)
PowerPivot增益集
海量資料的分析工具-PowerPivot實作演練
視覺化數位儀表與報表–PowerView資料地圖實作
上課影音內容:
01_課程說明與參考書籍
02_問卷結果與檔案下載
03_大數據的定義與成功範例
04_範例_樂透彩機率統計函數說明
05_格式化前七名與VBA設定
06_前七名的VBA程式撰寫說明
07_樂透彩VBA程式說明
08_GOOGLE表單與複選結果切割
09_複選結果切割VBA程式說明
10_複選結果切割註解與按鈕相關
11_黑名單篩選查詢資料說明
12_黑名單篩選查詢VBA程式與進度列
13_台北市實價登錄範例VBA程式解說
14_批次下載股市資料程式說明與結尾
完整連結:
https://www.youtube.com/playlist?list=PLgzs-Q3byiYPsxtU9N_n81087ggNwggyK
與大數據課程的經驗
超過20年的程式設計與教學經驗(VBA、VB.NET、ASP.NET、JAVA、ANDROID、PHP等)
台北市公務人員訓練處:Big Data資料加值應用
新北市勞工大學:EXCEL VBA大數據自動化進階
東吳大學進修推廣部:EXCEL VBA 與資料庫雲端設計(初階與進階)
自強工業基金會:從Excel函數到VBA雲端巨量資料庫應用班
多年的實務與教學經驗所累積的課程範例,最短時間學會處理大數據,以提高效率,正確決策。
Big Data海量資料的分析概說:
根據維基百科:
大數據(英語:Big data或Megadata),或稱巨量資料、海量資料、大資料
指的是所涉及的資料量規模巨大到無法透過人工,在合理時間內達到擷取、管理、處理、並整理成為人類所能解讀的形式的資訊。
可用來察覺商業趨勢、判定研究品質、避免疾病擴散、打擊犯罪或測定即時交通路況等;這樣的用途正是大型資料集盛行的原因
維基百科定義
在一份2001年的研究與相關的演講中,麥塔集團(META Group,現為高德納)分析員道格·萊尼(Doug Laney)指出資料增長的挑戰和機遇有三個方向:
量(Volume,資料大小)
速(Velocity,資料輸入輸出的速度)
多變(Variety,多樣性),合稱「3V」或「3Vs」
另外,有機構在3V之外定義第4個V:真實性(Veracity)
大數據必須藉由計算機對資料進行統計、比對、解析方能得出客觀結果。
美國在2012年就開始著手大數據,歐巴馬更在同年投入2億美金在大數據的開發中,更強調大數據會是之後的未來石油。
巨量資料應用的成功案例
Google – 流感趨勢預測
Google發現,某些搜尋關鍵字有助於追蹤流感疫情發展,彙總搜尋資料,提供近乎即時的全球流感疫情趨勢預測
Google曾在美國的九個地區做了測試,發現此技術比聯邦疾病控制和預防中心提前7到14天準確預測了流感爆發
阿里巴巴將消費者數據轉化為企業獲利,小額貸款無需抵押和擔保,直接實現了網路數據的價值。截至2013年,阿里小貸累計獲貸客戶數64.2萬家,累計放款1,722億元人民幣
電視新聞與巨量資料結合,2014年春運(36億人次),百度利用巨量分析觀察大陸過年時人類的遷移行為,並以易懂的視覺化呈現在人們眼前
吳老師 105/2/15
同時也有310部Youtube影片,追蹤數超過4萬的網紅吳老師教學部落格,也在其Youtube影片中提到,ASP.NET(C#)程式與資料庫設計(12) 完整影音教學: https://www.youtube.com/watch?v=ZMFwiLiRMcU&list=PLgzs-Q3byiYMFdHFaZiJ7NTML9fE1ntiF 01_建立YOUTUBE影音資料庫 02_建立網站與加入YOUT...
「vb.net excel 範例」的推薦目錄:
- 關於vb.net excel 範例 在 吳老師excel函數與vba大數據教學 Facebook 的精選貼文
- 關於vb.net excel 範例 在 吳老師excel函數與vba大數據教學 Facebook 的最讚貼文
- 關於vb.net excel 範例 在 吳老師excel函數與vba大數據教學 Facebook 的最讚貼文
- 關於vb.net excel 範例 在 吳老師教學部落格 Youtube 的最讚貼文
- 關於vb.net excel 範例 在 吳老師教學部落格 Youtube 的精選貼文
- 關於vb.net excel 範例 在 吳老師教學部落格 Youtube 的最讚貼文
- 關於vb.net excel 範例 在 [.NET] VB.NET內如何正確宣告excel元件? - 看板Visual_Basic 的評價
- 關於vb.net excel 範例 在 VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞 ... 的評價
- 關於vb.net excel 範例 在 VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞 ... 的評價
- 關於vb.net excel 範例 在 如何使用Excel VBA 自動收集資料的表單設計:利用 ... - YouTube 的評價
vb.net excel 範例 在 吳老師excel函數與vba大數據教學 Facebook 的最讚貼文
VBA處理大數據政府開放與快速做出查詢系統
完整連結:
http://terry55wu.blogspot.tw/2016/05/vba.html
這是在東吳大學進修推廣部的VBA進階課上課的範例,
分享如何用簡單的VBA知識,就可以輕易地做出查詢系統來,
讓您快速輸入查詢關鍵字,就可以輕易地將查詢結果輸出到新的工作表中,
只需要有些VBA的基本知識,再多認識工作表物件(sheets)就足夠了。
建議先學會以下分享課程:
用EXCEL批次查詢實價登錄開放資料(大數據處理實例) [連結]
用EXCEL設計按清單批次查詢資料(自動新增工作表) [連結]
公訓處Big Data加值應用課程分享 [連結]
用EXCEL快速建立資料查詢系統(錄製巨集與修改) [連結]
如何建立EXCEL版的成語查詢系統 [連結]
如何快速在EXCEL中建立查詢系統(免資料庫)之1 [連結]
如何快速在EXCEL中建立查詢系統(免資料庫)之2 [連結]
如何將單次查詢改為批次查詢 [連結]
資料庫批次篩選新增與更名工作表 [連結]
大數時代來臨如果不懂得裡用自動化方式處理資料,
處理資料將非常沒有效率,
至於處理大數據的方案很多,
但最通行也沒有額外費用的大概只剩VBA了。
而且開啟EXCEL就包含VBA,除了在Windows外,
MAC蘋果電腦一樣也有EXCEL,
VBA也可以沿用以前VB的資源,這樣看來VBA處理大數據應該沒有什麼對手了。
本範例主要是利用EXCEL的篩選功能時做成VBA,
可以一鍵就可以批次查出政府開放的實價登錄的查詢結果,
自動依據清單,可以自動將清單項目,逐一自動新增工作表,
並將查詢結果匯入,也可以隨時更改查詢需求,
除了便利外,也非常有彈性,
並可結合從網路下載資料到EXCEL中,隨時更新最新的資訊。
當然未來也可以結合雲端資料庫,與APP連動了。
內政部不動產實價登錄網站 [連結]
範例檔 [下載]
上課內容:
01_下載內政部實價登錄開放資料
02_下載EXCEL檔案
03_只下載新北市開放資料
04_留下不動產買賣資料
05_貼上查詢VBA程式做修改
06_產生輸入地址關鍵字介面
07_自動新增工作表並輸出結果
程式碼:
教學影音(完整版在論壇):
http://terry55wu.blogspot.tw/2016/05/vba.html
教學影音完整版在論壇:
https://groups.google.com/forum/#!forum/scu_excel_vba2_86
課程特色:
1.如何將函數轉成VBA2.VBA與資料庫快速結合
EXCEL函數、 VBA程式設計與資料庫是分別屬於三個領域的知識,
但卻是目前大家都需要的一項專業技能,要把三者融合的很好實在非常不容易,
剛好我有近20年的VB程式設計與資料庫設計的經驗,
教EXCEL函數與相關課程也有多年,因此清楚如何把最重要的知識教給大家,
ADO資料庫設計的知識非常多,但根據我多年的設計實務經驗,
覺得最重要的是掌握SQL語言,就可以輕易的完成查詢、新增、修改與刪除等功能,
就可以輕易的完成自己想處理的大量資料,大大提高工作效率了!
上課用書是:
Excel函數&VBA其實很簡單(http://www.books.com.tw/exep/prod/booksfile.php…)
Excel VBA 與資料庫整合大活用(http://www.books.com.tw/exep/prod/booksfile.php…)
完整教學影音DVD申請:http://goo.gl/ZlBZE
論壇:http://groups.google.com/group/labor_excel_vba?hl=zh-TW
相關教學連結:
如何設計VBA表單與EXCEL當資料庫用(85期)
提高效率VBA入門班第1次上課心得分享
EXCEL VBA處理股票分析自動最佳化範例
如何在EXCEL VBA中快速刪除空白列
定存範例轉VBA與只能輸入數字的InputBox
如何學會EXCEL VBA資料庫系列之一
EXCEL VBA入門:如何撰寫自動格式化的VBA程式
EXCEL VBA入門之一:如何函數轉VBA
VB.NET設計(九九乘法表&小狗動畫&撲克牌&字幕)
回覆Excel VBA入門與進階課的差異?
如何批次下載股市資料到EXCEL中之2
如何用VBA快速取得期貨交易資料(開收高低量)
如何在EXCEL VBA隱藏與顯示工作表
如何移動工作表與排序之1
如何批次下載股市資料到EXCEL中之1
如何批次下載股市資料到EXCEL中
如何建立表單與將EXCEL當成資料庫
如何讓用ACCESS將EXCEL的資料
如何排序工作表
如何將單次查詢改為批次查詢(EXCEL VBA自動化)
如何在EXCEL VBA的工作表隨機上顏色
如何快速在EXCEL中建立查詢系統(免資料庫)之2
如何精簡VBA程式與傳遞引數
如何快速在EXCEL中建立查詢系統(免資料庫)之1
如何將大量工作表整合在一個工作表
如何在EXCEL VBA新增沒有重複名稱工作表
如何自動下載YAHOO股市資料到EXCEL中
如何建立表單與將EXCEL當成資料庫使用
如何在EXCE VBA中複製工作表
如何在EXCEL VBA如何保護工作表
如何在EXCEL VBA新增沒有重複名稱工作表
如何在EXCEL工作表中移動
EXCEL VBA辦公自動化_如何建立查詢系統
如何當下拉清單改變時自動抓取資料之一
如何將數學函數轉EXCEL VBA設計之二
如何增加EXCEL VBA按鈕
如何設定EXCEL VBA開發環境設定說明
如何將EXCEL函數轉成VBA
如何再VBA中建立EXCEL的自訂函數讓公式變簡單
1.EXCEL VBA設計(自強基金會2012)第4次上課
http://terry55wu.blogspot.tw/2012/03/excel-vba20124.html
2.如何把EXCEL"函數"變為 "VBA"?自強基金會2012第5次上課
http://terry55wu.blogspot.tw/2012/04/excel-vba.html
3.自強基金會2012第8次上課
http://terry55wu.blogspot.tw/2012/05/excel-vba20128.html
4.自強基金會2012第9次上課
http://terry55wu.blogspot.tw/2012/05/excel-vba20129.html
5.EXCEL_VBA與資料庫--自強基金會2012(Ending)
http://terry55wu.blogspot.tw/2012/…/excelvba-2012ending.html
EXCEL,VBA,函數東吳進修推廣部,EXCEL VBA 函數 程式設計 線上教學 excel vba 教學 excel vba指令教學 vba範例教學excel excel vba教學視頻 excel函數教學 excel函數
vb.net excel 範例 在 吳老師excel函數與vba大數據教學 Facebook 的最讚貼文
如何將VB.NET大樂透開獎程式改為VBA版本
這是繼之前的文章:
VB.NET範例:大樂透開獎程式(可延伸VBA或APP等) [連結]
主要是整理之前上課的VB.NET來增強大家再VB程式設計素養方面的不足,
可以學會表單設計與元件的程式撰寫部分,
這也是學習EXCEL VBA自動化的盲點之一,
所以之後也會將以前上課過的內容,轉換成VBA範例,
讓大加強化界面設計與程式設計方面的素養,
之後,若能在將強資料庫方面的素養,
相信對於EXEL VBA辦公室自動化的學習將有很大的助益。
上課內容:
01_大樂透VBA版完成畫面
02_建立資料夾與檔案
03_表單設計
04_再EXCEL中顯示結果
05_沒有重複號碼的大樂透程式
程式碼:
vb.net excel 範例 在 吳老師教學部落格 Youtube 的最讚貼文
ASP.NET(C#)程式與資料庫設計(12)
完整影音教學:
https://www.youtube.com/watch?v=ZMFwiLiRMcU&list=PLgzs-Q3byiYMFdHFaZiJ7NTML9fE1ntiF
01_建立YOUTUBE影音資料庫
02_建立網站與加入YOUTUBE網頁
03_建立下拉式清單更新影片內容
04_建立影音YOUTUBE資料庫與資料表
05_將資料庫繫結到資料來源中
06_建立新增資料頁面與FormView
07_簡易登入系統與C_Sharp與VB的比較
課程理念與課程介紹:
影音複習分享(全程錄影)。
提供業界實務開發經驗。
以範例為核心的教法(易學易懂)。
隨時更新第一手資訊。
可延伸證照考試解題(TQC+)。
提供雲端影音連結
提供部落格教學日誌
提供論壇登入問題討論
提供更多程式語言關聯性說明
ASP.NET雲端與APP
ASP.NET雲端與EXCEL VBA
ASP.NET雲端與資料庫
上課用書:ASP.NET 4.0 網頁程式設計速學對策(使用C#) 作者: 鄧文淵 總監製/文淵閣工作室 出版社:碁峰資訊 定價:520元
ASP.NET與資料庫連線應用是雲端互動式網頁最重要的一環,
沒學這部份等於沒學。
而ASP.NET的第四代資料庫控制項真的厲害,
沒寫程式,簡簡單單就將資料庫的資料顯示在網頁上,
還可以加上很多以往要寫一堆程式的功能,
此外,加上新增、修改、刪除也完全不用寫程式,
可以說真的很神奇,真正達到超高效率的境界,
可以將省下的時間在創意與美工上的發揮,
其實只要把這部份學好,就可以用在很多地方,
最重要的還是要找機會運用才會學的又快又好
ASP.NET(C#)程式與資料庫設計論壇:
https://groups.google.com/group/asp_net_c_sharp_and_database?hl=zh-TW
ASP.NET與雲端資料庫課程總整理
http://terry55wu.blogspot.tw/p/aspnet.html
Android程式開發證照教學懶人包
http://terry55wu.blogspot.tw/p/android.html
VB.NET實務與資料庫設計總整理
http://terry55wu.blogspot.com/p/vbnet.htm
VB.NET2008程式設計入門總整理
http://terry55wu.blogspot.com/2011/10/vbnet2008.html
ASP.NET,C#,吳清輝老師,勞工大學,推廣部,雲端設計,程式設計,WEB2.0,線上教學,APP教學
vb.net excel 範例 在 吳老師教學部落格 Youtube 的精選貼文
ASP.NET(C#)程式與資料庫設計(12)
完整影音教學:
https://www.youtube.com/watch?v=ZMFwiLiRMcU&list=PLgzs-Q3byiYMFdHFaZiJ7NTML9fE1ntiF
01_建立YOUTUBE影音資料庫
02_建立網站與加入YOUTUBE網頁
03_建立下拉式清單更新影片內容
04_建立影音YOUTUBE資料庫與資料表
05_將資料庫繫結到資料來源中
06_建立新增資料頁面與FormView
07_簡易登入系統與C_Sharp與VB的比較
課程理念與課程介紹:
影音複習分享(全程錄影)。
提供業界實務開發經驗。
以範例為核心的教法(易學易懂)。
隨時更新第一手資訊。
可延伸證照考試解題(TQC+)。
提供雲端影音連結
提供部落格教學日誌
提供論壇登入問題討論
提供更多程式語言關聯性說明
ASP.NET雲端與APP
ASP.NET雲端與EXCEL VBA
ASP.NET雲端與資料庫
上課用書:ASP.NET 4.0 網頁程式設計速學對策(使用C#) 作者: 鄧文淵 總監製/文淵閣工作室 出版社:碁峰資訊 定價:520元
ASP.NET與資料庫連線應用是雲端互動式網頁最重要的一環,
沒學這部份等於沒學。
而ASP.NET的第四代資料庫控制項真的厲害,
沒寫程式,簡簡單單就將資料庫的資料顯示在網頁上,
還可以加上很多以往要寫一堆程式的功能,
此外,加上新增、修改、刪除也完全不用寫程式,
可以說真的很神奇,真正達到超高效率的境界,
可以將省下的時間在創意與美工上的發揮,
其實只要把這部份學好,就可以用在很多地方,
最重要的還是要找機會運用才會學的又快又好
ASP.NET(C#)程式與資料庫設計論壇:
https://groups.google.com/group/asp_net_c_sharp_and_database?hl=zh-TW
ASP.NET與雲端資料庫課程總整理
http://terry55wu.blogspot.tw/p/aspnet.html
Android程式開發證照教學懶人包
http://terry55wu.blogspot.tw/p/android.html
VB.NET實務與資料庫設計總整理
http://terry55wu.blogspot.com/p/vbnet.htm
VB.NET2008程式設計入門總整理
http://terry55wu.blogspot.com/2011/10/vbnet2008.html
ASP.NET,C#,吳清輝老師,勞工大學,推廣部,雲端設計,程式設計,WEB2.0,線上教學,APP教學
vb.net excel 範例 在 吳老師教學部落格 Youtube 的最讚貼文
ASP.NET(C#)程式與資料庫設計(12)
完整影音教學:
https://www.youtube.com/watch?v=ZMFwiLiRMcU&list=PLgzs-Q3byiYMFdHFaZiJ7NTML9fE1ntiF
01_建立YOUTUBE影音資料庫
02_建立網站與加入YOUTUBE網頁
03_建立下拉式清單更新影片內容
04_建立影音YOUTUBE資料庫與資料表
05_將資料庫繫結到資料來源中
06_建立新增資料頁面與FormView
07_簡易登入系統與C_Sharp與VB的比較
課程理念與課程介紹:
影音複習分享(全程錄影)。
提供業界實務開發經驗。
以範例為核心的教法(易學易懂)。
隨時更新第一手資訊。
可延伸證照考試解題(TQC+)。
提供雲端影音連結
提供部落格教學日誌
提供論壇登入問題討論
提供更多程式語言關聯性說明
ASP.NET雲端與APP
ASP.NET雲端與EXCEL VBA
ASP.NET雲端與資料庫
上課用書:ASP.NET 4.0 網頁程式設計速學對策(使用C#) 作者: 鄧文淵 總監製/文淵閣工作室 出版社:碁峰資訊 定價:520元
ASP.NET與資料庫連線應用是雲端互動式網頁最重要的一環,
沒學這部份等於沒學。
而ASP.NET的第四代資料庫控制項真的厲害,
沒寫程式,簡簡單單就將資料庫的資料顯示在網頁上,
還可以加上很多以往要寫一堆程式的功能,
此外,加上新增、修改、刪除也完全不用寫程式,
可以說真的很神奇,真正達到超高效率的境界,
可以將省下的時間在創意與美工上的發揮,
其實只要把這部份學好,就可以用在很多地方,
最重要的還是要找機會運用才會學的又快又好
ASP.NET(C#)程式與資料庫設計論壇:
https://groups.google.com/group/asp_net_c_sharp_and_database?hl=zh-TW
ASP.NET與雲端資料庫課程總整理
http://terry55wu.blogspot.tw/p/aspnet.html
Android程式開發證照教學懶人包
http://terry55wu.blogspot.tw/p/android.html
VB.NET實務與資料庫設計總整理
http://terry55wu.blogspot.com/p/vbnet.htm
VB.NET2008程式設計入門總整理
http://terry55wu.blogspot.com/2011/10/vbnet2008.html
ASP.NET,C#,吳清輝老師,勞工大學,推廣部,雲端設計,程式設計,WEB2.0,線上教學,APP教學
vb.net excel 範例 在 VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞 ... 的推薦與評價
VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞和熱門話題資訊,找vb.net excel讀取,vb.net datatable匯出excel,Vb net Excel worksheet在2022年該注意什麼 ... ... <看更多>
vb.net excel 範例 在 VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞 ... 的推薦與評價
VB.net Excel 範例2022-在Facebook/IG/Youtube上的焦點新聞和熱門話題資訊,找vb.net excel讀取,vb.net datatable匯出excel,Vb net Excel worksheet在2022年該注意什麼 ... ... <看更多>
vb.net excel 範例 在 [.NET] VB.NET內如何正確宣告excel元件? - 看板Visual_Basic 的推薦與評價
請輸入專案類型(網站專案或者應用程式專案):
VB.NET + NetFramework 4.0
宣告excel元件,如果使用VB6的語法
dim oXL as excel.workbook
set oXL = new excel.workbook
到new這邊時便會出錯
擷取元件 (CLSID 為 {00020819-0000-0000-C000-000000000046})
的 COM Class Factory 失敗,因為發生下列錯誤: 80040154
類別未登錄 (發生例外狀況於 HRESULT: 0x80040154 (REGDB_E_CLASSNOTREG))。
改使用CreateObject也不行,
google後有人說使用excelapp可行,但是VB.net內好像沒有該關鍵字.
so有無正確宣告excel workbook的範例?
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 221.120.65.219
... <看更多>