- 博客(127)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 [Python]Debug for “IndexError: list index out of range“ error message
這算是debug代碼的紀錄，只求此次碰過的坑，下次可以繞道而過，紀錄，也供分享。下列兩個簡單的代碼段都會看到IndexError: list index out of range錯誤訊息，其實問題來自於data1[5]和data2[0]無法被print出來，原因是data1是一個1~5的list，而其序號是由0開始計數...
2022-10-23 11:45:00
241
原创 [Python]關於安裝包路徑的指定和修改
延續之前文章的安裝路徑的遺留問題，這次趁著進行其他安裝包的安裝需求，一併再仔細詳讀相關資料，如文末參考資料，同時也著實測試和順利解決。
2022-10-22 22:52:19
550
原创 [Excel VBA]ListView和真偽亂數的應用_Pickup
因應業務需求，簡易做一個pickup的VBA介面程式，供使用者易於操作。撰寫該程式過程中，個人認為有兩個重點，分別為ListView視窗指令和VBA中的真偽亂數(Randomize and Rnd)，一併紀錄，也供分享。
2022-10-20 22:45:00
453
原创 [Linux] 如何用yum更新kernel系統?
yum 是一個軟件包管理器，可運用於Redhat或基於Radhat基礎的CentOS版本系統，常用的命令作業包含移除、更新、查找和安裝等等。同時其可由各服務器下載各款應用的RPM包，不論是CentOS的三大官方安裝源(如 base/extras/updates)或是各款應用安裝源(如 httpd/php )，並在安裝過程中自行補齊需要搭配的依賴包。安裝的軟件包可依運維系統服務範圍來定義，而不論是哪款運維類型，更新系統Kernel的作業是必不可少的動作，除了維護系統的可運作性，也兼顧資安。
2022-10-13 18:22:06
2157
原创 [Excel]如何取得多項式擬合的R平方值(R-squared)?
延續<[Excel]如何取得趨勢線的參數值>一文，有網友提問，如何進一步提取多項式擬合的R平方值(R-squared)，並期望隨著參數調整而即時動態取得。經查詢LINEST的語法說明，藉由陣列形式和設定stats為True，可提取動態R平方值(R-squared)。LINEST(known_y's,known_x's,const,stats)以上圖範例，對應陣列公式如下，即可提取動態R平方值(R-squared)，如黃色填滿處。LINEST($E$3:$E$7..
2022-03-06 11:53:32
8422
原创 [Excel]如何取得趨勢線的參數值
為了讓同事在提供規格或是工程量測試算可以更加快速且正確，現在提供給他們的試算表基本上都是以函數置入，讓他們只要做簡單的數字輸入，即可得到想要的試算結果。關於一些客戶提出的推估要求，常常會需要以現有數值結合擬合(fitting)來估算結果，有時更要拿擬合得到的參數做進一步的分析。當面臨到龐大的數據量，複製貼上就顯得特別礙手又容易造成錯誤。上述Excel的例子，是用一組x,y數字做簡單的線性擬合，其中藉由 slope和intercept的函數指令可以得到趨勢線擬合參數數值，如黃色表格的a和b值...
2022-03-06 11:19:50
4689
原创 成果(outcome)? 產出(output)?
伴隨著2021年Q4到來，年度會議的準備工作也即將展開。基本上，年度會議包含上年度的工作檢討和改善，以及下年度的工作展望，因此貫穿工作報告的KPI是檢視今年和展望明年的主要指標。若KPI定義明確且合適(SMART原則)，除了可檢視今年的成果和須優化之處，也為明年部門訂立明確的目標。換言之，相較於產出(output)，如何呈現成果(outcome)更為重要，因為成果才能體現績效和對團隊組織的貢獻之處。幾個例子說明產出(output)和成果(outcome)的差異。1.以最基本的工程量測報告為例
2021-10-23 11:34:42
1848
原创 [Python]如何利用Selenium模塊模擬瀏覽器操作網頁?
銜接<[Python]初探爬蟲(scrapy)>的學習，在Python中，除了善用request安裝包抓取網頁資料之外，還可利用selenium安裝包模擬瀏覽器操作網頁，包含搜尋關鍵字和抓取網頁資料，得以實現機機器人流程自動化(RPA, Robotic process automation)的操作。
2021-08-29 22:39:45
451
原创 [電影]我們的新生活
圖片來源:微博電影近兩年，中國電影出現另一種呈現型態，即以幾個短片組成一部電影，如<我和我的祖國>，<我和我的家鄉>，其實用幾個短片組成一部電影的手法也不是甚麼新鮮事，在好萊屋(Hollywood)出品的電影中也常見到，但相較於好萊屋(Hollywood)電影，在這些平凡但寫實的短片中，中國社會的價值觀和特點相當鮮明，如親情溝通，婚姻相處和敬業為國等等，在在顯現出中國文化的博大精深。<我們的新生活>是以五個短片組成的電影，其中"雲上音樂會"和"一路前行"是我認為.
2021-07-25 16:29:22
142
原创 [Python]如何將批量的PDF資料匯總為Excel清單?
在Python中，常用於處理PDF的安裝包有兩個，pdfminer3k和pdfplumber，差異簡易描述如下:pdfminer3k:
2021-06-14 09:50:44
745
6
原创 [Python]如何查看安裝包的狀態，包含安裝路徑?
關於Python，如上篇文章<[Python]初探爬蟲(scrapy)>所述，其藉由各類安裝包的導入可以開展對應程序工作。既然是藉由安裝包的導入，可想而知，一定會有查詢安裝包的指令，網路上很容易搜尋到。(OS: 其實這篇文章的主要目的是為了紀錄今日的幾個重點結論，而查看安裝包的狀態僅是其中一個結論。)
2021-05-02 22:35:36
1048
4
原创 [Python]初探爬蟲(scrapy)
隨著互聯網時代的到來，網路已成為人類生活的資料庫，只要輸入合適的關鍵字，大部分的問題可藉由搜索找到方向。然而，以另一個角度觀察，龐大的網路資料庫也易因為巨量的資料，導致容易失焦，因此如何從資料庫篩選出期望的主題資料是一個重點工作。早有耳聞Python的爬蟲功能，藉著零碎時間看了一些視頻，同時將重點摘要如下，供日後查閱，也供各位參考。1.和R語言類似，Python亦有許多安裝包供引入，其中關於爬蟲的安裝包為requests。其中需特別提醒的是有時候光引入requests尚無法將網頁HTML源碼完整擷取下來
2021-04-04 12:27:56
275
原创 [R]如何繪製條型圖(Bar chart)? geom_bar()
在數據分析中，直方圖(Histogram)和條型圖(Bar chart)是常用於觀察數據樣態的工具。關於直方圖的用法，可參考<[R]直方圖(Histogram)的用法>文章。關於條型圖的用法，各位一定不陌生，尤其是經過2020年的COVID-19疫情事件，為了統計和比較各區域的確診或死亡病例，各媒體常以條型圖呈現數據。在R語言中，藉由安裝包ggplot2亦可輕鬆繪製，範例程式如下。a.首先，利用install.packages()安裝ggplot2，並用library()導入。..
2021-02-16 12:05:59
583
原创 [旅遊]湖南省博物館&長沙烈士公園
因為COVID-19疫情關係，2020年的農曆年顯得不一樣，除了配合政策選擇在工作地過年，同時也可安排到平常無暇參觀的附近景點走走，轉換平時工作的狀態。因緣際會，在一次觀賞關於兵馬俑紀錄片中，提及湖南亦有挖掘到西漢時期的丞相墓塚作為比較，該墓塚即是陳列於湖南省博物館的長沙馬王堆漢墓。因疫情影響且適逢春節期間，為了避免人群聚集的措施，博物館有條件的開放參觀，其中包含僅開放個人參觀預約，並取消館內的導覽說明服務，相當用心的應對措施。首先是二層的三湘文化館，其記載著湖南的發展史，包含糧食、人口遷移、少..
2021-02-14 12:41:19
343
原创 [R]如何篩選出特定子集數據? subset()
在R語言中，篩選出特定子集數據的函數為subset()，經由查詢Help的結果，其對應的描述和用法如下。顧名思義，利用邏輯符號表述篩選子集的方式，將符合條件的數據子集合篩選出來。subset():Subsetting Vectors, Matrices and Data FramesDescription:Return subsets of vectors, matrices or data frames which meet conditions.Usage:subset(x,logical expr
2021-02-11 16:37:40
3205
2
原创 [R]如何擷取特定字串? substr()
在R語言中，擷取特定字串的函數為sunstr()，經由查詢Help的結果，其對應的描述和用法如下，顧名思義，substr()的用法僅需要定義原字串x,並定義起始字元和終止字元，即可達成效果。。sunstr():Substrings of a Character VectorDescription:Extract or replace substrings in a character vector.Usage:substr(x, start, stop)簡易範例如下，若終止字元大於原字串長度，.
2021-02-11 15:53:21
8091
原创 [R]如何取得非重複的向量或數組? unique()
在數據處理中，去除並取得非重複的數組是一項基本需求。在R語言中，可以用unique函數實現。簡易範例如下:x <- c(8-1:5, 4:8, 6+0:5)y <- unique(x)#輸出結果> x [1] 7 6 5 4 3 4 5 6 7 8 6 7 8 9 10 11> y[1] 7 6 5 4 3 8 9 10 11在實際數據操作中，例如一個汽車出廠年份和油耗效率的數據集，為了解該數據集統計的年份跨度，亦
2021-02-07 23:39:14
676
原创 [R]如何檢驗一組數據是否符合正態分布?
延續<[Minitab]如何檢驗一組數據是否符合正態分布?>一文，R語言中的Shapiro.test函數亦可以用來檢驗數據是否呈現正態分布。a.利用一組正態分布數據(平均值=50,標準差=0.01)來測試，p值0.05，無法拒絕原假設，說明該分佈可能是正態分布。x=1:100vec<-rnorm(length(x),mean = 50, sd=0.01)ntest<-shapiro.test(vec)#輸出結果> ntest Shapiro-Wilk n
2021-01-17 22:15:21
659
原创 [R]如何查詢符合條件的對應行列數據?
這個功能類似Excel中Vlookup函數的效果。但Excel畢竟有儲存欄位數量的限制，換句話說，Excel只能處理數據量級是受限制的。在R語言中，亦可用which來實現查詢符合條件的對應行列數據。延續[R]如何根據特定字元拆分數據(str_split_fixed)?一文，可知ratings_tb為具有四個變量的dataframe，其中包含UserID, MovieID,Ratig和Timestamp四個變量，如下圖一所示。圖一若欲進一步取得rating=5的MovieID數據，可參考下列語法。其.
2020-10-07 21:46:11
796
原创 [R]直方圖(Histogram)的用法
直方圖(Histogram)常用於數據分布和分類的呈現功能。在R語言中，利用hist指令即可繪製，同時亦可輸出數據分布結果，語法說明如下。HistogramsDescription:The generic function hist computes a histogram of the given data values.hist(x, breaks = "Sturges", main = paste("Histogram of" , xname), xlim = rang...
2020-10-05 17:39:05
3152
原创 [R]如何根據特定字元拆分數據(str_split_fixed)?
關於數據集(dataset)的處理，往往讀入數據集後，需要進一步對於數據進行拆分或合併處理，以利銜接後續數據分析工作。在R語言中，可利用安裝包 stringr中的str_split_fixed指令，根據特定字元拆分批量數據，達到數據匯總之效果。本文利用經典的MovieLens數據集做為範例，其中該數據集包含movies.dat、ratings.dat和users.dat，我們以ratings.dat檔案做為拆分的範例說明。a.首先，用read.table將ratings.dat讀入檔案，檔案數據排列
2020-10-05 12:44:11
1379
原创 [R]如何利用rnorm生成亂數矩陣和時間序列亂數?
在數值計算軟體的應用上，生成各類符合要求的隨機亂數分布以進一步驗證模型，幾乎是基本需求。R語言中，可利用rnorm指令來生成符合某個平均值和某個標準差要求的常態亂數分布。另外，亦可善用rnorm來生成時間序列亂數。a.生成平均數=5，標準差=1的25個常態亂數分布數據，數字取至小數點第二位，並形成5X5的矩陣。若要使亂數不隨每次執行結果而改變，可結合set.seed(1)定義編號1的隨機亂數群，可參考[R]如何利用seed和sample指令，生成各類的隨機亂數?#set seedset.seed
2020-10-02 22:26:52
1471
1
原创 [R]聚類算法:k-means模組
延伸<[Excel]k-means聚類算法的應用，以評價現有供應商的水平為例。>文章，同時恰巧在圖書館看到一本R語言機計學習書籍，因此正好可進一步了解如何用R語言來實現k-means算法和應用，一併將k-means模組建立起來，做為未來參照使用。利用R語言常用的iris數據集，同時在已知有三個品種的鸢尾花(setosa, versicolor, virginica)，分別各有50個樣品，程式碼如下:#clearrm(list=ls())#pull in datakmean_iri
2020-07-01 21:39:48
222
原创 [R]如何利用seed和sample指令，生成各類的隨機亂數?
在數值計算軟體的應用上，利用生成各類的隨機亂數是基本的功能。在R語言中，可利用seed和sample來生成各種類的隨機亂數，隨機亂數結果包含單個數值是否重複產生，亂數群是否可固定以驗證數值模型，以及是否可依照比例產出隨機亂數。利用以下範例，可以依須根據自身需求來取得各類的隨機亂數。a.產出1~5的亂數排列，其中每次執行結果都不一樣，換句話說，亂數排列不固定。#sample datax=1:5random_data0<-sample(x,length(x),replace = FALS
2020-06-26 16:00:03
4108
原创 [R]高級結構指令(lapply, sapply和apply)的用法
基本的程序語言都具備基本的控制結構指令，如if...else和for...loop，一般可做為操作向量數據的輔助工具。然而，當用於大數據的平行處理作業，切換為矩陣操作就顯得相當重要，R語言中的高級數據結構指令即具備平行處理大數據的功能。lapply: 輸入資料結構為一個列表(list)和一個自訂函數(fun)，即可對列表中的數據進行平行計算和求值，輸出資料結構為一個列表(list)。以一個列表(data1)和平均值函數(mean)作為範例，如下。#datadata1<-list(num=c
2020-06-21 12:09:30
4011
原创 [R]如何建立線性回歸模型，並診斷模型的正確性?
在數理統計中，線性回歸是利用最小平方法將自變量和因變量數據之間的關係，以建立函數形式的分析方法。根據自變量的個數，一個自變量的關係稱為一元線性回歸，兩個以上的關係稱為多元線性回歸。在實務的相關工程應用也相當廣泛，如電烙鐵的輸入電功率與加熱溫度的關係，膠機的出膠量與膠管溫度和壓力泵的輸出壓力的關係等等。利用R語言的模組，可協助建立線性回歸模型，並進一步診斷模型的正確性，一起來看看如何操作吧。...
2020-05-02 22:48:49
826
原创 [R]如何查詢安裝包(package)中的數據集(dataset)?
安裝包(package)之於R，就如同一棵樹的主幹之於枝幹。藉由安裝包的拓展，R語言的功能得已趨近於完整。安裝包除了集成眾多函數之外，有時為了展示安裝包中的函數效果，會再自帶數據集。如應用於處理數據繪圖的lattice安裝包，就包含不少數據集。然而，我們如何知道下載的安裝包裡有哪些數據集可以使用呢?a.查詢所有已下載安裝包的數據集，指令和結果如下。data()...
2020-04-05 19:34:28
919
原创 汉斯·罗斯林(Hans Rosling)告訴你，如何將數據轉變決策?
TED演讲集:资本主义的困局 第25集 汉斯·罗斯林：近十年来的好消息？漢斯·羅斯林 (Hans Rosling)，是卡洛琳學院的國際衛生學教授，曾經擔任世界衛生組織、聯合國兒童基金會和其他援助機構的顧問，因此對於一些國際公共衛生的議題相當重視，如糧食、健康和貧窮等等議題。還記得第一次接觸到漢斯的演講是在2009年的TED頻道，他的視頻演講不但具備邏輯性和知識性，同時還相當幽默風趣，相...
2020-02-22 11:52:42
728
原创 [Excel]k-means聚類算法的應用，以評價現有供應商的水平為例。
聚類算法系列中，k-means聚類算法是基礎，其屬於非監督式分類算法(UnsupervisedClassification)。所謂"非監督式"，即是針對一堆未知標籤的數據集做分類，結果只會告知哪些數據屬於同一群體。換句話說，只有一堆輸入數據，但無定義輸出變量，常應用於對既有數據的內在分類的探討，如對顧客購買行為的分類。k-means聚類算法的原理，係利用數據與和質心的歐式距離為判斷依據...
2020-02-07 18:37:28
2514
2
原创 [Excel]如何使Vlookup由右往左找? 或使Hlookup由下往上找?
Vlookup和Hlookup函數常用於查找資料，其中Vlookup顧名思義用於資料水平查找，而Hlookup則用於垂直查找。同時Vlookup的初始設置為由左往右尋找符合條件的資料，Hlookup的初始設置則是由上往下尋找。然而，有時候受制於數據排版，需要由右往左或是下往上尋找，該如何修改函數呢?以上述結果為例，若有利用8找到對應的C，可用下列語法。VLOOKUP(E3,IF({...
2020-02-06 21:50:04
6905
原创 [Minitab]如何藉由試驗計劃分析，找出主要顯著因子?
延續<[Minitab]如何創建一個全因子試驗計劃表?>文章，當完成試驗計劃表的創建工作後，接著就是依照實際加工結果填具平面度數據，如圖一所示。圖一有了試驗計劃數據表後，接著就是試驗因子的分析工作，選擇DOE->Factorial->Analyze Factorial Design，如圖二所示圖二出現下圖的對話視窗，選擇分析對象為平面度，同時後續將設定自...
2020-01-01 12:41:36
2436
原创 [Minitab]如何創建一個全因子試驗計劃表?
在產品優化或製程改善活動，挑選主要影響因子和確認其水平是必要過程，而利用全因子試驗計畫，將可有效提取主要影響因子和確認其水平。在此進行此必要過程之前，我們需先針對產品優化或製程改善活動創建一個試驗計劃表，以了解自變因子和應變因子的關係並進一步提取主要自變因子。利用Minitab的DOE模塊，可讓我們快速創建一個全因子試驗計劃表，步驟如下:a.選擇Stat->DOE->Facto...
2019-12-28 09:18:41
1121
原创 [Minitab]如何檢驗一組數據是否符合正態分布?
進行參數估計和假設檢驗時，通常總是假定母體服從正態分佈，因此在實務上，我們可對數據先進行正態分布檢驗的預處理工作。利用Minitab可快速檢驗該組數據是否符合正態分布，操作步驟如下:a.選擇Basic Statistics => Normality Test，如圖一所示。圖一b.將數據所在位置填入出現對話視窗，如圖二所示。圖二c.結果如本文封面圖，其中根據P...
2019-12-06 23:34:50
6554
原创 [Minitab]如何製作柏拉圖(Pareto chart)?
柏拉圖(Pareto Diagram)，屬於QC常用工具之一。其將單一事件的眾多影響因子依照影響程度/發生頻率進行排列和累加比例，使得主要和次要影響因子可明顯被區分出來，因此又稱為排列圖法或主次因素分析法。一般而言，累加比例占70%以上的數個影響因子為主要因素群，若將主要因素群解決了，該單一事件的問題也大部分被解決了。換句話說，柏拉圖可有效標示出哪些因子是該事件的主要影響來源。柏拉圖(Pa...
2019-12-01 23:28:09
6389
3
原创 [旅遊趣]台灣台東森林公園
台東森林公園的活水湖在當地政府的保護政策下，台灣台東森林公園保有自然森林景觀和豐富的動植物生態環境，因此素有"黑森林"稱號。森林公園中共有三個湖泊，分別為活水湖、琵琶湖和鷺鷥湖，其中琵琶湖和鷺鷥湖具備原始生態鏈，不知名的魚種和白鷺鷥應有盡有。琵琶湖的一隅來張單車旅遊視角另外，公園內也規劃單車路線，路線中的人為造景在陽光的投射下，呈現出另一番景色，加上園區內滿滿的負離子空氣，優游在單...
2019-10-27 23:18:58
188
原创 [Excel Vba]如何提取word內容，並將內容置入excel儲存格中?
Word和Excel 均屬於Microsoft office系列軟體，但兩個軟體的定位不一樣，Word屬於文字撰寫軟體，而Excel屬於數據試算軟體，然而有些資料若能同時運用兩個軟體的長處，事務運作起來將會事半功倍，因此整合使用兩個軟體有其重要性。例如將人力資源表格彙整成excel表格，並進一步善用excel篩選功能以輔助組織人力盤點工作。關於上述範例，摘要如下:a.引用物件"...
2019-08-25 20:45:41
1540
原创 [書籍]5G時代
人類文明常常是因為相互競爭和激發而逐漸進步的。1733年，飛梭的發明使織布速度大為提升，然而，織布所需的棉紗原料卻往往來不及供應，原因是紡紗的速度趕不上織布的速度。1764年，珍妮機的發明使得紡紗的效率成倍提高，紡紗的速度已趕上織布的速度。沿著珍妮機的發明基礎，卷軸紡紗機陸續被開發出來，輪到織布的速度趕不上紡紗的速度...轉換至IT產業，有一個著名的定理，安迪-比爾定理(Andy-Bill...
2019-07-28 22:37:09
373
Esp32 as modbus rtu master and get data from real guage by RS485
2024-03-23
PythonQRcode scanner(QRcode 掃描器)
2022-12-25
[Excel VBA]QRcode產生器
2022-12-24
[Excel VBA]將所有工作表合併成同一個工作表
2019-03-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人