【GraphRAG x Ollama】地端AI模型GraphRAG應用基於成本考量, 台灣的企業基於大型生成式語言的應用開發, 應將角度放在開源模型與企業資料集的結合上, 以下我們就來實作, 如果在地端部屬開源大模型, 並用微軟發表的GraphRAG圖像檢索增強生成(Graph Retrieval-Augmented…Sep 21Sep 21
【ChatGPT X PowerBI】使用ChatGPT API將AI導入BI Dashboard偶然看到國外Bloger在分享這個應用,感覺蠻酷的,所以也實際下去玩看看。Jun 6, 2023Jun 6, 2023
【雲端部署自動化爬蟲】透過GCP VM佈署Selenium爬蟲研究了兩天終於讓我成功完成雲端爬蟲自動化,中間踩雷之多請讓我娓娓道來,由於目標資料採特定時間公布,且開放下載的時間也非上班時間,所以我就起心動念想用雲端爬蟲來解決這個問題,當然佈署在local端開著電腦或許也是一種方式,但為了省電,且避免設備上的問題,我還是努力嘗試著把爬蟲上雲。…Jan 10, 2023Jan 10, 2023
【Bigquery+Colab】在Colab透過API上傳資料到Bigquery由於網路上的資源大多是教如何從Local端的python透過API上傳資料到GCP的Bigquery,如果僅想透過colab平台完成就會遇到一些問題,以下將詳細解答如何無痛的完成在colab上傳資料到Bigquery。Jan 7, 2023Jan 7, 2023
【Bigquery】透過排程自動提取API串入的資料在之前的文章<將GA4資料透過API串接至Bigquery>中,我們已經成功的將GA4的資料連結至Bigquery。然而,其資料儲存的形式會採每日事件的方式儲存,即你在探索GA資料的時候,必須改寫索引的資料表名稱,或使用union的方式把不同天期的資料表串起來,相當的不實用。所以…Dec 28, 2022Dec 28, 2022
【MongoDB】如何透過docker安裝MongoDB(Windows環境)身為只有windows作業系統的使用者在學習新東西的時候真的蠻不方便的,尤其很多程式或教學都是基於Linux環境,還好有docker這樣的環境整合軟體,我們可以省去架設VM的時間,快速部署環境。Dec 28, 2022Dec 28, 2022
【GA4+Bigquery】將GA4資料透過API串接至Bigquery這陣子在研究GCP平台的Bigquery,現在大廠百家爭鳴,主流的如AWS、Azure、GCP…Dec 22, 2022Dec 22, 2022
【Python】透過bat執行py檔我們在VS Code或Jupiter Notebook開發完後要上線生產環境, 常常需透過CMD來做執行排程的動作,以下就簡單介紹如何透過CMD視窗執行py檔案以及實際執行時常遇到的問題。Dec 5, 2022Dec 5, 2022
[SQL]透過子查詢選取特定範圍的標準差這是最近寫整理論文資料時遇到的問題,因為dataset的筆數有點多, 放到excel做變數轉換需要跑好幾個小時,於是我就起心動念,讓SQL去幫我執行轉換的運算,其中需要計算特定其數的標準差時就遇到問題了。Mar 26, 2021Mar 26, 2021
修改Excel Power Query與DB連線技巧實務上,我們很常把資料庫(DB)的資料匯出到Excel進行進一步的分析,相信不少人遇過,所連線頁面資料庫或檢視表,因為名稱變更導致無法正確連線的狀況,這時候若我們重新拉一段連線,雖然一樣可以匯入資料,但原本連結在XML試算表頁面的函數表格則會需要全部修改,非常的耗時且麻煩!Mar 14, 2021Mar 14, 2021