Jason's 程設BLOG

因用EXCEL收集資料實在是過於混亂，特別是又來來回回的，很容易對到爆怒

想到的方式就是改用網頁維護， 
好處是可以在介面上確認完成、收集修改者、修改時間、LOG等， 讓填寫者少一些工

網頁，就有機會用新學的技能了，
說新其實也不新，都是好幾年前學的，苦無機會用呀XD

在看了這篇文章後 Hello, Razor Pages! - 重溫 WebForm 的簡約風格

就決定用RAZOR PAGE開發，
簡單來說就是MVC少了C，利於小專案的快開速發

~史它豆~
Angular我來了，

參考: bootstrap 表格插件bootstrap-table的js设置高度及高度自适应

sftp - Unable to ignore errors using psftp - Stack Overflow

參考：https://www.itxst.com/Bootstrap-Table/iirmi3um.html

引用: SSMS v18 清除登入畫面中，下拉選單歷史紀錄 - HackMD

參考:

• [SQL][問題處理]肥得要死的 tempdb 如何縮減 | 五餅二魚工作室 - 點部落 (dotblogs.com.tw)
• tempdb 資料庫 - SQL Server | Microsoft Learn

參考:

• 浮雲雅築: [研究] NET 2.0 和 3.5 安裝 (Windows 2019) (shaurong.blogspot.com)
• .NET Framework 3.5 安裝錯誤 - Windows Client | Microsoft Learn

ETL說的大量，破億就算大了，特別是MSSQL SERVER(下簡稱MSSQL)這種非MPP架構的資料庫。

本次的CASE是要從DB2 WH (下簡稱DB2) 將七億筆資料且去識別化後寫入MSSQL，
因其在DB2的整檔方式是delete+insert，想在MSSQL用相同的方式udpate+insert處理。

流程如下:

1. 透過openquery + bcp queryout、bcp in將DB2的前一日資料倒到MSQL 的temp table，約百萬筆
2. 接著在MSSQL將temp Table用merge語法更新主table的七億筆資料

卻發生第二步執行過久而time out，且還不知道會跑多久的問題

要怎麼解決呢？

參考: https://sdwh.dev/posts/2021/05/SQL-Server-Exec-SP-Who2/

參考: https://www.twblogs.net/a/5e54d6babd9eee2116842fc1

因為公司資安政策，桌機的TLS被關掉，導致原本用C#開發CALL WEB API的程式死掉，
簡單說明DEBUG過程

參考: https://www.cnblogs.com/WizardWu/p/13649548.html

最近在處理一個TABLE破5億，每日要執行DELETE＋INSERT過於耗時，
於是把腦筋動到PARTITION TABLE上，
記錄一下處理過程。

同一支程式放到HEROKU居然有不同的結果，看到目前的時間差8小時，就大概猜到是時區的問題

在公司想使用LINE NOTIFY的功能，因為不能直連，想透過第三方，例如WEBAPI的方式實作出來
意外發現這個東西，Google的Apps Script

重點是好像不用收費！！

本以為BCP讀寫的功能沒什麼難度的，
在最後測試階段卻踢到了板。

以下是我兩天的心(辛)路歷程…

近期主管交付一個工作，要將2.5G的CSV檔轉成EXCEL，約340萬筆，
原以為是很EASY的工作，卻讓我搞了整整快一天

因為EXCEL有個先天的限制…

寫好的WEB還是要有個存放點，要不然沒法在手機上使用
原設想的GCP服務太貴了，於是找個空間變成個議題

無意間發現HEROKU這個微服務，正符合我需求，於是…..