2023年9月10日 星期日

Going beyond the map: Introducing Environment APIs : Google MAP 環境 API 簡介

轉貼自: https://cloud.google.com/blog/products/maps-platform/going-beyond-map-introducing-environment-apis?utm_source=linkedin&utm_medium=unpaidsoc&utm_campaign=fy23q3-googlecloud-blog-sustainability-in_feed-no-brand-global&utm_content=-&utm_term=-&linkId=9004502

 https://storage.googleapis.com/gweb-cloudblog-publish/images/Environment_APIs_Header_zkDlj2g.max-2200x2200.png

Jennifer Anderson

General Manager, Google Maps Platform

就環境而言,我們正處於定義一代人並將影響子孫後代的時刻。現在比以往任何時候都更需要繼續努力減少對環境的影響,而且我們知道,當我們共同努力時,我們會做得更多。多年來,我們不斷發展地圖的功能。現在,我們正在擴展開發者可以使用 Google Maps Platform 做的事情,以打造為可持續未來鋪平道路的體驗。今天,在 Google Cloud Next '23 之前,我們推出了一套新的環境 API:太陽能、空氣質量和花粉。這些 API 幫助開發人員更好地了解不斷變化的世界,以便他們能夠創建新的可持續發展工具、分享可行的見解並鼓勵人們適應新的環境現實。

擴大太陽能的採用和安裝

清潔能源替代品對於減少溫室氣體排放和能源不安全至關重要。為了幫助加速太陽能的採用和部署,我們推出了Solar API,旨在幫助太陽能公司向房主提供他們所需的信息,以便他們做出有關太陽能安裝的明智決策。Solar API 建立在 Project Sunroof 的基礎上,Project Sunroof 是一個由 Google 地球圖像提供支持的面向消費者的個性化太陽能節能量估算器。我們使用人工智能擴展了這些功能,以提供比公開可用的激光雷達數據或衛星衍生的 3D 模型更精確的數據和見解。  

Solar API 具有兩種不同的功能,可幫助各類太陽能公司解決太陽能可行性和設計問題。建築洞察可以快速洞察太陽能的可行性,例如建築物接收的陽光量和最節能的太陽能電池板陣列。數據層提供了有助於太陽能係統設計的詳細見解,例如可能影響系統性能的陰影和屋頂的數字表面模型。

Solar API 在 40 多個國家/地區的超過 3.2 億棟建築中可用,可幫助太陽能公司向其客戶提供推進太陽能安裝所需的信息,並共同為無碳未來做出貢獻。有關 Solar API 的更多信息,請閱讀公告博客文章

https://storage.googleapis.com/gweb-cloudblog-publish/original_images/Untitled_1_0Xe3O7f.gif

來自 Solar API 數據層端點的每月通量圖像,顯示平均年份的屋頂陽光和陰影。

了解環境變化並根據空氣質量和花粉數據採取個人行動

空氣質量 API 和花粉 API 可以幫助企業更好地了解氣候和環境變化。這為他們提供了做出明智選擇、倡導變革和構建創新經驗以幫助減輕影響所需的信息。他們還可以使用這些信息來幫助用戶自己做出更明智的決策。 

空氣質量 API

空氣質量 API使公司能夠獲取可靠的空氣質量數據、通過熱圖可視化污染的能力,以及向目標受眾提供深入的污染物詳細信息和建議的機會。

https://storage.googleapis.com/gweb-cloudblog-publish/images/In_depth_pollutant_details_ver_2.max-2000x2000.png

顯示紐約市當前空氣質量狀況的地圖,其中包含詳細的污染物詳細信息

為了解釋空氣污染的動態性質,我們結合了多個數據源的信息,包括政府監測站、低成本傳感器、氣象數據、衛星、土地覆蓋和實時交通信息。這種方法意味著即使一個來源不可用,我們也能夠收集信息。我們每小時驗證和組織數 TB 的數據,從而獲得可靠且特定於某個位置的空氣質量信息。有關空氣質量 API 的更多信息,請閱讀公告博客文章。 

花粉 API

花粉API提供對全球最常見過敏原的當前花粉信息的訪問。它可以用來幫助人們限制接觸過敏花粉的風險,做出更明智的日常決策,並在氣候變化的情況下適應更長、更嚴重的過敏季節。該 API 提供本地化的花粉計數數據、熱圖可視化、詳細的植物過敏原信息以及針對過敏患者限制暴露的可行提示。花粉 API 為研究花粉與氣候之間聯繫的組織以及希望幫助用戶做出更健康決策的公司提供基於數據的見解。

https://storage.googleapis.com/gweb-cloudblog-publish/images/In_depth_plant_allergenicity_information_-.max-2000x2000.png

熱圖可視化顯示花粉水平和詳細的植物過敏原信息

該 API 基於一個模型,該模型計算全球超過 65 個國家 1x1 km2 網格上的季節性和每日花粉粒數量,支持長達 5 天的預測、3 種植物類型和 15 種不同植物物種。該模型使用土地覆蓋、氣候數據、每株植物的年花粉產量等各種輸入來提供當地花粉水平和暴露風險的可靠輸出預測。有關 Pollen API 的更多信息,請閱讀公告博客文章。 

我們很高興能夠通過 Google 地圖平台為開發者提供更多環境信息。通過提供新的環境數據以及逼真的 3D Tiles(即將進入預覽版)和鳥瞰圖(現已全面推出)等沉浸式體驗產品,我們希望為支持氣候變化的創新解決方案儘自己的一份力量。將環境數據疊加在 3D 圖像上以可視化空氣質量或花粉水平,只是這些產品協同工作的一種方式。我們可以共同規劃通往更健康地球的道路。

HubSpot 公佈跨平台整合人工智能的戰略

 轉貼自: https://techcrunch-com.cdn.ampproject.org/c/s/techcrunch.com/2023/09/06/hubspot-unveils-ai-hub-incorporating-new-and-existing-pieces/amp/


今天在波士頓舉行的入站客戶會議上,總部位於波士頓的營銷和 CRM 平台HubSpot宣布了一項名為 HubSpot AI 的全面人工智能戰略。雖然 HubSpot 與其他企業 SaaS 供應商一樣,多年來一直在構建人工智能元素,但隨著今年 ChatGPT 的興起,它正在採取更廣泛的方法,同時保留一些早期的部分。

該公司首席技術官兼聯合創始人 Dharmesh Shah 表示,人工智能,尤其是生成式人工智能,確實將從根本上改變我們與軟件交互的方式。“我們已經很長一段時間沒有在軟件領域看到如此大規模的範式轉變了,”沙阿在今年早些時候的一次採訪中說道。“我認為生成式人工智能將改變產品的構建方式以及為客戶創造價值的方式,”他說。HubSpot 一直致力於成為這一轉變的一部分。

HubSpot 產品執行副總裁 Andrew Pitre 表示,HubSpot AI 的目的是讓營銷人員和銷售人員更輕鬆地完成工作,該公司可以訪問多種不同類型的內容來幫助訓練他們的模型,例如客戶在HubSpot 中創建和存儲的所有博客文章和其他材料。其次,他說,由於所有內容和數據,它可以幫助根據所有現有信息理解請求的上下文。

“因此,我們了解您的業務如何運作,並且我們越來越多地致力於讓您能夠了解您的業務基調以及您作為企業的溝通方式,”Pitre 告訴 TechCrunch。

最後,該公司將有關公司的數據存儲在CRM數據庫中,因此它應該可以幫助用戶更好地了解這些客戶是誰,包括他們的基本數據、購買歷史、客戶服務互動等信息。

HubSpot AI 涉及四管齊下的方法,首先是內容助手。這些工具可幫助用戶在整個平台的環境中生成您需要的任何內容。這些處於不同開發階段的代理可以幫助創建博客文章、圖像、營銷活動和網站。

第二部分是人工智能代理,旨在為客戶提供自動化幫助來回答問題並處理日常客戶服務任務。AI Insights 提供的預測可讓您了解最有可能流失或最有可能購買的客戶等信息,這種功能已經內置到平台中一段時間​​了。最後,ChatSpot於去年 3 月推出,目前處於測試階段,它允許營銷和銷售人員以類似 ChatGPT 的方式提出有關 HubSpot 中存儲的內容的問題,並使用自然語言與該內容進行交互。

Pitre 表示,通過限制模型可以訪問 HubSpot 中可用的數據,它可以幫助減輕幻覺,當模型不知道答案並編造答案時就會出現幻覺。

“誠實的答案是,這對我們來說並不是一個大問題,但我們試圖向客戶傳達的普遍觀點是,這並不完美。您不應該將您獲得的信息視為完美的事實。你應該將其視為一種輸入,幫助你將你想做的事情提升到一個新的水平,”皮特說。

今天宣布的產品正處於不同的上市階段。AI Insights 已經可用。ChatSpot 處於公開測試階段,人工智能代理將於明年推出,一些人工智能助手(如內容助手)已正式發布,而圖像創建助手則處於測試階段。

2022年2月3日 星期四

【獨家披露:台積IT關鍵新能力2】靠新手訓練營統一專業技能,台積電將雲端原生技術變成IT必備基礎

 轉貼自: https://www.ithome.com.tw/news/149127

透過集中式的新手訓練營,將台積IT未來要用的雲原生技術,教給新進IT,減少他們的技能與日後實際所用技術之間的落差


每一個台積IT新人,報到後的第一件事,就是要接受長達3個月的新手訓練,其中2個月更是要集中到特定部門,接受同一套專門技術的培訓,然後才回到原單位進行在職訓練。這套共同的專門技術,就是雲端原生技術的基礎訓練。

早在2019年時,台積電就定調IT軟體開發策略,聚焦在雲端應用及手機App的開發,軟體開發流程更從瀑布開發模式,轉為DevOps和Agile開發模式。

「IT工程師對台積越來越重要,因此,提升IT工程師的生產力也是一件很重要的事。」台積電IT主管Jenny Hu特別強調。

尤其,台積從2021年底新一波校園IT招募時,不只鎖定資工、資管科系背景的學生,還要招募電機,機械,控制,工工,工管,數學,統計科系等理工科系的學生,對於非資工管科系背景的學生,進入台積後更需要提供一套標準化的技術培訓,才能讓IT部門新人能具備同樣的技術基礎,也能熟悉台積IT所用的開發流程和方法。

因此,台積IT在2021年設立了一個「新技術應用專案課」(NTAP),除了負責新產品開發,也要負責要用現代化架構來重構廠區的老舊系統,另外還有一項重要任務就是負責新手訓練營,「將台積IT未來要用的一套雲原生技術,教給新進IT,以減少新人技能和日後實際所用技術的落差。」台積電NTAP新技術應用專案課工程師Jack Lo這一席話,點出了這個新手訓練營最重要的目的,讓新手IT人人都具備同一套台積IT未來必備的技術。

2020年底時,台積首度公開了自家開發團隊內部所用的開發平臺,稱為TSMC One Platform,可以涵蓋從產品規劃、開發、組建、測試,發布到部署的流程,也都遵循DevOps流程。

在TSMC One Platform平臺上,有一套完善的DevOps和CI/CD工具鏈,「透過這些DevOps工具鏈,可以讓台積的工程師,做好生命周期管理,把關軟體品質,也能提升生產力。」Jenny Hu補充。

但是,有了一套完善的DevOps工具鏈還不夠,還需要搭配對應的開發方法論和開發流程,才能真正發揮作用。在台積IT新手訓練營中,培訓內容就涵蓋了這套台積內部所用的工具鏈和最佳開發實務。

打開台積IT新手訓練營課程清單,都是雲端原生技術和工具

打開台積IT新手訓練營的課程清單,從DevOps開發流程中,最基本的開源版本控管系統GIT開始介紹,像是最常用的「Pull Request操作」,另外也包括了系統設計與需求溝通必備的「User Story撰寫」。新手課程還提供了針對Web應用開發主流開源技術架構MERN的介紹,例如「MERN後端概論」、「MERN前端React」。還有與測試有關的「TDD與Jest」,其他課程還包括了Mirage.js函式庫、Next.js框架、Functional Programming(FP-TS),Pattern Matching、Azure DevOps Workitem、API文件工具Docusaurus等偏重技術性的課程,除此之外,還包括了「從MERN到CI/CD」、「Quarkus和Kotlin」、「Quarkus和CI/CD」、Temporal.io框架和F#語言。

MERN(包括MongoDB、Express、React.js和Node.js)是目前台積電力推的開發框架,而Kotlin則是網頁後端開發所用的技術,而Quarkus則是搭配的框架。培訓內容也包括了管理產品開發上線過程的DevOps實務,從程式碼管理,版本控管、CI/CD自動化到Workitem管理等。台積電還會使用一些開發模式,包括測試驅動開發(TDD),行為驅動開發(BDD)和領域驅動設計(DDD)等模式,這些都是新手培訓範圍。

不只是上課學習,台積IT新手訓練營也相當重視實作,報到後的主管啟動日中,就會說明教學內容和專案實作,再展開新手課程,包括TSMC基礎介紹、雲端原生技術和專案實作。前2個月,新手集中訓練期間,聚焦技術深化、溝通技巧、執行和協作。最後1個月,則進行部門實作訓練,新人歸建到原部門進行就職訓練(On-Job Training)

前2個月的主要學習地點就是新技術應用專案課,除了接受一系列課程,台積也會安排資深工程師擔任導師,跟新手進行Pair Programming(結對程式設計),兩個人一起用同一個螢幕、同一組鍵盤一起開發來學習。

Jack Lo指出:「為了開發一支Cloud Native的App,需要用到上述這些技術,這也都是為了近一兩年來,台積碰到的全球化挑戰,要朝向雲端邁進。」這正點出了新手訓練營背後的戰略意義,同樣為了瞄準台積電全球化挑戰而做的IT準備。

【獨家披露:台積IT關鍵新能力1】為何台積電大舉招募SRE和DevOps?

 轉貼自:https://www.ithome.com.tw/news/149126

去年3月底,台積官網發布了一種特別的新職缺,要招募國外火紅但臺灣少見的SRE,這不是臨時的IT布局,而是台積IT在2022年需要的關鍵人才


去年3月底,台積電官網人才招募網頁上,突然發布了一類新職缺,要招募網站可靠性工程師(Site Reliability Engineering,簡稱SRE),到了去年11月,台積電對這類人才的招募活動不僅沒有滿足,甚至還進一步擴大,要開始招募起SRE團隊的管理幹部。

SRE是2016年開始崛起的新IT人才類型,當時Google把自家維運10億人規模的搜尋引擎或Email服務背後的那一套維運心法公開,打造成一套可以確保全球性服務高可靠度的作法,也就是SRE維運方法論,大力推廣,不少大型網路公司或科技公司也開始仿效導入,例如Netflix、LinkedIn,SRE成了維運全球性架構網路服務的指標性作法,甚至Netflix的SRE經驗更被許多企業視為學習的典範。

近幾年,各種產業都相繼展開數位轉型,許多大型企業開始提供跨國性網路服務,也開始擁抱SRE,來確保自家服務不中斷,例如2019年,金融業如新加坡星展銀行,或是零售巨頭美國Target,都開始成立自己的SRE團隊。

台積電是臺灣半導體業擁抱SRE的先行者

但是,SRE這個在國外科技圈火紅的新人才,在臺灣大多只在網路圈內流行,只有少數網路公司或雲端原生新創導入,直到2020年底、2021年初,才陸續出現幾家大型金控或大型製造業開始接觸SRE維運理念,展開嘗試,也開始出現這類人才的職缺需求。

到了2021年下半年,在臺灣的人力銀行網站上的SRE職缺數量竟然翻了一倍。後疫新常態暴增的數位通路需求,讓越來越多企業想要強化自己的網站維運能力,從網路設備商、儲存產品商、房仲集團、保險公司、證券商、物流、媒體、實體百貨、超市賣場到線上電商,都要招募SRE人才。

台積電正是2021年初,臺灣第一批招募SRE的高科技製造業者之一,甚至是半導體業者中,率先嘗試SRE的先行者之一。

可是,上述積極擁抱SRE的臺灣企業,大多是為了因應零接觸經濟需求而招募,而台積電並非是提供大規模B2C服務的企業,而是半導體製造代工服務業,為何台積電突然開始大舉招募SRE?

從台積SRE招募公告中,初步可以看出,與台積IT這兩年數位轉型的新戰略方向,大有關係。

台積早在兩年前,就開始大舉招募IT人力,2020年底時更打破例行性招募作法,首度舉辦線上徵才活動,要突破地域限制,想辦法吸引更多臺灣北、中、南部,甚至是海外的IT人才。

當時,台積電不只開出大量的AI職缺,例如資料科學家、ML軟體工程師、ML平臺工程師、ML領域執行經理等,來持續支援從2016年大力推動的生產製造智慧化戰略,另一方面,台積電當時還積極招募3大類IT人才,包括了雲端平臺架構師、基礎建設架構師與工程師和資安維運工程師。

去年,iThome獨家披露了台積電大舉招募AI和IT人才的關鍵布局,就是為了展開大規模數位轉型所需,尤其要招募的那3類IT職缺,都是基礎架構轉型所需的關鍵人力。

當時有位台積IT招募主管就直言,台積IT在2020年的三大工作重點,一是要運用各種基礎架構新服務,來支援台積電的數位轉型,二是要運用軟體定義技術,將傳統資料中心轉型為真正的私有雲架構,最後一點則是揭露台積電正持續投入新世代IT基礎架構的研發,包括如5G、IoT、AIOps等新興技術,來支援台積電未來的成長。

到了2021年,台積電絲毫沒有停下IT人才招募的腳步,甚至還更主動,深入更多場合、透過更多元的管道來招募。這些舉動反映出台積 IT急需更多新戰力的渴望。

但是,台積IT在2021年需要的新人才,和展開數位轉型前期,也就是和2020年時的需求,不盡相同。

在2021年下半年台積第二度IT大徵才活動中,進一步要擴大招募5大類人才,除了負責開發的軟體工程師、製造智慧化發展的AI/ML工程師,以及基礎架構工程師之外,2021年新出現的重點職缺,就是 SRE工程師和DevOps工程師,後兩者是2020年第一次IT大舉徵才中,沒有特別著墨的角色。

邁向雲端原生環境,開始積極招募DevOps和SRE

在2021年10月有次校園徵才活動中,台積電難得透露了IT人才需求改變的關鍵原因。台積電IT主管Jenny Hu指出:「台積要開始邁向雲端原生的環境,DevOps跟SRE是2021年開始的重點新職缺。」

她進一步解釋:「台積一方面建立自己的K8s,發展雲端原生架構,完善DevOps工具鏈,也開始推動轉型,將老舊系統轉移到雲原生架構上,也讓我們IT開發的產品轉型,透過這些工具鏈,將產品做得更好。」

從台積賦予DevOps和SRE職務的工作重點中,更詳細的點出了這兩類人才在台積電打造雲端原生架構中所扮演的關鍵角色。

這兩年,台積電一直持續招募大量軟體工程師,來負責內部軟體產品,也要瞄準未來全球營運的挑戰。但在2021年新增加的DevOps工程師的工作內容,不只也需要負責設計、開發和維運TSMC IT的軟體產品,更要使用雲原生技術,來開發全球營運製造的新平臺。

台積電從2020年就開始積極發展容器化,後來開始發展自己的K8s私有雲環境,也預告未來會將所有服務都會轉移到K8s上。台積DevOps被賦予的工作內容,就是要運用雲端環境開發自動化工具,來建置K8s上的流程,包括CI/CD流程、自動化測試流程、自動化部署流程等,也要搭配,如Prometheus、Kibana等雲端開源工具,來監控軟體產品品質和監控K8s平臺的資源,以確保產品維運的可靠性,還要負責待命任務。也就是說,台積電未來軟體產品所部署的K8s雲端原生環境上,各種流程自動化都是台積DevOps的任務,這些任務也正是國外科技巨頭打造全球網路服務時,為了支援全球性規模所需要的自動化管理能力。

而從台積SRE工作重點說明中可以看到,SRE要負責實現台積實現基礎架構程式碼化(Infrastructure as code,簡稱IaC),也要運用軟體方法來管理台積電的全球資料中心,包括基礎架構硬體設計、建設和維運。

而SRE的工作內容則包括了,從裸機、VM、容器到K8s私雲的部署與基礎架構維護工作,以及要負責定義和管理SLO、SLI和錯誤預算(Error Budgets),另外,還要負責定義監控機制和預警機制。當然,IT緊急應變是SRE角色的重要任務,他們得輪班待命處理緊急事件與事後檢討。

為了優化這些維運和管理工作,台積電的SRE也得具備各項雲端原生技術的開發能力,自己來發展相關的工具和所需的自動化流程。

從台積賦予這兩類角色的工作內容來看,DevOps和SRE是高度互補的角色,DevOps聚焦AP應用系統層級的大規模管理挑戰,而SRE則更進一步涵蓋到資料中心層級的全球維運和管理,但不論是SRE或是DevOps,都是為了雲端原生架構的大規模管理和維運,這正是台積用來因應全球化營運挑戰的IT新能力。

【獨家披露】台積數位轉型發展史:從AI全面轉型到全球化營運能力(完整圖表下載)

 這是了解台積電數位轉型最詳細的一張圖表。2020年,疫情讓台積加速展開數位轉型,推動IT基礎架構三大重心、AI四大應用布局,更揭露了未來轉型五大方向。2021年,台積數位轉型進入全新的階段,不只找來矽谷大將擔任CIO,IT組織也大改組,2022年,台積IT戰略即將展開2大變革


2020年是台積數位轉型的關鍵第一年,不只推動IT基礎架構三大重心、AI四大應用布局,更開始邁向五大轉型方向。2021年,台積數位轉型進入全新的階段,不只找來矽谷大將擔任CIO,IT組織也大改組,2022年,台積IT更將展開2大關鍵變革,這一切,都是為了發展全球化的營運能力。

自動化製造時期:從半自動邁向生產自動化

● 2000~2010年:2000年是自動化元年,開始發展機台自動化、物料傳送自動化、晶圓派工自動化。2006年報揭露,超大晶圓廠達到近百分之百的全自動化生產。

智能化製造時期:發展整合平臺和大數據到全面AI化

● 2011年:智能化元年,開始發展晶圓大數據,率先進入智慧化生產流程,將人工智慧導入晶圓製造

● 2013~2016年以跨界培育人才為主,打造資料整合平臺和高效能計算環境,來發展機器學習平臺。

● 2017年開始強化智能系統,找來專家參與智能模型開發,建立專家知識庫(分析標的、製程特性、跨站相依性、資料預處理)來精進智能化製造。

● 2018年,擁有1,000位IT人員和300位機器學習專家

● 2018年10月,首度宣布在開放創新平臺(OIP)提供「虛擬設計環境」VDE,讓客戶透過雲端進行晶片設計,也啟動第5個開放創新平台聯盟「雲端聯盟」,將雲端業者納入晶片設計製造生態系

● 2019年開始發展知識智慧化,利用AI來發展智慧排程與精準派工、提升人員生產力、優化機臺生產力、製程與機臺控制、品質監控。

● 2019年,IT軟體開發策略著重在雲端應用以及手機App開發,軟體開發流程更從瀑布開發模式,轉為DevOpsAgile開發模式。

數位轉型時期:加速數位轉型、發展全球化營運能力

● 2020年:因為疫情,加速數位轉型腳步,開始發展AR/MR跨廠遠端協同合作強化廠際技術移轉能力,推動數位工廠(Digitized Fab)的製造流程改造計畫,以及打造遠距辦公系統

● 2020年5月,台積宣布將在美國亞利桑那州設立先進晶圓廠,將於2021年動工,於2024年開始量產。2021年至2029年預計將投資約120億美元。

● 2020年中,展開5G企業內網規畫與部建

● 2020年12月,台積電IT首次線上大規模徵才,招募海內外IT業界人才,主要招募3大類人才:雲端平臺架構師、基礎建設架構師與工程師和資安維運工程師

● 2020年底成果:

【TSMC內部雲端軟體開發平臺】,整合DevOps流程和工具,支援上千名工程師開發。多數應用程式已轉移到Kubernetes環境,也採用微服務架構來設計軟體系統。

【2020台積IT基礎架構團隊三大工作重心】:運用各種基礎架構新技術(完整行動應用、導入協同合作和線上會議服務、雲端服務整合利用)協助企業數位轉型,資料中心透過軟體定義(虛擬化、容器化、基礎架構程式化)轉型成真正的私有雲、基礎架構持續創新(導入新世代5G、IoT製造、AIOps技術)

【2020台積AI和ML四大應用布局】:製程研發面:用AI協助理解高複雜高維度的製程開發挑戰。Fab量產面:用AI和ML分析感測資料和檢測影像,來進行品質檢驗、缺陷檢查,協助快速產生高品質的晶圓。業務面:市場動態分析大量使用AI,也用來分析顧客行為模式。IT維運:利用AI協助IT內部複雜系統的維運,異常偵測等。下一代智慧工廠發展策略,要結合行動應用、MR、IoT、大數據和AI來發展下一代AI工廠。

● 2020年底,公布【台積數位轉型五大方向】:用AI、大數據及尖端數位科技來打造智慧製造(如智能調機及機臺邊緣運算)、數位供應鏈管理高效能混合雲端運算及服務(將適合業務上雲,如雲端CRM和雲端HCM)、工作場所現代化(如內部行動App、RPA、智能會議室等)、團隊協作(如AR/MR遠端協作、使用者為中心的團隊協作合作平臺)。

● 2021年2月,找來曾任臉書企業平臺架構處長、Mozilla資訊技術副總的林宏達博士,擔任台積電資訊長。負責範圍涵蓋台積公司資訊技術相關業務,包括智能製造服務、高效能運算、數位化供應鏈、電子商務、團隊協同合作、現代化辦公室及資訊技術基礎架構等。

● 2021年5月,台積IT組織重組。台積IT目前規模超過上千人,分為四大處,人數最多的是技術系統整合處(Technology System Integration Division,簡稱TSID),負責智慧製造相關的系統,和工程技術的系統整合工作,主要任務是打造智慧製造工廠,機台自動化生產力和12吋廠自動化。

第二大部門是負責基礎架構的資訊建構既通訊服務處(Infrastructure & Communication Services Division,簡稱ICSD),主要任務是負責IT基礎建設和管理,雲端運算服務和網路資訊安全。只要設立新的廠區,ICSD就需要支援新設立的資料中心。

第三個部門是負責AI 相關的智慧應用整合處(AI Application Integration Division,簡稱AAID),主要任務包括了人工智慧易用、設計研發平臺、工程資料分析和8吋廠自動化。另外還要負責一些分析任務和8吋廠自動化工作。

最後一個處是企業系統整合處(Business System Integration Division,簡稱BSID),主要任務包括了電子商務系統、企業資源規劃(ERP)、供應鏈管理(SCM)、人力資源管理HCM等系統。

● 2021年,IT開發邁向Product模式:過去是開發和維運分開,每設立新廠,就設立資料中心和新維運團隊。現在改為Product模式,按照IT軟體產品來規劃,而不是依照工廠建廠來規劃。隨著相關自動化工具越來越完整後,也要將DevOps落實到台積IT各項流程。

● 2021年10月,再次大規模招募五大類IT人才,首度開始招募SRE工程師和DevOps工程師,另外還有軟體工程師、AI/ML工程師和資訊基礎架構工程師,其中以軟體工程師和DevOps工程師招募需求最大。2021年更開始舉辦3個月的新手訓練營,先用2個月集中訓練,學習各項台積IT所需的Cloud Native技術和DevOps工具鏈,再回到原單位進行一個月的就職訓練。

● 2021年,開始招募SRE團隊,大力發展基礎架構程式碼化(Infrastructure as code),使用軟體的方法管理TSMC全球資料中心、基礎架構硬體設計、建設和維運。

【2022年台積IT發展重點】

● 台積IT主要軟體產品都改為產品開發模式,也會使用DevOps來管理。包括MES、機台自動化、機台控制、品質管理、設備系統、製程良率分析、CRM、ERP、電子商務、生產資料主資料庫、供應鏈管理SCM和人資管理HCM

● 從Scale up(垂直擴充)邁向Scale out(水平擴充)
台積IT已經運用開源技術打造了台積私有的K8s環境(自建K8s而非商用K8s),將會逐漸將各項容器化的應用,轉移到這個TSMC K8s環境上。未來台積所有服務都會轉移到K8s上,更要大力發展全球資料中心維運能力,目標是要強化應用程式可靠性和快速回復能力,以公雲全球資料中心營運方式,作為學習的標竿。

圖片來源/台灣積體電路製造股份有限公司

一張圖表,了解台積電數位轉型發展史

下載連結 https://r.itho.me/tsdx22
(以CC-BY-NC-ND-4.0釋出,需標示作者姓名,非商業性使用、禁止改作)

【獨家披露】2022台積IT發展重點(下):新任CIO帶頭,台積IT展開2大變革支援全球營運

 轉貼自:https://www.ithome.com.tw/news/149124

到了2021年,台積數位轉型發展,進入了全新的階段,不只找來矽谷大將擔任CIO,推動開發模式大變革,台積IT更在2021年5月展開了組織重組,將台積IT超過上千人規模的團隊,分為四大處,人數最多的是技術系統整合處,在2022年,台積IT戰略更展開了2大發展重點

找來矽谷大將擔任CIO

到了2021年,台積數位轉型發展,進入了全新的階段,因為在這一年的2月,台積找來了曾任臉書企業平臺架構處長、Mozilla資訊技術副總的林宏達博士,擔任台積電資訊長。他負責範圍涵蓋了台積公司資訊技術相關業務,包括智能製造服務、高效能運算、數位化供應鏈、電子商務、團隊協同合作、現代化辦公室及資訊技術基礎架構等。台積IT團隊有了來自矽谷的新領導人,也更積極展開IT體質的大變革。

另一方面,也正是從2021年開始,台積IT的開發模式,邁向了Product模式。臺積IT過去是採取開發和維運分開的模式,每次設立一座新廠,就設立資料中心和新維運團隊。但是,現在改為Product模式,按照IT軟體產品來規劃,而不是依照工廠建廠來規劃。隨著相關自動化工具越來越完整後,也開始要將DevOps落實到台積IT各項流程中。

台積IT組織大重組,重新劃分為四大處

除了開發模式大變革,台積IT更在2021年5月展開了組織重組,將台積IT超過上千人規模的團隊,分為四大處,人數最多的是技術系統整合處(Technology System Integration Division,簡稱TSID),負責智慧製造相關的系統,和工程技術的系統整合工作,主要任務是打造智慧製造工廠,機臺自動化生產力和12吋廠自動化。

第二大部門是負責基礎架構的資訊建構既通訊服務處(Infrastructure & Communication Services Division,簡稱ICSD),主要任務是負責IT基礎建設和管理,雲端運算服務和網路資訊安全。未來,只要設立新的廠區,ICSD就需要支援新設立的資料中心。另外,負責AI 相關的智慧應用整合處(AI Application Integration Division,簡稱AAID)則是第三個部門,主要任務包括了人工智慧易用、設計研發平臺、工程資料分析和8吋廠自動化。另外AAID還要負責一些分析任務和8吋廠的自動化工作。

最後一個處是企業系統整合處(Business System Integration Division,簡稱BSID),主要任務包括了電子商務系統、企業資源規劃(ERP)、供應鏈管理(SCM)、人力資源管理HCM等系統。

2021年10月,台積再次展開大規模的IT招募活動,要招募五大類IT人才,除了軟體工程師、AI/ML工程師和資訊基礎架構工程師,更首度開始招募SRE工程師和DevOps工程師,其中以軟體工程師和DevOps工程師的招募需求最大,在台積IT旗下四個部門中,TSID、BSID和AAID都需要這兩類人才,而SRE工程師則是ICSD特別要招募的人才。

首度公開2022年台積IT發展重點

台積IT在今年的發展重點,將聚焦2大變革和5大方向,第一項變革是台積IT主要軟體產品都改為產品開發模式,也會使用DevOps來管理。這些軟體產品包括了MES、機臺自動化、機臺控制、品質管理、設備系統、製程良率分析、CRM、ERP、電子商務、生產資料主資料庫、供應鏈管理SCM和人資管理HCM等系統。

另一項變革則是,台積IT的發展策略,要從Scale up(垂直擴充)邁向Scale out(水平擴充)策略。一方面台積IT已經運用開源技術打造了台積私有的K8s環境,將會逐漸將各項容器化的應用,轉移到這個TSMC K8s環境上。甚至,未來台積所有服務都會轉移到K8s上,更要大力發展全球資料中心維運能力,目標是要強化應用程式可靠性和快速回復能力,以公雲全球資料中心營運方式,作為學習的標竿。

而對整體台積的數位轉型發展,也更聚焦5大發展方向,包括了「工作環境現代化」,例如居家上班、安全PC、RPA、智慧視訊會議、雲端辦公室、行動化等,第二個方向是高效能雲端運算應用,如雲端HCM、雲端HPC、雲端CRM等。第三個發展方向則要強化外部客戶、供應商及內部員工的協同合作,利用如AR/MR技術、遠端協作、Teams協作平臺、跨裝置通訊、全球網路架構等,另外,第四個方向則是持續發展生產製造的智慧化,包括LITHO(光刻)智慧工具、ETCH(蝕刻)製程AI控制、AI EDA(AI輔助電子設計自動化)、AI排程和運輸,以及遠端協作能力等。最後一項2022年的數位轉型方向則是「數位供應鏈的掌握與管理」,包括要發展Supply Online和TSMC-Online平臺、全球運籌和倉儲現代化,以及行銷智能平臺。

在2021年10月中這場校園招募上,台積電資訊長林宏達更是直言:「台積公司本身正經歷數位轉型,這是真實正在發生的事。我們擁有非常清晰的技術藍圖,也有想要達到的遠大願景。當來自矽谷和全世界的頂尖科技,遇上半導體創新和高度製造紀律,彼此交會將帶來什麼樣的火花?這是非常令人振奮的時刻。」

矽谷雲端原生技術大將擔任CIO ,台積IT展開新一波變革

在2021年2月,台積找來了曾任臉書企業平臺架構處長、Mozilla資訊技術副總的林宏達博士,擔任台積電資訊長。他所負責範圍,涵蓋了台積公司資訊技術相關業務,包括智能製造服務、高效能運算、數位化供應鏈、電子商務、團隊協同合作、現代化辦公室及資訊技術基礎架構等。

在加入台積公司之前,在2016至2018年間,林宏達擔任臉書(現為Meta公司)企業平臺架構處長,負責工程與軟體為主的營運,支援臉書業務的運算平臺、運行時間、網路、安全性、應用營運、資料營運、以及裝置營運。

2018年時,林宏達轉而進入Firefox瀏覽器的主要開發組織Mozilla公司,擔任資訊技術副總經理,負責策略設計及技術藍圖轉型,他也要負責利用微服務及雲端原生設計,來擴大Mozilla的業務架構規模。那一年正是Mozilla開始打造全球性VPN服務,要來發展新的業務類型,2年後,這項VPN服務也順利正式推出。

台積IT團隊有了來自矽谷的新領導人,在2021年更加積極展開了IT體質的大變革,不只在2021年展開IT組織重組,也將台積IT主要軟體產品都改為產品開發模式,並從Scale up(垂直擴充)的IT發展策略,轉為Scale out(水平擴充)的發展策略。另外,還開始強化對全球化營運的支援,特別在2021年開始招募SRE團隊,大力發展全球資料中心的維運能力,以公雲全球資料中心營運方式,作為學習的標竿。
 

台積電資訊長林宏達小檔案
學歷:● 美國加州大學柏克萊分校電機暨電腦資訊博士
經歷:● 台積公司企業資訊技術資訊長● 美國摩茲公司資訊技術副總經理● 美國臉書公司企業平台架構處長● 賽門鐵克工程暨架構營運副總經理

資料來源:台積官網,iThome整理,2022年1月

【獨家披露】2022台積IT發展重點(上):從自動化製造到智能化製造,全球化營運是台積IT新挑戰

 轉貼自: https://www.ithome.com.tw/news/149123

台積從自動化製造,發展到智能化製造,2020年因疫情加速數位轉型腳 步。台積IT架構、產品設計,如何從單一廠,可以支援到10座、20座, 甚至更多座的可能性?這正是台積數位轉型的新目標


「台積IT目前最大的挑戰是,晶圓廠越蓋越多,IT的軟體產品如何快速從一個廠,擴展到其他廠?台積IT架構、產品設計,如何從單一廠,可以支援到10座、20座,甚至更多座的可能性?」台積電IT主管Jenny Hu強調。在2021年10月15日,一場台積IT校園徵才活動中,Jenny Hu透露了台積IT當前最重要的戰略課題,「甚至是,如何監控這些IT系統的可靠度,發生問題如何快速恢復,這些都是台積 IT發展戰略未來的課題。」她的語氣既是興奮,又是急迫,正反映出台積IT一連兩年大舉招募IT人力的迫切需求。

2020年5月,台積宣布將在美國亞利桑那州設立先進晶圓廠,2021年動工,2024年要開始量產。這個上百億美元投資的海外設廠計畫,對台積IT帶來全新的挑戰。

因為一談到台積電的優勢,眾人第一個想到的就是台積在半導體技術上的領先和發展,但是鮮為大眾所知的是,IT軟體對台積電的重要性,遠超乎一般人的想像,甚至可以說,IT的重要性,不亞於半導體領先技術的價值。

台積競爭優勢的秘訣:跑在程式碼上的晶圓廠

「台積電如何維持競爭優勢,一個很重要的秘訣就是『跑在程式碼上的晶圓廠』(Fab runs on code)。」Jenny Hu解釋:「不管是半導體前瞻製程,或是全球製造能力,IT都是非常重要的支援夥伴。過去的高度自動化製造系統,到正在發展的智慧化和應用軟體,每一個單位都會用IT打造的系統和平臺。」

在2020年底,台積有史以來第一次舉辦線上IT徵才活動時,一位台積資訊主管就直言,台積一直用IT重新定義半導體的製造和生產。

當時台積電更首度公開了自家晶圓廠所採用的IT軟體架構,從生產製造相關的晶圓製造MES系統、機臺自動化,機臺控制系統等,另外還有品質管理、設備管理、製程良率分析等系統,還需要業務管理用的CRM、ERP、電子商務系統、產品資料管理、供應鏈SCM、HCM人資系統等,這些系統都是由台積IT所開發的軟體產品。正因為大量依賴軟體來支援生產製造,所以,才會說台積的晶圓廠是「跑在程式碼上的晶圓廠」。

30年台積IT發展,從全自動化、AI化到數位轉型

而這一路的發展,可以追溯到1995年展開的台積自動化旅程,在2000年從半自動邁進全自動化階段。在台積電於2021年6月公布的「109年度企業社會責任報告」中,台積更將全自動化後、AI化到現在數位轉型的歷程,分為三個階段,2000~2010年是自動化製造時期,以2000年作為自動化元年,開始發展機臺自動化、物料傳送自動化、晶圓派工自動化。

到了2011年,開始進入新的發展階段,這一年也是台積智能化元年,開始發展晶圓大數據,率先進入智慧化生產流程,將人工智慧導入晶圓製造。

而從2013開始,連續三年,台積以跨界培育人才為主,並且同步打造資料整合平臺和高效能計算環境,來發展機器學習平臺。到了2017年,開始強化智能系統,找來專家參與智能模型開發,建立專家知識庫(分析標的、製程特性、跨站相依性、資料預處理)來精進智能化製造。到了2018年時,台積已經擁有1,000位IT人員和300位機器學習專家,這群人成了智能化製造的關鍵戰力。

2018年10月,台積首度宣布在開放創新平臺(OIP)提供「虛擬設計環境 」VDE,讓客戶透過雲端進行晶片設計,也啟動第5個開放創新平臺聯盟「雲端聯盟」,將雲端業者納入晶片設計製造生態系。這是台積電大舉運用雲端技術的重要成果之一,也讓台積IT累積更多雲端原生技術能力。

台積在2019年開始發展知識智慧化,利用AI來發展智慧排程與精準派工、提升人員生產力、優化機臺生產力、製程與機臺控制、品質監控。

2019年,台積一方面持續大舉利用AI來發展智慧排程與精準派工、提升人員生產力、優化機臺生產力、製程與機臺控制、品質監控。另一方面,在IT軟體開發策略上,台積也開始著重在雲端應用以及手機App開發,值得一提的是,台積軟體開發流程更是大變革,從瀑布開發模式,轉為DevOps和Agile開發模式。這些基礎,都成了台積開始擁抱雲端原生架構,展開數位轉型的基礎。

2020年是台積數位轉型的關鍵第一年

2020年是台積從智能化製造,展開數位轉型的關鍵第一年。因為在這一年全球疫情開始暴發,雖然臺灣災情相對影響較小,但台積也因疫情而加快了數位轉型的腳步,開始發展AR/MR跨廠遠端協同合作、強化廠際技術移轉能力,推動數位工廠(Digitized Fab)的製造流程改造計畫,以及打造遠距辦公系統等。2020年中,更展開了5G企業內網規畫與部建。

台積電在2020年12月首次舉辦線上大規模徵才,要招募海內外IT業界人才。同時也首度公布了台積電數位轉型的五大方向,包括了用AI、大數據及尖端數位科技來打造智慧製造(如智能調機及機臺邊緣運算)、數位供應鏈管理、高效能混合雲端運算及服務(將適合業務上雲,如雲端CRM和雲端HCM)、工作場所現代化(如內部行動App、RPA、智能會議室等)、團隊協作(如AR/MR遠端協作、使用者為中心的團隊協作合作平臺)。也因為要發展這5大轉型方向,台積除了繼續招募AI/ML人才之外,也開始大舉招募3類IT人才:雲端平臺架構師、基礎建設架構師與工程師和資安維運工程師。

台積數位轉型初步成果首度公開

iThome在2021年初,獨家揭露了台積2020年底的數位轉型成果。第一類成果是台積一路從大數據和多年AI化發展後的成果,在AI和ML有4大應用布局。製程研發面,用AI協助理解高複雜高維度的製程開發挑戰。在Fab量產面,用AI和ML分析感測資料和檢測影像,來進行品質檢驗、缺陷檢查,協助快速產生高品質的晶圓。另外在業務面,市場動態分析大量使用AI,也用來分析顧客行為模式。最後一項在IT維運上,利用AI協助IT內部複雜系統的維運,異常偵測等。另外,台積也揭露了下一代智慧工廠的發展策略,要結合行動應用、MR、IoT、大數據和AI來發展下一代AI工廠。

另外一類則是台積IT自身的轉型成果,包括了首度公開的TSMC內部雲端軟體開發平臺,整合了DevOps流程和工具,來支援上千名工程師的開發工作。台積多數應用程式已轉移到Kubernetes環境,也採用了微服務架構來設計軟體系統。

2020年底,台積IT基礎架構團隊的工作也聚焦三大重心,第一是運用各種基礎架構新技術(完整行動應用、導入協同合作和線上會議服務、雲端服務整合利用)協助企業數位轉型,其次則要將台積的資料中心,透過軟體定義(虛擬化、容器化、基礎架構程式化)轉型成真正的私有雲。最後一項是基礎架構持續創新,例如導入新世代5G、IoT製造、AIOps技術。

如何面對擴大全球製造的挑戰是未來目標

台積在2020年5月宣布的海外設廠計畫,更讓台積IT感受到未來要面對的新挑戰。Jenny Hu指出:「台積雖然有很好的IT基礎,但是還不夠,接下來要面對擴大全球製造的挑戰,如何善用現在的雲端技術,是接下來努力的方向。」

尤其,在台積少數廠內,仍有大型主機實體設備,目前台積資訊基礎架構最大宗是虛擬機器,Jenny Hu坦言,台積IT逐漸會遇到垂直擴充(Scale-up)的擴充瓶頸。所以,台積開始構建自己的K8s,計畫將台積所有服務都會陸續部署到K8s上,以利展開快速轉型。「台積要持續成長,未來管理的伺服器數量,可能是現在的5倍,10倍,甚至更多。」

Semiconductor Companies Use SAS Software Support Engineers for Data Analysis (EDA)

Semiconductor manufacturing is a highly complex process that generates vast amounts of data. From equipment performance to product yield, e...