12/31/2024 跨年夜

Vision Model

YOLOv9

YOLO (You Only Look Once) v9 是一個深度學習物件偵測模型系列的最新版本。

主要特點:

• 比舊版本如 YOLOv8 更快、更準確
• 改進的主幹網路架構,增加了模型對物體的識別能力
• 更高效的資源利用,可以在較低配置的設備上運行
• 更好的小物件偵測能力

應用場景:

• 即時影像監控和分析
• 自動駕駛車輛的物件識別
• 工業生產線的品質檢測
• 醫學影像分析
• 智慧零售中的商品識別

這種技術之所以叫「You Only Look Once」,是因為它只需要看一次圖片就能同時:

1. 定位出物件在圖片中的位置 (用邊界框標示)
2. 辨識出物件的類別 (例如是人、車、貓等)
3. 計算出辨識結果的信心分數

LLaVA (Large Language and Vision Assistant) 模型

LLaVA是一個多模態AI模型,它結合了:

1. 視覺編碼器(Vision Encoder):

• 使用Vision Transformer (ViT)架構
• ViT將圖像分割成小塊(patches)
• 通過自注意力機制處理這些圖像塊
• 輸出圖像的向量表示

2. 大語言模型(LLM):

• 接收ViT處理後的圖像特徵
• 將圖像特徵與文本輸入結合
• 能夠理解圖像內容並用自然語言回應

主要特點：

• 端到端訓練
• 可以看圖回答問題
• 可以描述圖像內容
• 支援多輪對話
• 具備視覺推理能力

給它看一張貓的圖片,它不僅能認出這是貓,還能描述貓的顏色、動作、周圍環境等。

AI 在日常生活中的應用與服務設計

 目前AI 雲端運用如 ChatGPT, Claude, Gemini 等皆無法保證你輸入的資料不被用作訓練或外流，請謹慎使用。  

為避免隱私外流，請注意勿上傳個人隱私資料如身分，金融，病史...至雲端AI 。

家中與環境安全檢測

危害鏈

營養與熱量

旅遊

規劃旅遊行程 Plan an itinerary 

Monte Carlo

upload photo to generate Python code

change to js

Visualize (mistaken)

Fix it

Simulate with 1000 pts w/o animation

add animation

refresh every second

Monte Carlo Code

 

Spectrum Auction in Game Theory

 

game theory

競爭頻譜

公司每日策略

autoplay

策略分析

color coding

Reasoning vs. Heuristics for AI

 

• A* search

• Reasoning vs. Heuristics for AI

題目來自網路

A* search

 

A* search algorithm

one more

initial

avoid obstacles(aesthetics)

considering Voronoi

Visualize TSP (Traveling Salesman Problem) by A* search (一個推銷員要拜訪所有客戶城市，每個城市只能拜訪一次，最後要回到出發城市，請為他/她計算最短的拜訪路徑)

Add editing on canvas by click and drop. (在網頁畫布上直接增加刪除城市)

分享研究經驗

 

#10 AI for workplace II

  課堂練習 

Deadline: This is an in-class exercise. 無需繳交作業。

使用 Claude Sonnet 3.5 

ChatGPT 4o

0. 使用賽局理論制定你的公司(學校，個人)的關鍵策略

光明vs黑暗

台灣案例

1. 為你的公司(學校)，依據產業屬性，開發高階主管戰情室(或Dashboard)

2. 設計一個包裹品質檢測軟體，包裹照片請從網路搜尋，包裹可能有受潮，毀損，壓傷，正常等各種狀況

賽局理論的實際運用

 

Prisoner's Dilemma Game

Rat Race

Free from Rat Race

使用賽局理論進行策略分析(Eng)

國際案例

台灣案例

社會住宅政策分析，效益

社會住宅（game theory）

#9 AI for workplace I

  課堂練習 

Deadline: This is an in-class exercise. 無需繳交作業。

使用 Claude Sonnet 3.5 

ChatGPT 4o

1.　選定一個主題進行ＳＷＯＴ分析，例如購屋ｖｓ租屋，開車ｖｓ騎車，就業 vs 創業，大公司 vs. 新創公司

世界局勢ＳＷＯＴ

產生SWOT文字

使用繁體

use REACT

2.依據 世界局勢ＳＷＯＴ，製作兵棋推演（世界），世界兵棋推演模擬器

兵棋推演（台海）, 台海兵棋推演模擬器

3. 為你的公司(學校)，依據中長程目標，設計發展策略模擬器

4. 為你的興趣(職棒，動漫，登山，追劇，閱讀，親子，交友 ...) 設計發展策略模擬器

兵棋推演模擬器

 世界局勢ＳＷＯＴ

兵棋推演（世界）

從SWOT 轉兵棋推演

兵棋推演模擬器

從兵棋推演轉模擬遊戲

兵棋推演（台海）

接世界兵棋推演，改提示台灣之後，內容隨之改變

兵棋推演模擬器

從台海兵棋推演轉模擬遊戲

為了加快回應，省位未修改處，程式碼不完整

修復完成，程式碼完整

提示策略模組排版矩陣化

增加autoplay

 提示 code complete

再次使用系統提供的修復功能，然後再次提示 code complete

生成

加上 highlight 功能，最終版完成

商業策略模擬

企業經營

餐飲管理

學校發展

中原大學

\

台灣大學