Financial Statement OCR – DL Application in E.SUN Financial Holdings

[jazzwang]

• 講者姓名 Name: 李杰恩
• 單位名稱 Organization & Job Title: 玉山銀行數位金融處 / 機器學習工程師
• 講者簡介 Self Introduction:

商學院出身的工程師，近期主要涉略領域為影像辨識技術。喜歡研究各種投資機會且有果斷的執行力。

• 演講主題 Talk Topic: Financial Statement OCR – DL Application in E.SUN Financial Holdings

• 講題摘要 Abstract:

財政部國稅局所得清單，以往從拿到實體文件到建檔進 database，需要透過人力分類、建檔，流程上速度較慢、成本高。為了讓整個流程自動化，需要解決兩個問題：影像定位 (財政年度、身分證字號、所得額合計) 以及影像辨識。專案團隊利用 YOLO 模型定位，再透過文字偵測模型修正定位結果，提升整體定位的 IOU (intersection over union)，最後透過 CRNN+CTC 之模型框架訓練文字辨識模型，預測出最終的辨識結果。模型建置完成後，將辨識模型與 workflow (input image -> response result) 包裝成 API 服務，需求單位可以直接透過呼叫 MLaaS (Machine Learning as a Service) 來取得影像辨識結果，並將結果收進資料庫，未來便可以快速取得顧客的財政資料。