Try   HackMD

Introduction of streaming video recognition

tags: 5G Reading

Date : 2023-01-27

Take away

與電腦視覺相關應用最常使用的套件為openCV，YOLO則是在圖形辨識領域的開源深度學習模型，由Joseph Redmon開發訓練，openCV也提供了引用YOLO模型相關的界接API。

Summary

在5G應用其中一個特色為能夠傳輸超大頻寬，高清影像傳送便是其中一種途徑，在佈建5G專網同時若能夠借用此特性加以運用能夠為專網提供更多可能。本實驗針對圖形辨識為主題，套用openCV套件，並引用其中已經訓練好的YOLO模型進行辨識。從選用YOLO3開始；其底層為作者自行開發的Darknet架構，已能夠提供基本的辨識功能，優點為較通用的學習架構如tensorflow輕巧。最新一代模型為2023/1月發佈的YOLO8，以tensorflow為架構，能夠待應用成熟後更新辨識模型，或者自行訓練專網專用的辨識模型如於製造過程。

Note

  • Install library
pip3 install --upgrade pip # pip-21.3.1
pip3 install opencv-python==4.5.4.60 # opencv-python-4.5.4.60
pip3 install invisible-watermark
  • About darknet
    • Darknet的话一般指的是YOLO作者Joseph Redmon开源的神经网络框架，引作者自己的原话就是：Darknet is an open source neural network framework written in C and CUDA. It is fast, easy to install, and supports CPU and GPU computation.
    • YOLO是Joseph Redmon提出的演算法。Darknet是YOLO作者(Joseph Redmon)自己寫出來的deep learning framework，可以想像darknet是另一個tensorflow，但功能沒這麼強大，主要是用來實現YOLO系列的算法，但也是可以用來實現其它算法(效果可能沒這麼好)。你會有這個疑問應該因為YOLO文章寫YOLO的backbone(feature extractor)是用darknet19 or darknet53(這只是作者提出來的名字)。如果你有看YOLOv3的文章，作者用自嘲的寫法是說因為有53層，所以就命名為darknet53。
    • 相比于TensorFlow来说，darknet并没有那么强大，但这也成了darknet的优势：
      • darknet完全由C语言实现，没有任何依赖项，当然可以使用OpenCV，但只是用其来显示图片、为了更好的可视化；
      • darknet支持CPU（所以没有GPU也不用紧的）与GPU（CUDA/cuDNN，使用GPU当然更块更好了）；
      • 正是因为其较为轻型，没有像TensorFlow那般强大的API，所以给我的感觉就是有另一种味道的灵活性，适合用来研究底层，可以更为方便的从底层对其进行改进与扩展；
      • darknet的实现与caffe的实现存在相似的地方，熟悉了darknet，相信对上手caffe有帮助；

Experiments

  • 輸入指定圖形辨識

    Image Not Showing Possible Reasons
    • The image file may be corrupted
    • The server hosting the image is unavailable
    • The image path is incorrect
    • The image format is not supported
    Learn More →

  • 輸入指定影片辨識

    Image Not Showing Possible Reasons
    • The image file may be corrupted
    • The server hosting the image is unavailable
    • The image path is incorrect
    • The image format is not supported
    Learn More →

  • 串流辨識

    Image Not Showing Possible Reasons
    • The image file may be corrupted
    • The server hosting the image is unavailable
    • The image path is incorrect
    • The image format is not supported
    Learn More →

Reference

https://pypi.org/project/opencv-python/
https://ithelp.ithome.com.tw/articles/10239903
https://ithelp.ithome.com.tw/articles/10251665
https://github.com/muhammadshiraz/YOLO-Real-Time-Object-Detection
https://dotblogs.com.tw/shaynling/2017/12/28/091936

Last changed by 
 
Developer-journal
Notes for learning
0
94

Read more

Introduction of Watermark in Security Applications

Date : 2023-02-03 Take away 浮水印，是指將特定的資訊嵌入數位訊號中，數位訊號可能是音訊、圖片或是影片等，分為浮現及隱蔽兩種。隱藏式的浮水印是以數位資料的方式加入音訊、圖片或影片中，但在一般的狀況下無法被看見。隱藏式浮水印的重要應用之一是保護著作權，期望能藉此避免或阻止數位媒體未經授權的複製和拷貝。隱寫術（Steganography）也是數位浮水印的一種應用，雙方可利用隱藏在數位訊號中的資訊進行溝通。數位相片中的註釋資料能記錄相片拍攝的時間、使用的光圈和快門，甚至是相機的廠牌等資訊，這也是數位浮水印的應用之一。某些檔案格式可以包含這些稱為「metadata」的額外資訊。 Summary 浮水印技術主要應用在本次專案構想中的安全通訊，作為軟體版本更新前的替代方式。透過外部的資料庫連接，加上浮水印加密技術於不同應用程式間的存取，能夠確保取得的資訊內容之真實性，保護資訊安全中的資料完整性。 Note 相同的浮水印加密技術除了應用在軟體的資訊溝通，也能應用在其他不同的媒介(如: 文字、聲音、硬體、微波等)

Feb 7, 2023
懂權力，在每個角色上發光

Date : 2023-01-27 Metadata Book link 作者：黛博拉．葛倫費德(Deborah Gruenfeld) 出版社：天下雜誌 出版日期：2021/08/25 類別：商業理財>成功法>自我成長

Feb 4, 2023
Introduction of hologram

Date : 2023-01-20 Take away 全息投影技術（front-projected holographic display）也稱虛擬成像技術，利用干涉和衍射原理記錄並再現物體真實的三維圖像的技術。 Summary 全息投影技術由英國匈牙利裔物理學家丹尼斯·蓋伯於1947年發明，起初用於電子顯微技術中，在這個領域中被稱為電子全息投影技術，但一直到 1960年雷射光的發明後，全息投影才取得了實質性的進展。著名應用場景包含演唱會、遠端手術等。 Note 全息投影技術本質就是實現三維圖像的記錄和再現。記錄，利用干涉原理記錄物體光波信息。一般的三維圖只是在二維的平面上通過構圖及色彩明暗變化實現人眼的三維錯覺，而全息影像則包含了被記錄物體的尺寸、形狀、亮度和對比度等信息。觀眾可以通過多角度來觀看圖像在不同角度的形態變化，就像有個真實的物體在那裡一樣。當然，現在的技術已經不再局限於記錄真實的影像，還可以製作完全虛擬的三維數字影像。

Jan 23, 2023
逆向工程，你我都能變優秀的秘訣:全球頂尖創新者、運動員、藝術家共同實證

Date : 2023-01-20 Metadata Book link 作者：朗恩‧傅利曼 出版社：方智出版 出版日期：2022/02/01 類別：商業理財>成功法>自我成長

Jan 20, 2023
Read more from Developer-journal
Published on HackMD