|
萊迪思半導體白皮書(shū) 2020年7月 COVID-19新冠病毒的爆發(fā)讓人們的工作狀態(tài)發(fā)生了巨大變化，筆記本電腦市場(chǎng)也因此繁榮了起來(lái)。早在病毒蔓延全球之前，行業(yè)分析公司Gartner就曾在2020年1月指出：“Windows 10升級的強勁業(yè)務(wù)需求讓PC市場(chǎng)自2011年以來(lái)首次出現增長(cháng)，尤其是在美國、歐洲、中東和非洲（EMEA）以及日本市場(chǎng)�！睘榱嗽谶@個(gè)日益興盛的市場(chǎng)中保持競爭力，筆記本電腦的OEM廠(chǎng)商希望通過(guò)采用新技術(shù)和增添新應用來(lái)提高生產(chǎn)力，從而使其產(chǎn)品獲得差異化優(yōu)勢。雖然其中許多技術(shù)最初是用于智能手機等設備，但它們同樣可以在筆記本電腦上大放異彩，使之一方面擁有成熟筆記本電腦的強大功能，另一方面又獲得移動(dòng)設備的便捷和安全性，并很好地適應周?chē)h(huán)境。 筆記本電腦上的許多新功能都可以通過(guò)軟件實(shí)現，但是這會(huì )縮短電池使用時(shí)間。為了解決這個(gè)矛盾，萊迪思半導體正著(zhù)手開(kāi)發(fā)基于硬件的方案，以極低的功耗實(shí)現更高的性能，同時(shí)由于采用了萊迪思的FPGA器件，為未來(lái)的升級提供了極大便利。由于FPGA能在現場(chǎng)重新編程，OEM廠(chǎng)商還可以通過(guò)下載軟件和固件更新，在硬件上實(shí)現新的應用，而無(wú)需重新設計硬件。 筆記本電腦的使用不斷增長(cháng) 曾有人預測筆記本電腦將被智能手機和平板電腦取代，然而由于工作環(huán)境的改變和新興技術(shù)的發(fā)展，筆記本電腦的使用不降反增。云計算和無(wú)處不在的寬帶連接意味著(zhù)員工在工作場(chǎng)所之外也同樣可以保證不錯的生產(chǎn)力。由于筆記本電腦配備全尺寸鍵盤(pán)、高分辨率顯示屏和攝像頭，通常是電子郵件、文字處理和視頻會(huì )議等商務(wù)生產(chǎn)力應用的首選。 盡管許多圍繞省電和人工智能（AI）的技術(shù)創(chuàng )新大多應用于智能手機平臺，它們同樣可以應用于筆記本電腦，且不影響其功耗。例如，筆記本電腦的顯示屏是主要耗電來(lái)源，我們可以對用戶(hù)進(jìn)行智能監測，確定用戶(hù)的注意力是否在電腦屏幕上，當用戶(hù)的注意力轉移到別處時(shí)，可以自動(dòng)降低屏幕亮度，從而大大延長(cháng)電池壽命。這一應用已經(jīng)在智能手機上廣泛使用，如今在筆記本電腦上也可以獲得類(lèi)似的體驗。 AI日益普及 盡管AI仍是一個(gè)潛力無(wú)限的新興領(lǐng)域，但它正不斷向消費者展現其巨大價(jià)值。有些AI應用已經(jīng)成為主流，用戶(hù)也十分滿(mǎn)意它們帶來(lái)的便利。人臉識別就是其中之一，特別是作為智能手機上的安全功能大行其道。它現在還廣泛用于全球的機場(chǎng)，在旅客通過(guò)出入境關(guān)口時(shí)追蹤進(jìn)入或離開(kāi)該國的旅客。在這幾種情況下，攝像頭都能識別出面部，增強了計算機用戶(hù)（或進(jìn)入某國的游客）對其身份的判斷的可信度。如今，消費者逐漸對AI體驗感到滿(mǎn)意，他們期望人臉識別之類(lèi)的智能視覺(jué)功能可以在筆記本電腦上得到更廣泛的應用。 安全和隱私 臺式機的安全和隱私固然十分重要，但是筆記本電腦則更甚。無(wú)論是用于工作還是個(gè)人使用，安全性和隱私（盡管在技術(shù)上屬于不同的概念）可以視作一個(gè)要求，因為保護敏感數據的安全性能需求與保證該數據私密性的需求密不可分。 我們都知道保護安全和隱私通常意味犧牲便捷。盡管那些繁瑣的安全措施能夠保護在公共區域使用的筆記本電腦，但是到了熟悉可控的環(huán)境中，例如工作場(chǎng)所或家里，這些措施會(huì )令人煩惱，甚至沒(méi)有必要。 筆記本電腦可以使用AI來(lái)識別場(chǎng)景，這樣做的好處就是它可以根據自身所處的位置調整安全設置。在家里使用時(shí)，由于客觀(guān)風(fēng)險較小，就可以調整設置更便于使用。相比之下，在咖啡廳里使用時(shí)，由于面對的是陌生的環(huán)境和人，可以自動(dòng)提高安全設置。 當然，這不僅僅是檢測筆記本電腦所處的環(huán)境那么簡(jiǎn)單。負責掃描環(huán)境的攝像頭還可以檢測用戶(hù)起身離開(kāi)的動(dòng)作，例如去倒咖啡或去洗手間。然后，計算機可以快速自我鎖定，無(wú)需用戶(hù)進(jìn)行鎖屏。同樣，攝像頭還可以檢測到其他人從后方窺視用戶(hù)的屏幕，從而采取措施阻止未經(jīng)授權的用戶(hù)觀(guān)看屏幕。如今計算機入侵事件層出不窮，AI還可以幫助監視計算機內部行為和活動(dòng)，向用戶(hù)報告任何的可疑事件。 以上列舉了筆記本電腦的一些升級的案例，旨在滿(mǎn)足現代工作者的需求和期望。由于篇幅有限，本文只涉及兩種筆記本電腦的發(fā)展趨勢： • 實(shí)時(shí)在線(xiàn)和瞬時(shí)啟動(dòng)的特性。主要目的是省電。 • 全新的筆記本電腦形態(tài)。這意味著(zhù)可以將屏幕與機身分離、嘗試全新的筆記本電腦形狀或者折疊筆記本電腦和屏幕。 萊迪思FPGA（尤其是iCE40 UltraPlusTM 和CrossLink-NX™ FPGA）以及用于實(shí)時(shí)在線(xiàn)網(wǎng)絡(luò )邊緣AI應用的Lattice sensAI™解決方案集合提供了在未來(lái)的筆記本電腦中實(shí)現這些功能的有效途徑。而且，其功耗要遠遠低于基于A(yíng)SIC的方案。 實(shí)時(shí)在線(xiàn)和瞬時(shí)啟動(dòng) 如今，筆記本電腦進(jìn)入睡眠或喚醒狀態(tài)只有三種操作方式：按下按鈕（可能是用鼠標），合上機蓋或等待電腦進(jìn)入睡眠。新款的筆記本電腦可能會(huì )通過(guò)語(yǔ)音命令喚醒。 筆記本電腦面臨的主要問(wèn)題在于其SoC芯片。SoC負責控制筆記本電腦中進(jìn)行的各類(lèi)活動(dòng)，因此，它參與了電腦執行的絕大多數任務(wù)。SoC包含CPU核心，可能還包括其他處理電路和外設電路，它在工作時(shí)會(huì )消耗大量能量。 由于SoC參與了筆記本電腦的大量活動(dòng)，因此在系統（尤其是SoC）休眠時(shí)，電腦幾乎無(wú)法處理任何任務(wù)。睡眠期間可用的功能就是和喚醒系統相關(guān)的選項。其他任務(wù)都無(wú)法在睡眠的系統上運行。在某些情況下，如果需要處理特定的任務(wù)（如下載電子郵件、網(wǎng)絡(luò )監控等），工作功率會(huì )達到100毫瓦，大大減少了電池使用時(shí)間。 如果筆記本電腦擁有響應傳感器信號的AI功能，那么即使SoC處于睡眠狀態(tài)，電腦也可以執行許多任務(wù)。AI功能可以在SoC睡眠時(shí)工作或做出決策，要么喚醒SoC開(kāi)展進(jìn)一步的工作，要么讓SoC保持睡眠狀態(tài)，讓AI處理所需完成的任務(wù)。低功耗FPGA是實(shí)現AI功能的理想硬件平臺。它們擁有足夠的處理能力執行基本的AI任務(wù)（例如存在檢測），功耗卻比SoC低得多。如果AI確定需要SoC參與任務(wù)，則將其喚醒，配合AI進(jìn)行處理或采取其他措施。 
萊迪思sensAI解決方案集合可搭載iCE40 UltraPlus、ECP5™和CrossLink-NX FPGA，輕松實(shí)上述AI功能。但是目前為止，此類(lèi)AI大多應用于物聯(lián)網(wǎng)（IoT）設備。例如，智能門(mén)鈴可能具有以下功能： • 檢測人員和其他物體（如包裹）的存在。 • 檢測和/或識別出特定的人臉或人�？梢允亲詾槭跈嘤脩�(hù)的特定人員（例如房屋的居住者），也可以是經(jīng)常路過(guò)門(mén)鈴攝像頭的人員，例如身穿制服的快遞員或園丁。 • 理解一些手勢或語(yǔ)音命令。將面部識別與語(yǔ)音關(guān)鍵詞或密碼驗證相結合，可以實(shí)現雙重身份驗證登錄，提高安全性。 • 利用兼容各類(lèi)傳感器的推理引擎來(lái)最大程度地減少傳輸到云端數據。 在此類(lèi)應用中，萊迪思FPGA能夠在SoC不工作的狀態(tài)下，在更低功耗下提供比獨立CPU更高的性能，因為CPU必須通過(guò)軟件執行任務(wù)，而FPGA采用效率更高、基于硬件的實(shí)現。例如，控制智能門(mén)鈴或監控攝像頭的CPU每秒可處理1-2幀，而功耗卻高達100 mW。 萊迪思iCE40 UltraPlus FPGA在7 mW功耗下每秒可處理5幀，性能為前者的3-5倍，功耗僅為前者的十四分之一。 如果萊迪思的sensAI解決方案可用于智能門(mén)鈴或監控攝像頭，則同樣適用于筆記本電腦，實(shí)現以下功能： • 檢測用戶(hù)何時(shí)觀(guān)看屏幕。當用戶(hù)的視線(xiàn)離開(kāi)屏幕時(shí)，調暗屏幕節省電量；注意力重新聚焦屏幕時(shí)，增加屏幕亮度。 • 根據筆記本電腦所處的位置調整安全設置。 • 檢測用戶(hù)的視線(xiàn)方向。這可以簡(jiǎn)化通常需要鼠標的任務(wù)。眼部跟蹤可以避免手動(dòng)操作某些頻繁出現的任務(wù)。 • 優(yōu)化圖形渲染的功耗�？梢灾�(zhù)重渲染用戶(hù)正在觀(guān)看的屏幕部分。其余部分保持相對模糊或較低的渲染效果，從而節省電量，直到用戶(hù)視線(xiàn)轉移到屏幕的其他部分。 • 通過(guò)玩家的眼睛移動(dòng)影響游戲的敘述軌跡。 • 檢測是否有人在用戶(hù)背后偷窺。 • 沒(méi)人使用筆記本電腦時(shí)，調暗屏幕以節省電量。 下面的示意圖說(shuō)明了萊迪思iCE40 UltraPlus FPGA如何分擔筆記本電腦SoC的一些AI處理工作。
在此設計中，傳感器接口收集各個(gè)傳感器的輸入，在FPGA的神經(jīng)網(wǎng)絡(luò )（NN）加速器中進(jìn)行處理，并在片上SRAM存儲處理神經(jīng)網(wǎng)絡(luò )所需的權重和激活值。如果需要進(jìn)一步處理，加速器則做出決策，喚醒SoC。 AI功能的構建采用了萊迪思sensAI解決方案集合的各種資源以及iCE40 UltraPlus和CrossLink-NX FPGA。設計人員可以使用完善的軟件工具和整套設計工具，進(jìn)一步調整在Caffe、Keras、MobileNet、ResNet、SSD和TensorFlow等主要框架上訓練的網(wǎng)絡(luò )。sensAI包括了參考設計、演示板、IP核和硬件平臺，可用于開(kāi)發(fā)各類(lèi)常見(jiàn)的AI應用（例如存在檢測、對象計數、面部識別等）。萊迪思還提供定制設計服務(wù)，讓開(kāi)發(fā)人員快速實(shí)現AI功能，而無(wú)需全方位學(xué)習如何開(kāi)發(fā)和實(shí)現AI應用。
減少信號數量，邁入全新形態(tài) 現代筆記本電腦面臨的第二個(gè)挑戰是如何超越傳統的外觀(guān)。這涉及到筆記本的靈活性，例如從中間將屏幕折疊將其收起。筆記本電腦的設計面臨著(zhù)大量信號傳輸的難題，這些信號又涉及到眾多協(xié)議。 一種簡(jiǎn)單的處理方法是通過(guò)信號聚合來(lái)減少信號數量�？梢詫⒍鄠�(gè)低帶寬接口復用到單個(gè)更高帶寬的信號上，然后再進(jìn)行解復用，大大優(yōu)化了筆記本電腦的布線(xiàn)。它使電路板之間的連接更簡(jiǎn)單，還能簡(jiǎn)化電路板上的布線(xiàn)，還意味著(zhù)能夠大大減少穿過(guò)鉸鏈或其他柔性元件的線(xiàn)路。并且由于減少了連接器數量，可靠性也得到增強。 信號聚合可以在單線(xiàn)或一對LVDS上實(shí)現。萊迪思的FPGA可以提供諸多性能選擇來(lái)傳輸這些信號，從而為最高效的設計實(shí)現提供方案。例如，一片iCE40 UltraPlus FPGA可以以在單線(xiàn)上實(shí)現7 Mbps的傳輸速率。使用更高性能的萊迪思FPGA，可以實(shí)現更高的帶寬聚合速度。 然而，問(wèn)題在于，不同的信號可能采用不同的協(xié)議進(jìn)行傳輸�？梢酝ㄟ^(guò)類(lèi)似于傳感器集線(xiàn)器（Hub）的I/O集線(xiàn)器來(lái)解決這一難題。該集線(xiàn)器可聚合不同類(lèi)型的本地I/O信號，并將其復用到數量較少的高速線(xiàn)路上。這些線(xiàn)路連接另一端的I/O集線(xiàn)器，信號在此被還原為最初的協(xié)議類(lèi)型。
萊迪思的FPGA提供用于接收I/O信號并傳輸多路復用信號的物理硬件。萊迪思還提供用于構建I/O集線(xiàn)器的IP。信號聚合可適用各類(lèi)傳感器，因此不同類(lèi)型的傳感器（RGB、IR、激光雷達、雷達等）數據流或通過(guò)不同總線(xiàn)類(lèi)型（I2C、I2S、UART、GPIO）傳輸的信號可以聚合在同一引腳或線(xiàn)路上。萊迪思在智能手機的信號聚合方面長(cháng)期積累了豐富的經(jīng)驗，這些同樣適用于筆記本電腦上的傳感器聚合應用。 萊迪思助您打造未來(lái)的筆記本電腦 工程師們正努力開(kāi)發(fā)全新的筆記本電腦，為用戶(hù)提供類(lèi)似智能手機和平板電腦的使用體驗。與今天的產(chǎn)品相比，未來(lái)的筆記本電腦將更易于使用、電池壽命更長(cháng)并且更加安全。 功耗和外形尺寸方面的改進(jìn)將最為顯著(zhù)。筆記本電腦將通過(guò)節電技術(shù)，讓用戶(hù)可以連續使用一整天或更長(cháng)時(shí)間。它們還將變得更加靈活、便攜。 而萊迪思FPGA將是筆記本電腦實(shí)現這些新功能的關(guān)鍵。在SoC之外處理工作可延長(cháng)SoC的睡眠狀態(tài)，僅在需要使用其計算能力時(shí)才將其喚醒，這將大幅降低功耗。在硬件上實(shí)現AI以及傳感器集線(xiàn)器，可以連接多個(gè)攝像頭、麥克風(fēng)和其他傳感器，意味著(zhù)SoC停止工作的時(shí)間更長(cháng)。聚合多路信號的I/O集線(xiàn)器有助于減少信號數量，實(shí)現基于A(yíng)I的傳感器聚合，筆記本電腦的構建因此更加簡(jiǎn)單，還能提供更豐富的用戶(hù)體驗。 萊迪思的FPGA為這些集線(xiàn)器提供了硬件平臺，sensAI解決方案集合則使AI功能更易實(shí)現。兩者結合可以幫助開(kāi)發(fā)人員制造更輕便、功耗更低的筆記本電腦，為2020年代的企業(yè)和個(gè)人用戶(hù)提供更強大的生產(chǎn)力工具。 參考資料 1https://www.gartner.com/en/newsr ... -says-worldwide-pc- shipments-grew-2-point-3-percent-in-4q19-and-point-6-percent-for-the-year |
