這是新年的第一天,也是我們應該總結過去的1天;伴隨著滿屏的“新年快樂”,奧唯思在祝福聲中,向您匯報我們《2023年的工作總結》。
這是奧唯思的第一年,因為我們終于開始了我們的說好的事業(yè)。
但這也是艱難的第一年,不僅因為萬事開頭難,也因為后疫情時代,國內經濟從未有過的低迷,半導體雪崩的今天,我們承受著初創(chuàng)企業(yè)未曾有過的坎坷與困難。夾雜著強烈的求生欲望,我們不希望自己倒在起跑線上。
相比未來,也許當下又是經濟好的一天,因此我們同樣沒有再來一次的機會。乘上了這條船,走上了這條不歸路,我們未曾想過退路;即便風雨兼程,我們也只能堅持走下去,走出一條屬于奧唯思自己的路。
回首2023,我們做了很多的嘗試,或對或錯,于公于私,只為能夠堅挺走完奧唯思的第一年:
2023.2月,我們租下了南山睿園的一個辦公室。沒有投資,沒有規(guī)模,甚至沒有采購辦公桌椅,隨著南下的兄弟到位,我們開始踏上了這條不歸路:2個人,2個電腦,2個不認命的程序員。
萬事開頭難,我們沒有可下蛋的雞,甚至沒人聽說過奧唯思成功不能借鑒,但失敗可以學習;試錯成本很高,但這無法避免。憑著人均15年的FPGA開發(fā)經驗,因此我們開始了一切可能與不可能的嘗試。
<1>FPGA圖像類開發(fā)板
1)易靈思FPGA圖像開發(fā)板
由于易靈思獨特的低功耗以及在MIPI RX/TX領域的IP,在圖像行業(yè)有著較大的優(yōu)勢。同時也因我們的出生(為FPGA圖像而生)我們嘗試著設計Trion 40nm系列T35,以及鈦金16nm系列Ti60的FPGA圖像開發(fā)板,專門針對MIPI采集顯示,以及攝像頭開發(fā)等客戶提供易靈思FPGA開發(fā)平臺,如下所示(目前淘寶上銷量第一的易靈思FPGA開發(fā)板):
鑒于我們的成果與付出,我們成功援助了11月份的FPGA設計大賽(易靈思);同樣也感謝易靈思對我們的認可:我想,互惠與利益,都是相互的。
2)紫光FPGA圖像開發(fā)板
在控制領域,或者說非MIPI應用、非低功耗領域,紫光同創(chuàng)的產品其實也有一定的優(yōu)勢;加上目前國產FPGA規(guī)模大,份額大的也是紫光同創(chuàng),因此我們也想嘗試著想拓寬一下國產FPGA的應用。鑒于此,在原廠銷售的支持下,我們設計了基于Logos2 100K FPGA(PG2L100H676)的視頻圖像處理開發(fā)板,填補了紫光同創(chuàng)在圖像行業(yè)的FPGA開發(fā)板解決方案空缺,如下:
我們想著在有限的時間內,如果能盡可能地幫助大家在FPGA圖像解決方案的落地,這也是我們奧唯思存在的價值。因此耗時數月+幾個版本,終于落地了一套100K的FPGA圖像開發(fā)板。
由于某些原因,承受了一萬點打擊的我們,只能很遺憾地退出,并且停止了關于更多紫光FPGA開發(fā)板的研發(fā)及資料的更新(可憐的庫存)。隨后很多采購別家產品的朋友,尋求我們支持圖像與PCIE的設計,但我們也很遺憾的表示抱歉了,畢竟我們還得繼續(xù)風雨兼程。
此外,由于紫光的PG2L100H676 P2P兼容Xilinx的XC7A100K FPGA,為了不至于讓3個月的努力打水漂,我們第一時間推出了Xilinx版本的100K FPGA圖像處理開發(fā)板,并且100%移植了《基于MATLAB與FPGA的圖像處理教程》的FPGA算法源代碼,如下:
2024即將進行的ISP相關設計的教程與培訓,將會基于這套平臺,發(fā)光發(fā)熱!
3)思特威CMOS模組
除了Sony與ONSE,傳感器第三家應該算思特威,并且在國產圖像應用領域,思特威占了絕大部分的國產份額。因此支持國產,同樣我們也希望引入思特威的傳感器。當國產FPGA配上國產CMOS傳感器,口感與味道,可以更上一層樓。感謝思特威的SC130GS與SC2210,這兩款傳感器帶動了我們部分平臺的落地,以及在線上線下的銷量。
以下是2023我們開發(fā)的思特威的CMOS傳感器,包括MIPI及DVP接口,以及不同的靶面特性,歡迎感興趣的朋友前來咨詢合作:
奧唯思可提供的完整的MIPI Sensor解決方案,并且已經成功交付多個量產客戶,2024年,奧唯思將新設計SC235HS高性能全局200W相機,敬請期待。
<3>FPGA圖像類項目
1)基于Lattice NX100的SLVS-EC3.0相機
作為除了MIPI標準外的另一個重要分支,Sony這些年也在高分高帶寬Sensor上推SLVS-EC3.0接口。該接口目前Xilinx官方沒有IP,如果還要考慮FPGA的成本,全球僅Lattice一家官方提供了SLVS-EC3.0 IP。為此,我們耗費了2023年一半的的人力物力,幫甲方爸爸設計基于IMX472的SLVS-EC3.0采集+MIPI發(fā)送CPU的原型樣機,并且完成了交付。
其中我們耗費了1/2的Schedule,在幫Lattice磨EC3.0的IP。由于IP本身比較新,同時也還沒有經過量產測試,我們經歷了九九八十一難,在幫原廠修正了數個bug后,終于得以調通此解決方案,成為國內第一家基于lattice SLVS-EC3.0實現成熟解決方案的公司。
截至目前,奧唯思已經成功支持了3個客戶SLVS-EC3.0的解決方案,并且不斷地完善IP feature之外的內容。付出與回報成正比,感謝Lattice原廠對我們的支持與認可,歡迎大家共同探討SLVS-EC3.0解決方案。
預告:奧唯思自研SLVS-EC3.0 IP也已經已成熟。
2)基于易靈思Ti60的SC2210實時ISP相機
甲方爸爸要求全國產USB3.0相機,因此我們采用了易靈思的FPGA、思特威的Sensor,以及方寸微的T630 USB PHY。當時寫了一篇文章,詳細介紹了此方案:攜手國產芯,共鑄全國產USB3.0相機。
該方案的初步實現花了3個月,但是各種一場測試的恢復,又花了3個月。方案亮點,主要有如下:
全國產芯片選型
自研完成的ISP解決方案
得益于易靈思低功耗高速易靈思FPGA,我們的方案終于落地。該方案在2023華南電子展亮相,ISP效果相比同類FPGA產品,得到一致的認可。當然這只是個開始,未來我們還會不斷地優(yōu)化,爭取做到更好。
預告:
為了支持國內良好生態(tài),助力同胞們進行USB3.0相機的開發(fā)(FTDI或國產T630方案),我們在再三斟酌下,決定推出全開源精簡方案,包括FPGA的源代碼,以及PC上位機的軟件程序。開源文件列表如下:

3)基于易靈思MIPI方案接入NVIDIA Jestson
視覺相機是機器智能/自動化的關鍵,NVIDIA Jetson支持多個合作伙伴的Camera,這些相機包括USB、以太網、MIPI等接口的相機。Jetson為這些相機提供了完整的Jetpack SDK,支持用戶可以快速接入這些相機,來實現相應的設計。但NVIDIA的開發(fā)目前有2個問題需要解決:
NVIDIA的SDK只支持合作伙伴的Camera,不支持第三方相機的接入
NVIDIA的ISP功能沒有開放,全國僅2家公司有權限。
那么,用戶無法接入parter外的相機,同時更是無法進行ISP的調試。為了解決這一迫在眉睫的問題,我們花了4個月的時間進行嘗試,期間無數次想放棄,終于在后實現了客戶需求的設計,如下:
出于對系統(tǒng)安全性的保護,Jetson出廠時,內核編譯打開了驅動簽名選項,如果新開發(fā)的驅動簽名證書不匹配,則驅動ko文件無法加載。但是一般用戶無法拿到NVIDIA編譯出廠鏡像時的簽名證書,無法解決ko簽名問題。如果需要使用新的sensor模組,則需要重新編譯內核、生成全系統(tǒng)鏡像、燒錄系統(tǒng),工作量相當巨大。
失敗與成功,只是一步之遙,在無數次即將放棄的掙扎下,后得以實現,并且在FPGA上實現了完整的ISP,有效地降低了整體Pipeline的延時,解決了客戶的問題。我們認為該方案還是有一定的價值,因為有效打通了NVIDIA AGX/Jestson套件的接入選項,以至于發(fā)公眾號(FPGA模擬MIPI相機,成功接入NVIDIA AGX開發(fā)者套件)的第二天,NVIDIA的人就上門了,洽談是否有機會合入NVIDIA生態(tài),這也將是我們2024努力的方向之一。
<3>FPGA圖像類產品
1)背水一戰(zhàn),墨水屏TCON研發(fā)
沒有任何投資,看不到彼岸在哪里,但堅持了1年,我們終于在墨水屏TCON的設計上,小有所成。目前我們基于廣州奧翼設計的墨水屏TCON,已經接入了客戶的平板方案;同時,更多的第三方客戶,正在對接中。


不清楚該方案是否能在短期內量產,但我們解決了國產墨水屏TCON的問題,助力客戶盡快落地,我們已經付出了大的努力。希望國產墨水屏能夠雄起,能用墨水屏可以改變我們的生活。
劇透:
我們即將推出基于RK的墨水屏開發(fā)套件,用戶當作正常的顯示屏(MIPI接口)驅動輸出即可,奧唯思將大程度支持客戶與工程師實現量產。
2)繼續(xù)努力,堅定定FPGA圖像設計……
2023.12,隨著積累及研發(fā)投入的增加,我們不得不擴大了1倍的人力以及辦公面積,以更好地支撐客戶的需求及我們的發(fā)展。我們將繼續(xù)在以下板塊發(fā)光發(fā)熱,希望能幫助到更多的同行,也得以落地我們繼續(xù)的理由:
FPGA/攝像頭開發(fā)板推廣
FPGA圖像方案定制
墨水屏TCON產品研發(fā)
更多Idea,等你來談
廣東省深圳市南山區(qū)朗山路11號同方科興科學園E棟501
19926595670
cb@szovs.com
公眾號
企微聯(lián)系
官方公眾號
