SynSense時(shí)識(shí)科技開源類腦軟件組合，助力開發(fā)者快速搭建脈沖神經(jīng)網(wǎng)絡(luò)

類腦技術(shù)模仿生物腦信息處理的方式，同時(shí)也集成了其眾多優(yōu)勢(shì)。以超低功耗、超低延遲作為最突出特點(diǎn)，類腦技術(shù)為邊緣計(jì)算帶來(lái)了全新視野。自成立以來(lái)，SynSense時(shí)識(shí)科技不斷嘗試降低類腦芯片在嵌入式機(jī)器視覺及音頻應(yīng)用方面的功耗及延遲性，同時(shí)提升精準(zhǔn)度。而在硬件之外，軟件框架同樣作為其中的關(guān)鍵因素，在創(chuàng)新訓(xùn)練脈沖神經(jīng)網(wǎng)絡(luò)方面發(fā)揮著巨大作用。

截至目前，SynSense時(shí)識(shí)科技已開發(fā)Samna、Sinabs、Rockpool、Tonic四款軟件及工具鏈，且已全部開源。以適用于SynSense時(shí)識(shí)科技“感算一體”動(dòng)態(tài)視覺智能SoC Speck及其開發(fā)套件的開源庫(kù)Sinabs和工具鏈Samna為例，開發(fā)者可輕松使用片上DVS傳感器并搭建達(dá)9層的脈沖卷積神經(jīng)網(wǎng)絡(luò)。而在Speck部署流水線中，開發(fā)者可使用小于5行代碼，將模型部署至Speck中，從而開啟應(yīng)用原型開發(fā)。

“在SynSense時(shí)識(shí)科技，我們專注于類腦硬件平臺(tái)與軟件棧的良好協(xié)同。作為開源性質(zhì)的工具，其基于行業(yè)標(biāo)準(zhǔn)的機(jī)器學(xué)習(xí)庫(kù)，同時(shí)伴隨高準(zhǔn)確度的硬件模擬器，能夠助力開發(fā)者在Python環(huán)境中方便地進(jìn)行部署測(cè)試。”

SynSense時(shí)識(shí)科技全球研發(fā)副總裁Dylan Muir博士在Speck開發(fā)套件上快速部署

Speck開發(fā)套件基礎(chǔ)使用要求

硬件要求：至少 4GB 物理內(nèi)存、1個(gè)USB3.0接口

一個(gè)顯示器、擁有集成或獨(dú)立顯卡

軟件要求：Ubuntu 18.04/20.04

安裝軟件：Samna，Sinabs

近日，SynSense時(shí)識(shí)科技發(fā)布全新類腦感知及計(jì)算開發(fā)平臺(tái)Speck及Xylo-Audio，支持類腦智能研發(fā)及開發(fā)者生態(tài)搭建。以Speck為例，用戶可在SynSense時(shí)識(shí)科技數(shù)據(jù)集測(cè)試工具Tonic、開源庫(kù)Sinabs、工具鏈Samna的支持下，快速地對(duì)開發(fā)套件進(jìn)行部署啟用?？稍L問我們的官方網(wǎng)站查看相關(guān)軟件。

For data management

Tonic是一款開放型基準(zhǔn)數(shù)據(jù)集測(cè)試工具。 作為開源性質(zhì)的Python庫(kù)，Tonic提供可公開使用、基于事件的視覺及音頻數(shù)據(jù)集，以及數(shù)據(jù)處理功能。Tonic對(duì)PyTorch Vision與audio transform接口完全兼容，可為用戶提供最大的靈活度，不僅支持直接在事件或時(shí)間面（time surface）上進(jìn)行處理增強(qiáng)， 同時(shí)也支持一系列傳統(tǒng)框架的操作， 例如將稀疏事件和綢密壓縮表達(dá)相互轉(zhuǎn)換。

For simulation

Sinabs是一個(gè)基于PyTorch的開源庫(kù)，旨在設(shè)計(jì)和實(shí)現(xiàn)脈沖卷積神經(jīng)網(wǎng)絡(luò)（sCNN）。 Sinabs可以實(shí)現(xiàn)與卷積神經(jīng)網(wǎng)絡(luò)等效的脈沖卷積神經(jīng)網(wǎng)絡(luò)。此外，它還支持Sinabs-exodus, Sinabs-dynap cnn等眾多plug-in, 方便用戶調(diào)取最新的脈沖神經(jīng)網(wǎng)絡(luò)設(shè)計(jì)和芯片部署效率工具。 ↓

Samna

For host management

Samna 是為SynSense時(shí)識(shí)科技類腦芯片量身定制的開發(fā)者接口和高性能實(shí)時(shí)交互工具。Samna核心邏輯全部為C++編寫，對(duì)外提供了一套Python接口，在保證了易用性的同時(shí)也確保了數(shù)據(jù)處理的實(shí)時(shí)性。針對(duì)事件驅(qū)動(dòng)設(shè)備數(shù)據(jù)流的特性，Samna集成了一個(gè)能夠?qū)崟r(shí)多線程處理事件流的數(shù)據(jù)處理系統(tǒng)，允許用戶對(duì)輸入輸出芯片的數(shù)據(jù)進(jìn)行自定義處理。同時(shí)該數(shù)據(jù)處理系統(tǒng)支持在線編譯器(Just-In-Time Compiler)，允許用戶使用C++編寫數(shù)據(jù)處理算法并實(shí)時(shí)整合進(jìn)數(shù)據(jù)處理流中。 ↓

通過(guò)使用Sinabs和Samna，可更加便捷地將脈沖神經(jīng)網(wǎng)絡(luò)模型部署至Speck開發(fā)板中，從而快速啟用。

“從數(shù)據(jù)預(yù)處理、神經(jīng)網(wǎng)絡(luò)架構(gòu)設(shè)計(jì)、網(wǎng)絡(luò)優(yōu)化、片上部署和后期調(diào)試，SynSense的軟件工具鏈為Speck/Xylo系列類腦芯片開發(fā)提供了完整閉合的開發(fā)和應(yīng)用支持。同時(shí)，我們有著豐富內(nèi)部和外部的開發(fā)者群體， 不斷對(duì)我們的軟件工具鏈優(yōu)化和拓展，” SynSense時(shí)識(shí)科技高級(jí)算法工程師邢雁南博士表示。 SynSense時(shí)識(shí)科技瑞士團(tuán)隊(duì)類腦機(jī)器學(xué)習(xí)工程師Gregor Lenz博士道：“通過(guò)發(fā)布我們的開發(fā)工具，我們希望對(duì)類腦社區(qū)作出來(lái)自SynSense時(shí)識(shí)科技的貢獻(xiàn)，共同探索下一代神經(jīng)網(wǎng)絡(luò)?！?自發(fā)布最新類腦開發(fā)套件以來(lái)，SynSense時(shí)識(shí)科技已收到了來(lái)自世界各國(guó)研究機(jī)構(gòu)、高校及企業(yè)等研發(fā)人員的熱切詢問。我們期望通過(guò)提供開發(fā)工具、豐富開發(fā)資源，吸引更多開發(fā)者和愛好者加入類腦領(lǐng)域。接下來(lái)，SynSense時(shí)識(shí)科技工程師團(tuán)隊(duì)將圍繞開發(fā)套件使用及脈沖神經(jīng)網(wǎng)絡(luò)訓(xùn)練等多個(gè)方面，與開發(fā)者及愛好者展開探討，歡迎持續(xù)關(guān)注。

SPECK類腦智能開發(fā)套件

此次發(fā)售的Speck開發(fā)套件為SynSense時(shí)識(shí)科技最新款類腦視覺開發(fā)套件，全新升級(jí)的Speck SoC集成動(dòng)態(tài)視覺傳感器/事件相機(jī)，大幅度提升了感光性能并降低了噪音，同時(shí)，SoC片內(nèi)集成32萬(wàn)脈沖神經(jīng)元類腦智能處理器，實(shí)現(xiàn)超低功耗動(dòng)態(tài)實(shí)時(shí)圖像處理。利用SynSense時(shí)識(shí)科技開源軟件開發(fā)包，可輕松使用片上DVS傳感器并搭建高達(dá)9層的脈沖卷積神經(jīng)網(wǎng)絡(luò)。 Speck開發(fā)套件為SynSense時(shí)識(shí)科技目前在售的高性能類腦智能視覺開發(fā)平臺(tái)，支持實(shí)時(shí)監(jiān)測(cè)、手勢(shì)識(shí)別、行為檢測(cè)、光流、跟隨等多場(chǎng)景復(fù)雜視覺類應(yīng)用模型開發(fā)。

了解更多請(qǐng)?jiān)斣?/p>

關(guān)于SynSense時(shí)識(shí)科技 SynSense時(shí)識(shí)科技（原名aiCTX）創(chuàng)立于2017年，是全球領(lǐng)先的類腦智能與應(yīng)用解決方案提供商。 SynSense時(shí)識(shí)科技專注類腦智能的研究與開發(fā)，以蘇黎世大學(xué)和蘇黎世聯(lián)邦理工學(xué)院20+年全球領(lǐng)先的研發(fā)經(jīng)驗(yàn)和技術(shù)積累為基石，聚焦邊緣計(jì)算應(yīng)用場(chǎng)景，提供橫跨感知與計(jì)算的類腦智能應(yīng)用與解決方案。 SynSense時(shí)識(shí)科技率先實(shí)現(xiàn)了類腦芯片商業(yè)化應(yīng)用零的突破，為人工智能向認(rèn)知智能發(fā)展，萬(wàn)物互聯(lián)向萬(wàn)物智聯(lián)發(fā)展邁出了關(guān)鍵一步。SynSense將和伙伴一起，共同構(gòu)建“端到芯”“物與物”“物與人”萬(wàn)物智聯(lián)的認(rèn)知生態(tài)，引領(lǐng)全球類腦智能應(yīng)用與發(fā)展，為人類未來(lái)美好生活創(chuàng)造福祉。