一、平臺概述
    TYK-FT02型 人工智能物聯(lián)網(wǎng)實(shí)驗(yàn)平臺是一款人工智能教學(xué)、實(shí)驗(yàn)、智能應(yīng)用的開發(fā)平臺。平臺基于視覺、嗅覺、觸覺、聽覺等感知信息，利用計(jì)算機(jī)視覺、語音識別、計(jì)算機(jī)控制、網(wǎng)絡(luò)通信等技術(shù)，結(jié)合IOT傳感器及執(zhí)行設(shè)備實(shí)現(xiàn)行業(yè)智慧化應(yīng)用。
平臺架構(gòu)如圖所示：
 
二、平臺組成
平臺主要由硬件、軟件、教學(xué)資源三部分組成。
1、硬件部分采用F-Table實(shí)驗(yàn)臺體，具有八個(gè)尺寸不同的插槽、一個(gè)可拆卸網(wǎng)板、小型信號示波器、3V/5V/12V電源插孔。插槽處用于安裝原理級實(shí)驗(yàn)?zāi)K，磁吸固定，探針連接信號（RS232、TTL UART、5V、3.3V）。網(wǎng)板支持商用級模塊磁吸安裝，導(dǎo)線連接。平臺支持靈活組合，可與人工智能Python主板、人工智能Android主板、智能網(wǎng)關(guān)通信，進(jìn)行IOT基礎(chǔ)教學(xué)實(shí)驗(yàn)、人工智能應(yīng)用實(shí)驗(yàn)。外觀如下圖：
 
平臺人工智能主板、IOT傳感器、IOT執(zhí)行器的布局圖如下所示：

2、軟件部分包含人工智能在線教學(xué)平臺、語音識別小智機(jī)器人監(jiān)控系統(tǒng)兩部分。
（1）人工智能在線教學(xué)平臺提供WEB平臺，只需打開瀏覽器登錄到平臺，即可開始人工智能知識點(diǎn)的學(xué)習(xí)，從圖像處理基礎(chǔ)知識、到機(jī)器學(xué)習(xí)模式識別、深入到Tensorflow框架人工智能深度學(xué)習(xí)，最后提供典型行業(yè)應(yīng)用案例，熟悉人工智能的開發(fā)過程；統(tǒng)計(jì)識別所需的時(shí)間、結(jié)果；提供在線實(shí)驗(yàn)手冊、實(shí)驗(yàn)代碼，及開發(fā)者模式，有助于用戶自主開發(fā)。

（2）語音識別小智機(jī)器人監(jiān)控系統(tǒng)采用第三方AI SDK，完成自然語言喚醒、語音合成、語義理解，實(shí)現(xiàn)聊天對話、百科問答等功能。同時(shí)，與云服務(wù)平臺通信，與人工智能平臺板載的網(wǎng)關(guān)進(jìn)行綁定，即可實(shí)現(xiàn)語音遠(yuǎn)程采集環(huán)境參數(shù)，語音控制設(shè)備。

3、教學(xué)資源包含
（1）人工智能web教學(xué)平臺python語言在線實(shí)驗(yàn)手冊、實(shí)驗(yàn)代碼
（2）基于Android AI SDK的實(shí)驗(yàn)手冊、實(shí)驗(yàn)代碼。
三、功能特點(diǎn)
1. 支持多種人工智能和物聯(lián)網(wǎng)課程，如圖像處理、計(jì)算機(jī)視覺、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、嵌入式接口技術(shù)與傳感器、Android物聯(lián)網(wǎng)應(yīng)用開發(fā)、計(jì)算機(jī)網(wǎng)絡(luò)通信技術(shù)等。
2. 支持C、Python、Android至少三種語言。感知層IOT傳感器及執(zhí)行器的采集控制采用C語言開發(fā)，基于Cortex-M3內(nèi)核。人工智能在線教學(xué)平臺（圖像處理、機(jī)器視覺、深度學(xué)習(xí)）采用Python語言，基于OpenCV機(jī)器視覺庫、TensorFlow深度學(xué)習(xí)框架、Caffe深度學(xué)習(xí)框架。語音識別小智機(jī)器人采用Android語音，調(diào)用第三方AI SDK，通過HTTP協(xié)議接入與云平臺，并與智能網(wǎng)關(guān)管理的IOT傳感器、執(zhí)行器綁定，實(shí)現(xiàn)語音采集傳感器、語音控制執(zhí)行器。
3. 支持python外設(shè)編程、通信編程、機(jī)器學(xué)習(xí)編程，如信號檢測與執(zhí)行器控制、python的網(wǎng)絡(luò)編程、機(jī)器學(xué)習(xí)課程教學(xué)、實(shí)驗(yàn)、實(shí)訓(xùn)。
4. 支持在線實(shí)驗(yàn)手冊、實(shí)驗(yàn)代碼、在線實(shí)驗(yàn)驗(yàn)證。將一次人工智能實(shí)驗(yàn)過程分解為實(shí)驗(yàn)手冊瀏覽（熟悉實(shí)驗(yàn)?zāi)康?、?shí)驗(yàn)原理）、實(shí)驗(yàn)代碼學(xué)習(xí)（實(shí)驗(yàn)代碼關(guān)鍵語句講解）、在線實(shí)驗(yàn)驗(yàn)證等3個(gè)過程。
5. 支持離線圖片、實(shí)時(shí)視頻兩種處理方式。在線實(shí)驗(yàn)驗(yàn)證支持從電腦中任選圖片，進(jìn)行識別；也可調(diào)用攝像頭，利用平臺AI核心算法，對視頻流進(jìn)行識別。
6. 實(shí)驗(yàn)過程、識別耗時(shí)、識別結(jié)果以LOG信息、目標(biāo)矩形框標(biāo)注、或語音播放的形式進(jìn)行展示。
7. 能夠?qū)崿F(xiàn)數(shù)字圖像處理功能，如灰度化、二值化、邊緣檢測、小波變換、形態(tài)學(xué)等。

8. 能夠?qū)崿F(xiàn)多種識別，如顏色、形狀等識別功能。

9. 能夠?qū)崿F(xiàn)人臉檢測、行人檢測、聚類分析等機(jī)器學(xué)習(xí)。如Adaboost人臉檢測、行人檢測、SVM人臉檢測、K-Means鳶尾花聚類等；

10. 能夠?qū)崿F(xiàn)涂鴉猜游戲、文字識別、物體識別、垃圾分類等深度學(xué)習(xí)。基于caffe框架、tensorflow框架實(shí)現(xiàn)深度學(xué)習(xí)，如圖所示。

                                       物體識別
11. 支持物聯(lián)網(wǎng)通信協(xié)議MQTT、HTTP實(shí)現(xiàn)人工智能與IOT感知設(shè)備的連接。
12. 支持第三方AI SDK實(shí)現(xiàn)智能語音識別技術(shù)，如智能對話，問天氣、講故事、百科問答等，如語音查詢環(huán)境參數(shù)，語音控制照明燈、語音控制風(fēng)扇等。

13. 能實(shí)現(xiàn)人臉識別活體檢測，人臉識別門鎖控制功能。

14. 能夠嵌入式接口技術(shù)與傳感器、計(jì)算機(jī)通信，可通過上位機(jī)平臺查看傳感器采樣信息，如圖所示。

四、課程實(shí)驗(yàn)