Antarmuka IoT tanpa kontak dengan tepi cerdas Azure

Azure AI services
Azure IoT Edge
Azure IoT Hub
Azure Storage
Azure Machine Learning

Ide solusi

Artikel ini adalah ide solusi. Jika Anda ingin kami memperluas konten dengan informasi lebih lanjut, seperti potensi kasus penggunaan, layanan alternatif, pertimbangan implementasi, atau panduan harga, beri tahu kami dengan memberikan umpan balik GitHub.

Bisnis tanpa kontak adalah hal normal yang baru. Dunia menjadi lebih sadar, dan terancam oleh, permukaan yang disentuh banyak orang setiap hari. Antarmuka tanpa kontak mengurangi atau menghilangkan titik sentuh fisik seperti tombol lampu lalu lintas, layar sentuh, gagang pintu, dan kontrol elevator dengan menciptakan pengalaman bebas sentuh yang aman dan menyenangkan bagi pengguna.

Avanade dan gugus tugas Microsoft COVID-19 bekerja sama untuk mengembangkan antarmuka tanpa kontak menggunakan platform edge cerdas Azure. Solusi ini menggabungkan perangkat edge Internet of Things (IoT) yang cerdas dan perseptif dengan kemampuan penyimpanan, komputasi, kecerdasan buatan (AI), dan pembelajaran mesin (ML) dari cloud Azure.

Perangkat IoT Edge dapat dengan cepat mengenali dan merespons ucapan, gambar, isyarat, atau input multi-modal dengan menggunakan pemrosesan onboard. Azure IoT Hub di cloud mengontrol perangkat dan menghubungkannya ke sumber daya Azure. Azure Cognitive Services dan Pembelajaran Mesin terus melatih dan memperbarui model untuk meningkatkan akurasi dan performa antarmuka.

Kemungkinan kasus penggunaan

  • Ubah titik kontak publik menjadi antarmuka bebas sentuh untuk penggunaan seperti akses gedung dan ruangan, kontrol lift, penjualan retail dan mesin penjualan otomatis, serta sinyal transit dan lalu lintas.
  • Gunakan suara atau kontrol tanpa kontak lainnya dengan titik akhir seluler umum seperti telepon.

Arsitektur

Architecture diagram: Contactless interfaces and other IoT edge devices used as part of an Azure intelligent cloud solution.

Unduh file Visio arsitektur ini.

  1. Titik akhir seperti mikrofon, kamera, dan layar sentuh mengumpulkan data.
  2. Unit pemrosesan suara onboard pada perangkat IoT Edge menerapkan set keterampilan kognitif dan model pembelajaran mesin yang diperbarui ke data lokal.
  3. IoT Hub di Azure cloud mengontrol dan berkomunikasi dengan perangkat edge, menerima data, dan mengirim model yang diperbarui.
  4. Azure Storage menyimpan data yang diunggah.
  5. Azure Machine Learning menggunakan data untuk melatih kembali model AI-nya.
  6. IoT Hub mendorong model pembelajaran mesin yang diperbarui ke perangkat edge.

Komponen

  • Layanan Azure IoT Edge menyebarkan beban kerja cloud untuk dijalankan di perangkat IoT Edge melalui kontainer standar. Modul dapat menjalankan AI, Azure dan layanan pihak ketiga lainnya, atau logika bisnis Anda sendiri. Perangkat cerdas IoT Edge dapat merespons dengan cepat dan offline, serta membatasi biaya dengan melakukan prapemrosesan dan hanya mengirim data yang diperlukan ke cloud.
  • Azure IoT Hub menyediakan backend yang dihosting cloud untuk menghubungkan hampir semua perangkat IoT ke layanan Azure. IoT Hub memungkinkan komunikasi, manajemen, dan penyediaan dua arah yang sangat aman dan andal untuk perangkat IoT Edge.
  • Azure Storage menyediakan penyimpanan yang fleksibel, dapat diskalakan, dan aman di cloud Azure. Solusi saat ini menggunakan blob blok untuk menyimpan data tidak terstruktur, blob halaman untuk membaca dan menulis segmen data kecil acak, dan penyimpanan file untuk berbagi file.
  • Azure Cognitive Services adalah keluarga layanan AI dan API kognitif yang membantu membangun aplikasi cerdas. Misalnya, kontrol suara dapat menggunakan layanan Ucapan ke Teks dan Pengenalan Pembicara. Memperluas solusi untuk pengenalan gambar atau wajah dapat menggunakan Computer Vision, Custom Vision, dan Pengenalan Wajah.
  • Pembelajaran Mesin (ML) menggunakan algoritma untuk meningkatkan prediksi atau keputusan mesin secara otomatis melalui pengalaman. Algoritma pembelajaran mesin membangun dan terus melatihmodel matematika. Azure Machine Learning memungkinkan Anda membangun, melatih, menyebarkan, melacak, dan mengelola model ML pada skala cloud.

Langkah berikutnya

  • Untuk informasi selengkapnya, silakan hubungi iotcovidsupport@microsoft.com.
  • Kontrol suara adalah fungsi dasar dalam solusi ini. Platform ini berpotensi meluas ke beberapa jenis pengenalan, seperti wajah dan gerakan. Untuk informasi selengkapnya, lihat Memilih teknologi Azure Cognitive Services.
  • Solusinya dapat mendukung penyebaran global dengan menggunakan API Penerjemahan Ucapan Cognitive Services.
  • Telusuri jalur dan modul pembelajaran IoT.