• 視覚障害者向けに生成AIを活用したコードエディター開発
  • AIのコードアシスタントは主流の開発環境でのみ利用可能
  • 外部スクリーンリーダーに頼らず、AIとの容易な統合を提供
  • コードを文字起こししてテキスト読み上げ可能
  • Pythonを使用してコードエディターを開発、ChatGPT、音声-to-テキスト、テキスト-to-音声のAPIを呼び出し
  • エディターはキーボードコマンドショートカットで制御
  • コーディング中のストレス管理のためにIoTベースの健康モニタリングソリューションを実装
  • Blues.ioハードウェア、Espressif ESP32S3 Sense、Nordic NRF52840DKを使用

このプロジェクトは、視覚障害者向けのコード開発ツールとして重要な取り組みであり、将来的に利用する視覚障害者によってさらに発展する可能性があると考えられます。

元記事: https://www.hackster.io/drsudhir/ai-assisted-coding-in-an-iot-monitored-secure-environment-9f79a9