---
title: 首かけデバイス&quot;THINKLET&quot;とその応用
tags: 
author: [kinneko](https://www.docswell.com/user/kinneko)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/Y76QQLW57V.jpg?width=480
description: 浜松ITコミュニティ忘年会2024 - connpass https://hamamatsu-it.connpass.com/event/335532/
published: December 06, 24
canonical: https://www.docswell.com/s/kinneko/KEXYQJ-2024-12-06-112956
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/Y76QQLW57V.jpg)

首かけデバイス&quot;THINKLET&quot;
とその応用
kinneko@gmail.com 2024.12.7 @浜松ITコミュニティ忘年会2024 LT&amp;THINKLET体験会


# Page. 2

![Page Image](https://bcdn.docswell.com/page/G75RR1MGE4.jpg)

kinneko (kinneko@gmail.com)
日本Androidの会 金沢支部
今日は、日本Androidの会 浜松支部の
「THINKLET体験会＆アイデアソン」 8/31 が
台風でオンラインになったので、リベンジに呼んでもらった


# Page. 3

![Page Image](https://bcdn.docswell.com/page/9J2DD19DJR.jpg)

kinneko (kinneko@gmail.com)
営業日は毎日技術ブログ的なの書いてます (2019-)
https://kinneko.fanbox.cc/
薄い本書いたり、Maker系イベントに出展したりしています
kinnekoの薄い本屋 - BOOTH
https://kinneko.booth.pm/
縛りの多い連載引き受けて苦労してます...
連載：「おしゃべりな機械」たちの世界へようこそ！
https://ascii.jp/serialarticles/3001129/


# Page. 4

![Page Image](https://bcdn.docswell.com/page/DEY22Z4MEM.jpg)

kinneko (kinneko@gmail.com)
本業は、東京湯島にあるフェアリー・デバイセズで
デバイスのクラウドバックエンドを開発しています
金沢からフルリモート勤務で仕事しています (2024.4-)
「THINKLET誰も知らない問題」を改善するために
認知向上と開発者を増やすためコミュニティ活動もしています


# Page. 5

![Page Image](https://bcdn.docswell.com/page/VJN883Y378.jpg)

って、どんな会社？
・東大発研究開発ベンチャーとして、音声のAI処理などで10年
・2018年、何を思ったか突然ハードウエアベンチャーを開始
・当時流行りのスマート・スピーカーなどを製品化
・少しピボットしてコネクテッド・ワーカー・ソリューション開始
・ダイキンを中心にリモートで作業を支援するシステムを開発
・2024年、「THINKLET」を一般に向けても販売開始


# Page. 6

![Page Image](https://bcdn.docswell.com/page/YE9KK9PPE3.jpg)



# Page. 7

![Page Image](https://bcdn.docswell.com/page/GE8RR9DXJD.jpg)

当社の歩み
Connected Worker
Solution®の発表
現場DXを加速するウェアラブルデバイス
THINKLET®を開発
2022
資金調達・社会実装の拡大
資金調達を行いベンチャー企業化
搭載したハードウェアを自社開発
音声AIが駅案内ロボット、
デジタルサイネージ等に導入
2020
技術
Google テクノロジーパートナー
に認定
2018
AIサービスリリース
音声クラウドサービスmimi® 開始
海外展開
ダイキンなどにTHINKLET®を
活用した現場DXソリューションを提供開始
東アジアを中心に14か国で展開
簡易版Connected Worker Solution®
LINKLET®を発表
テクノロジーベンチャーとして4年
2016
研究開発
弦楽器の自動演奏装置の開発で
IPA未踏事業に採択
2012
2009
R&amp;D受託企業として11年
2021
社会実装
mimi® powered by NICTを発表
10言語に多言語対応
2019
研究開発
総務省/NICTの
グローバルコミュニケーション計画
に採択
2017
研究開発
音声処理関連技術の
研究開発を開始
企業・大学のR&amp;Dを受託
2014
創業
人とAIが互いに寄り添った
世界を目指して
東大発ベンチャーとして設立
2010
2007
音声AIをベースに研究開発業務を10年超。2018年からスタートアップへ
自社ソリューション「Connected Worker Solution®」を提供開始
資金調達
THINKLET®の量産に向けて
シリーズB資金調達
研究開発
総務省/NICTの
グローバルコミュニケーション計画2025(1)
に中核メンバーとして参画
世界的評価の獲得
CES2022に出展し
Innovation Awardを世界最多3部門で受賞
Nikkei Next ユニコーン2021/2022に選出
米TIME誌 The Best Inventions2022選定
オープンイノベーション大賞 総務大臣賞受賞
and more…
Copyright © 2024 Fairy Devices Inc. All rights reserved.
(1)総務省のグローバルコミュニケーション計画 2025に基づく、多言語翻訳技術の高度化に関する研究開発
6


# Page. 8

![Page Image](https://bcdn.docswell.com/page/LELKKWMNJR.jpg)

Our Invention
現場の声に応えた新規デバイスの紹介
負担なく現場導入が可能なワーカー支援デバイスを開発。装着者の見ているもの、聴いているものをリアルタイムにデータ化し、
今までにない情報活用を可能とする
人とAIをつなぐ、機械との協働を実現する
THINKLET
高性能マイク（５個）
4G LTE／Wi-Fi 通信機能
各種センサー／GPS
エッジAI搭載
超広角カメラ
人が得意なことは人に、AIが得意なことはAIに任せる役目を担うウェアラブルデバイス
Copyright © 2024 Fairy Devices Inc. All rights reserved.
3


# Page. 9

![Page Image](https://bcdn.docswell.com/page/4JM229YQJW.jpg)

Connected Worker Solutionによる支援イメージ
A
高難易度の課題のみ
リアルタイム支援
B
• AIのソリューションが
一時対応
• 必要に応じて熟練工
にエスカレーション
高度な現場作業に
非熟練者が対応可能
デジタル化による現場
スキルの技能伝承
C
作業報告書の自動作成
作業の自動判定
AI支援
/対応のレコメンド
危険アラート
作業手順指示
/完了確認
多言語翻訳
Copyright © 2024 Fairy Devices Inc. All rights reserved.
スループット強化
4


# Page. 10

![Page Image](https://bcdn.docswell.com/page/PJRMMG9KE9.jpg)

保守・メンテナンスに活用
導入に際して現地側の教育を必要とせず、早期に遠隔支援体制を確立可能。
遠隔支援体制によって設備の維持管理を低コストに実現できる。
専門家による作業支援
✓ 遠隔・諸島部などのアクセスが
難しい地域でも、非常時対応
や定期メンテナンスでの活用
専門的サポート
点検記録の遠隔確認
点検レポート
Copyright © 2024 Fairy Devices Inc. All rights reserved.
✓ 点検などの内容を動画＋高解
像度画像で記録し、レポート
化することで、遠隔での点検業
務が実現
5


# Page. 11

![Page Image](https://bcdn.docswell.com/page/PEXVVXQ57X.jpg)

&quot;THINKLET&quot;とは？
首にかけるタイプのAndroid端末 (冷えませんw)
5chマイク、広角カメラ搭載 (カメラ視野の縦横２モデルあり)
装着者の視点を記録・送信できる (LTE/WiFi対応)
アイカメラと違ってフラフラしない安定感のある撮影
Android8ベース GUIがない変なやつ
AOSPをベースにしたFairyOS搭載(クワルコムSoC)
カメラ風のボックス型 cube もあるよ！
クラウドAPIでリモートから遠隔操作ができます


# Page. 12

![Page Image](https://bcdn.docswell.com/page/3EKQQW9RED.jpg)

最近の露出
令和6年東京都ベンチャー技術大賞 奨励賞受賞
https://venture-award.metro.tokyo.lg.jp/award2024/#j22p_06
日経トレンディ”2025年ヒット予測&quot;
ベスト1 『肩掛けプライベートAI』 でデモ端末として使用
おかげで、テレビの情報番組にいろいろ出してもらえた
2024-11-01 テレビ東京 &quot;WBS&quot;
2024-11-04 日本テレビ &quot;ズームイン！！サタデー&quot;
2024-11-13 フジテレビ &quot;めざましテレビ&quot;
2024-11-14 日本テレビ DayDay.


# Page. 13

![Page Image](https://bcdn.docswell.com/page/L73PP1WGE5.jpg)

価格など
2024年１月から開発機販売を開始 (ちょっとお高い)
大学や研究機関向けには半額の割引販売もやっている
社員の権限で短期貸出できるので希望があれば是非どうぞ
ソース公開でプロジェクト出していただけるのであれば、
１台進呈なども検討しています


# Page. 14

![Page Image](https://bcdn.docswell.com/page/87DLLXKNEG.jpg)

何ができるの？
Androidでできることは一通り (ただしGUIがない)
Flutterで普通にアプリ開発できます
もちろんAndroid SDKでネイティブアプリもOK
5chマイク搭載
有線イヤホン接続可能
開発機はadb接続できる
CTSは受けていないのでGoogleAPIは使えない
ハードウエアボタンが３つ 機能割り当て可能
ゼスチャセンサがあるが、イマイチ使えない？


# Page. 15

![Page Image](https://bcdn.docswell.com/page/VJP22PKNJ8.jpg)

何ができるの？
GUIがないのを補う
scrcpyコマンドで
開発PCに画面を表示


# Page. 16

![Page Image](https://bcdn.docswell.com/page/2EVDD2VYEQ.jpg)

何ができるの？
とはいえ、GUIがないと...
保守担当者が、出先でPCは持ってないよ...
SIM交換したとき、APN設定どうしたら？
トラブル時にすぐに状況を確認したい
営業がデモするとき説明に困る


# Page. 17

![Page Image](https://bcdn.docswell.com/page/57GYYRLW7L.jpg)

何ができるの？
GUIがないのを補う
THINKLET Viewer作りました
・Raspi4
・5インチLCD
・電源とUSB接続で自動表示
・ガチャ切りOK（ROM化済）
・誰でも操作可能
・低コストで実現


# Page. 18

![Page Image](https://bcdn.docswell.com/page/4EQMMVYQJP.jpg)

何ができるの？
GUIがないのを補う
出先でPC出すのもねぇ...
THINKLET Viewer作りました


# Page. 19

![Page Image](https://bcdn.docswell.com/page/KJ4VVMWYE1.jpg)

活用事例
遠隔作業支援
遠隔保守などのリモート支援業務
ダイキン(業務用エアコン)
ヤンマー(発電機)など
世界中で使われている
南極昭和基地にも一台ある
膨大に蓄積された動画のAI解析


# Page. 20

![Page Image](https://bcdn.docswell.com/page/LE1338YNJG.jpg)

活用事例
遠隔作業支援
https://www.daikin.co.jp/tic/topics/feature/2024/20240611


# Page. 21

![Page Image](https://bcdn.docswell.com/page/GEWPPZ1MJ2.jpg)

活用事例
遠隔作業支援
https://www.yanmar.com/jp/about/ymedia/article/yesdx.html


# Page. 22

![Page Image](https://bcdn.docswell.com/page/47ZKK1PM73.jpg)

活用事例
作業記録・ライフログの記録
ローカル録画、遠隔録画
録画内容の音声書き下し
書き下しをマルチモーダルLLMが要約
作業のドキュメント化やフローチャートの作成
作業内容のAIによる分析・エラーの警告
カードゲームの経過記録・中継・AIによる自動解説


# Page. 23

![Page Image](https://bcdn.docswell.com/page/YJ6QQLM5JV.jpg)

活用事例
作業記録・ライフログの記録
ローカル録画、遠隔録画
録画内容の音声書き下し
書き下しをマルチモーダルLLMが要約
作業のドキュメント化やフローチャートの作成
作業内容のAIによる分析・エラーの警告
カードゲームの経過記録・中継・AIによる自動解説
https://www.youtube.com/watch?v=PQHkuhcYYM4


# Page. 24

![Page Image](https://bcdn.docswell.com/page/GJ5RR1ZG74.jpg)

活用事例
作業記録・ライフログの記録
ローカル録画、遠隔録画
録画内容の音声書き下し
書き下しをマルチモーダルLLMが要約
作業のドキュメント化やフローチャートの作成
作業内容のAIによる分析・エラーの警告
カードゲームの経過記録・中継・AIによる自動解説
https://www.youtube.com/watch?v=kwgwImUCJWY


# Page. 25

![Page Image](https://bcdn.docswell.com/page/LE3PP19PJ5.jpg)

活用事例
作業記録・ライフログの記録
ローカル録画、遠隔録画
録画内容の音声書き下し
書き下しをマルチモーダルLLMが要約
作業のドキュメント化やフローチャートの作成
作業内容のAIによる分析・エラーの警告
カードゲームの経過記録・中継・AIによる自動解説
https://www.youtube.com/watch?v=udZVTDJLKLM


# Page. 26

![Page Image](https://bcdn.docswell.com/page/8EDLLXG3JG.jpg)

活用事例
畠山歓先生 東京科学大学
・THINKLETで実験動画を記録
・記録画像をマルチモーダル
LLMで文書化
・内容をLLMで要約
・要約からLLMで操作の
フローチャートを自動生成
https://x.com/kanhatakeyama/status/1862782347881725973


# Page. 27

![Page Image](https://bcdn.docswell.com/page/V7P22P3P78.jpg)

活用事例
ファームウエア違いのLINKLET
・すぐに導入できるターンキー・ソリューション
・デバイスをクラウドからの操作で
ZoomやTeamsのミーティングに参加
・クラウド経由でのデバイス操作
・SIM込みのレンタルや月額契約


# Page. 28

![Page Image](https://bcdn.docswell.com/page/2JVDD24VJQ.jpg)

THINKLETを使った開発
⚠ 開発者モードにしたら解除しないで！
adbはデフォルトで動作しています
開発者モードにはできますが、オフにするとadbも止まります
すると、GUIないので詰んでしまいます
USBデバッグをオフにしても同じことになります
自力で回復はできないので、
残念ながら返送してもらう必要があります


# Page. 29

![Page Image](https://bcdn.docswell.com/page/5EGYYR11EL.jpg)

THINKLETを使った開発
⚠ 開発者モードにしたら解除しないで！
AdbRecoveryで気持ち予防できます
THINKLET開発者向けのAdbを起動時に自動有効化
確実にAdb有効化を保証するものではありません．
また，開発時のみご利用ください．
https://github.com/FairyDevicesRD/thinklet.app.adbRecovery
https://github.com/FairyDevicesRD/thinklet.app.adbRecovery/
releases


# Page. 30

![Page Image](https://bcdn.docswell.com/page/4JQMMVDN7P.jpg)

THINKLET 製品ページ
https://mimi.fairydevices.jp/technology/device/thinklet/


# Page. 31

![Page Image](https://bcdn.docswell.com/page/K74VVMZ3J1.jpg)

THINKLET 取扱説明書
https://static-connected-worker.thinklet.fd.ai/support/ja/index.html


# Page. 32

![Page Image](https://bcdn.docswell.com/page/LJ1338RZ7G.jpg)

THINKLET 開発者ポータル
https://fairydevicesrd.github.io/thinklet.app.developer/


# Page. 33

![Page Image](https://bcdn.docswell.com/page/GJWPPZ1672.jpg)

THINKLET を始めましょう
https://fairydevicesrd.github.io/thinklet.app.developer/docs/intro


# Page. 34

![Page Image](https://bcdn.docswell.com/page/4EZKK1PRE3.jpg)

THINKLET SDK (Github)
https://github.com/FairyDevicesRD/thinklet.app.sdk


# Page. 35

![Page Image](https://bcdn.docswell.com/page/Y76QQLM17V.jpg)

CWS開発者ガイド
https://reference.thinklet.fd.ai/


# Page. 36

![Page Image](https://bcdn.docswell.com/page/G75RR1ZLE4.jpg)

Raspberry Piで作るTHINKLET Viewer
https://zenn.dev/fairydevices/articles/c730e7776139bb


