探検


自作のRSSリーダーアプリにオンデバイスLLMを実装したので報告させてほしい [743999204]

■ このスレッドは過去ログ倉庫に格納されています
1番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイ cd5c-xjO5)
垢版 |
2026/05/13(水) 22:04:03.15ID:c78g5jyq0●?2BP(3222)

自作RSSリーダーにオンデバイスLLMを組み込んで、要約・シグナル分離・チャット・翻訳を全部端末内でやらせた話
https://capsaicin.site/blog/2026-05-10

TL;DR
・以前作ったセルフホスト型RSSリーダー「FeedOwn」に、完全オンデバイスのAI機能を追加した
・ライブラリは react-native-executorch(Meta ExecuTorch の React Native バインディング)
・機能は4つ:3視点要約 / シグナル分離 / 記事チャット / 翻訳
・LLM は LFM 2.5 (1.2B / 350M) と Qwen 3 (0.6B / 1.7B) から選択可
・記事本文は端末外に一切出ない。OpenAI API も Anthropic API も使っていない
・iOS 17+ / Android 13+ 必須(New Architecture + ExecuTorch ランタイム要件)

オンデバイスAI設定画面
使用するLLMとLLMが出力する言語を選ぶことができる
https://capsaicin.site/static/27a71c433287eca451570f00c4001211/cf84a/01_settings.png

機能1:3視点要約
brief:中立的な3〜5項目の要点
technical:技術スタック・実装詳細・トレードオフ・依存関係
critical:根拠の弱い主張・欠けている文脈・誇張・未検証の主張

要約生成中
https://capsaicin.site/static/1896238e553e3654c1eca7462f077627/536f2/02_summarize01_generating_summary.png
日本語記事の要約
https://capsaicin.site/static/5a2f69a156cbbc85ad5648f443649393/536f2/02_summarize02_japanese_article.png
英語記事の要約
https://capsaicin.site/static/b04c2d5e3d85f04c764b3fb55c8c20ca/536f2/02_summarize02_english_articla.png

機能2:シグナル分離
記事の各記述を「種別」で分類する
https://capsaicin.site/static/1b82f789a2b1b30832e8d359f53c2a61/385f2/03_signals.png

機能3:記事チャット
開いている記事1つにスコープしたチャット画面
https://capsaicin.site/static/6935a99beb0f7b81c2d3d03afed2723f/385f2/04_chat.png

機能4:翻訳
記事のソース言語と設定の出力言語が異なる場合のみ、Reader Mode のヘッダに「Translate」ボタンが出る。段落単位で JSON 配列に翻訳させる
https://capsaicin.site/static/a96a0128379f4f7863ea385ba194769a/d2cc9/05_translation.png
2安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/13(水) 22:04:12.19ID:c78g5jyq0?2BP(2222)

Android版はGooglePlay公開済みだがiPhone版は何度もリジェクトされていて公開されていない
https://i.imgur.com/GtjHVJZ.png
3安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/13(水) 22:18:45.00ID:c78g5jyq0?2BP(2222)

よほどアップルに都合が悪いのか
4安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/13(水) 22:47:34.04ID:c78g5jyq0?2BP(2222)

Qiitaに記事書いて下書きで待機しとるんやがいつまでも審査に通らないくて記事も公開できない
5番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイW 6394-Rnfn)
垢版 |
2026/05/13(水) 23:25:46.54ID:y91GGGGB0
これを専ブラに組み込んだら嫌儲で無駄にする時間を節約してさらに嫌儲できるな
6番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイ 83b1-bIqC)
垢版 |
2026/05/14(木) 00:01:01.04ID:xbL6mmZ+0
入れてみたけど俺の安物galaxyだとちょっとした新聞記事の要約でも1分かかるな
バックグラウンドで全記事やっといてくれたらいいんだけども
7安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/14(木) 00:05:33.03ID:PfouavZh0?2BP(2222)

バックグラウンドでもりもりバッテリー使って要約するのもそれはそれで困るやろ
8番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイ 83b1-bIqC)
垢版 |
2026/05/14(木) 00:10:12.92ID:xbL6mmZ+0
急速充電器につなげて寝てる間にやってくれたら困らんよ
9安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/14(木) 00:11:11.11ID:PfouavZh0?2BP(2222)

じゃあやってみるか
10番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイW a3d7-GolC)
垢版 |
2026/05/14(木) 00:12:54.27ID:Q2V4yYX70
rssで情報溢れてるからllmに要約させてるわ
2026/05/14(木) 00:14:30.30ID:GK0zMte80
そんな小さいモデルでまともに動くん?
12番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイ c56c-5Mhm)
垢版 |
2026/05/14(木) 00:19:04.05ID:dP1IEn9Y0
実用アプリ作りたくないとか言って奇妙な図形アプリ作ってた時とはずいぶん熱量が違うな
あの専ブラにもローカルLLM連携入れとけよ
13番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイW 6394-Rnfn)
垢版 |
2026/05/14(木) 00:26:38.17ID:JozQJDcT0
Cloudflareのアカウントがあれば使える感じ?
14安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/14(木) 00:31:05.22ID:PfouavZh0?2BP(2222)

セルフホストする場合は無料でいいからSupabaseとCloudflareのアカウントが必要
俺とか他人のインスタンスを使う場合は何もいらない
15番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイW 956c-g3wA)
垢版 |
2026/05/14(木) 00:38:16.28ID:uJ2uYnFp0
ああSupabaseのアカウント用意すれば自分のデータはそこにホスティングできるのか
16番組の途中ですがアフィサイトへの転載は禁止です (ワッチョイW 6394-Rnfn)
垢版 |
2026/05/14(木) 00:44:54.01ID:JozQJDcT0
なるほどありがとうブログ読んだは
もう暫くrss使ってなかったから知らなかったけどPocketサ終したんだね
ブックマーク管理のサービスでraindropとかいうの使ってるけどああいうのも本来はセルフホストの方がいいんだろうな
17安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/14(木) 00:57:37.87ID:PfouavZh0?2BP(2222)

バックグラウンドフェッチは難しそうやな
バックグラウンドで動かせる時間が短すぎる
1分やそこらじゃフィードを更新で終わりそうだ
それプラスLLMで要約とかやってる時間ないで
18番組の途中ですがアフィサイトへの転載は禁止です (JP 0H79-bIqC)
垢版 |
2026/05/14(木) 01:17:54.24ID:gzVjgJVNH
そんな制限あるのか残念
検討ありがと
2026/05/14(木) 01:33:34.91ID:GK0zMte80
きよーけん君天才だな
20番組の途中ですがアフィサイトへの転載は禁止です (オイコラミネオ MMf1-07z4)
垢版 |
2026/05/14(木) 02:03:35.19ID:Yl2qXCeTM
ストレージどれくらい食いつぶすの?
21安倍晋三エクスプローラー (ワッチョイ cd5c-MMHH)
垢版 |
2026/05/14(木) 02:19:48.76ID:PfouavZh0?2BP(2222)

はい
https://i.imgur.com/MRhkg48.png
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況