チャンキングとは?RAGの精度を決める文書の分け方
RAGの答えがずれる原因は、モデルより先に「文書の切り方」にあります。チャンクの大きさが検索の解像度を決める理由、オーバーラップが効く場面、固定長・区切り文字・構造という3つの分け方の違いを整理しました。
AIRAGの答えがずれる原因は、モデルより先に「文書の切り方」にあります。チャンクの大きさが検索の解像度を決める理由、オーバーラップが効く場面、固定長・区切り文字・構造という3つの分け方の違いを整理しました。
Tech2つのソート済みファイルを比べ、共通行と片方だけの行を3列に振り分ける comm。行の編集手順を返す diff とは役割が違います。-1 -2 -3 の使い分け、ソート順の落とし穴、プロセス置換での使い方までを実例で整理しました。
Techシェルスクリプトの中間ファイルに固定名を使うと、同時実行で中身が混ざります。mktempの基本形からテンプレート指定・一時ディレクトリ・trapでの片づけまで、実測した出力で整理しました。
Tech同じコマンドを何度も打ち直して画面を見張る作業は、watchに任せられます。基本形から間隔指定の-n・変化を光らせる-d・パイプを使うときのクォートまで、実測した出力で整理しました。
Tech大きなファイルを split で分割し、cat で元に戻す手順を整理しました。行数指定の -l とサイズ指定の -b、-n がバイト単位で切れる罠、サフィックス枯渇まで実際に走らせて確かめています。
Tech終わらないコマンドに上限をつける timeout の使い方を整理しました。終了ステータス124の意味、SIGTERMを無視されたときの -k、パイプ内での挙動まで実測つきで解説します。
Techパスからファイル名やディレクトリだけを取り出す basename と dirname、実体を解決する realpath の基本を整理しました。末尾スラッシュやクォート忘れでハマる点も実行結果つきで解説します。
AI8月17日〜23日の生成AIの動き。GPT-5.6 Sol の API 値下げ、Claude Code の週次上限50%増が8月31日まで延長された件、Bedrock で請求が黙って2倍になっていたバグまで出典つきでまとめます。
TechIIS 上で Django を動かすための web.config の書き方を整理しました。HttpPlatformHandler の設定、ポート番号の受け取り方、ALLOWED_HOSTS と静的ファイルの扱いまで。
AIAIが最近の出来事を知らない理由、知識カットオフを整理しました。公式ドキュメントが併記する「信頼できるカットオフ」と「学習データのカットオフ」の違いから、足りない知識を外から渡す考え方まで。