投稿者: kanrisha

生成AIとConceptBase

ジャストシステムが2000年～2005年頃に販売開始した製品にConceptBaseというのがありました。
一言で言えば、類似文書検索システムです。ある文書と良く似た内容の文書を社内の文書ライブラリーから探して来るとか、FAQシステムとして、何かの不具合の解決方法を書いた文書を探すとか、そういうためのものでした。
その基礎になっている技術は、マハラノビスの汎距離と言って、ある文書の中の名詞系の語彙だけを抜き出し、それらの語彙に対して一種の分類を行い、分類の種類を一つの座標軸にし、単語の出現回数によって多数のベクトルを持った多次元ベクトル空間を作り、その重心を取ります。類似文書とはつまりその重心同士の距離が短いということになります。
これって実は今話題の生成AIのEmbeddingと呼ばれる技術そのものです。ただConceptBaseの頃は名詞系の語彙だけで多次元ベクトル空間を作りましたけど、今はトークンと呼ばれていますけど、名詞系以外の形態素も含めて分類情報を与えているのだと思います。
ちなみにChatGPT4にマハラノビスの距離とEmbeddingが関係あるか聞いてみました。回答はやはりその通りでした。

Q: 生成AIのEmbeddingは、マハラノビス距離と関連がありますか？

A: ChatGPT
はい、マハラノビス距離と生成AIのembeddingには関連があります。マハラノビス距離は、特徴空間において、データの分布を考慮して2つの点またはデータセット間の距離を測定する方法を提供します。生成モデルのembeddingは、高次元データを低次元空間にマッピングし、データ間の関係を捉える役割を果たします。
具体的には、生成モデルが学習する過程で、データの内部構造やデータ間の関係を学習し、これらの情報を低次元のembedding空間にエンコードします。マハラノビス距離を利用することで、この低次元空間においてデータ点間の相対的な距離をより適切に計算し、クラスタリングや異常検知、類似度計算など多くのタスクを効果的に行える可能性があります。マハラノビス距離は、特にデータの分布が正規である場合や共分散行列が利用可能な状況で有用です。

ちなみにこのマハラノビス距離は、品質保証の分野でも、田口メソッドと組み合わせたマハラノビス･タグチ法として、機械などの運用中に起こりうる不具合の時期を予測する技術としても使われています。

セイカ食品の兵六餅

これも取り寄せてみました。鹿児島のセイカ食品のボンタンアメと並ぶお菓子である「兵六餅」です。ボンタンアメと比べるとちょっとマイナーで、これまで買ったことはありませんでしたが、食べてみるとこれはなかなかですね。ボンタンアメと同じく求肥を使った朝鮮飴のバリエーションですが、兵六餅はきな粉、抹茶、海苔、餡などを入れていて味が複雑でなかなか面白いハーモニー感があります。ネーミングとパッケージの絵は、鹿児島に伝わる「大石兵六夢物語」という民話にちなんでいます。

NHK杯戦囲碁　一力遼棋聖 対 孫喆7段（2023年9月24日放送分）


本日のNHK杯戦の囲碁は、黒番が一力遼棋聖、白番が孫喆7段の対戦です。孫7段は、棋聖戦でSリーグに昇格を決めるなど、今年度の活躍が目立ちます。対する一力棋聖もついに本因坊戦で井山裕太3冠からタイトルを奪取し、実力一位の座を固めています。
この碁では左上隅から競い合いが始りました。白がはさんだのに、ぶつかって受けたのが珍しい形でしたが、中央に頭を出した後、上辺に打って白を攻撃する態勢を見せ、ここから激しい競い合いになりました。黒が更に左辺でも厳しい打ち方を見せたので、ここでどちらかがつぶれてもおかしくないような戦いになりましたが、結局攻め合いで黒が6子を捨てて締め付ける形となりました。ここまではどちらかというと白の方が上手く打っていたと思います。次の焦点は右上隅方面で、黒が白の薄みに対し覗きのような手を打ったのに対し、白が反発したため、ここでも激しい戦いとなりました。しかし、ここは黒が上手く打ち回し、白地が付きそうだった所に地をもって治まり、なおかつ中央の石が左側に連絡出来ました。ここで一転して黒のリードに変わりました。黒はしかしヨセで左下隅方面で最善手を逃し、若干白に寄りつかれました。それでも黒は全体に厚く、順調に各所で地を増やして、最後は白の投了となりました。

カクテル用具

川崎時代の18年は段ボール箱に入れたままだった、バーテンダーグッズ一式。徳島に来る前の市が尾在住時代に、渋谷の道玄坂のレストラン用品屋で買ったもの。左のサントリーの「バーテンダーズマニュアル」読んで、バースプーンの回し方とかシェイクの仕方とか練習しました。同じく渋谷の洋酒専門店でミニボトルのリキュール類とジン、ウォッカ、ウィスキー類を多数買って、カクテルを50種類くらい（ドライマティーニ、マンハッタン、ジントニック、ジンリッキー、スクリュードライバー、バラライカ、モスコミュール、ピンクレディー、ホワイトレディー、ニコラシカ、ダイキリ、ミントジュレップ、ソルティドッグ、カルーアミルク、カンパリソーダ、カンパリオレンジ、マルガリータ、…）実際に作りました。当時常時持ち歩いていたHP200LXにカクテルのレシピのデータを入れていました。その後糖尿病になったので止めました。リキュール類ってほとんどが大量の砂糖が入っていて糖尿病には最悪なんです。

朝鮮飴ふたたび

何だか食べたくなって、久しぶりにこれを取り寄せてみました。3回目です。（但し2回目は折原浩先生へのお土産として買ったもの。）熊本の園田屋の朝鮮飴。加藤清正が朝鮮出兵の時に日持ちのする食料として持っていったと言われてこの名前があります。餅米と水飴と砂糖の素朴な味です。これを小さく切ってボンタンの果汁を入れたのが鹿児島のボンタンアメです。ちなみに、園田屋の店主は漫画家で、前に買った時はそのイラストが付いていましたが、今回のには無かったです。白い粉は覚醒剤、じゃなくて上質の片栗粉です。素朴でほんのりとした甘さがとても上品です。

Amazon Linux 2023でvsftpdで10.5MiB以上のサイズのファイルがアップロード出来ない。

会社でExmentを動かすため、アマゾンのAWSのEC2という仮想サーバーでAmazon Linux 2023のサーバーを構築しました。（構築しました、と言っても、すぐにターミナルソフトでログイン出来る形で提供されます。）
このサーバー上でvsftpdを動かしてFTPサーバーとしたのですが、何故かクライアントからアップロードした場合、サイズが10.5MiBを超えるファイルは転送が止まりエラーになります。ちなみに私の家のサーバー（AlmaLinux ９）につなぐと問題ありませんので、クライアントや会社のファイヤーウォールの問題ではありません。
色々調べてみたのですが、Amazon Linux 2023自体がまだ公開から半年くらいからのせいか、Web上には情報がありませんでした。

取り敢えず以下の代替案は見つけました。
１．クライアントとしてWinSCPを使う。
２．プロトコルをftpではなくscpにする。
３．https://www.chiark.greenend.org.uk/~sgtatham/putty/latest.html?fbclid=IwAR0zkJ-x5x3ZS6xntB9q-vppMKDSGEcMJvpMGM8nDptqs1KtMDRNg2D9Rf より、puttygen.exeをダウンロードする。
４．puttygen.exe を使い、pemファイルからppkファイルを作成し、それをWinSCPの認証の所に設定。

３、４、が必要なのは、EC2のサーバーはログインの時にIDとPW以外にPEMファイルを使います。ところがWinSCPはPutty形式しか受け付けないので、３のツールでPEMからPPKファイルを作る必要があります。WinSCPはAmazonのS3もサポートしているので、持っておいて損は無いと思います。

なお、ファイル数が少なければ、TeraTerm（EC2にはベータ版が必要）でサーバーにつないだ後に、その窓上にファイルをドロップすればアップロード出来ます。この場合もプロトコルはSCPです。

ついでに、これまでCentOS他のLinuxを使っていて、Amazon Linux 2023を初めて使った人が最初にとまどうのは、firewalldが入っていないことです。別にdnfで入れればいいのですが、ポートの開け閉めは別にセキュリティーグループというのを設定してそこでやるのがAWSのec2のスタンダードなやり方になっています。

「帰ってきたウルトラマン」の「夜を蹴ちらせ」

「帰ってきたウルトラマン」の「夜を蹴ちらせ」を観ました。吸血鬼と化した謎の女性の正体は、心臓麻痺で死んだ若い女性で、父親がその姿をそのまま止めておこうとして火葬にせず洞窟の中に安置していたのを、宇宙人に利用されて…という話です。何と言うかあまりにドラキュラ伝説そのままでもう少し捻りが欲しいです。で巨大化した宇宙人が「ドラキュラス」でそのまんま。ウルトラマンは血ならぬエネルギーを吸い取られてほとんど倒れかけますが、万能ブレスレットで強力な光を発し、ドラキュラスが弱った隙に今度はブレスレットを十字架状の槍に変えて、ドラキュラスの胸に突き刺して倒します。再度までドラキュラの設定に寄りかかりすぎです。
次のエピソードはついに最大のトラウマ回で坂田兄とアキがナックル星人に斬殺されます。

トワイライト・ゾーンの”Valley of the Shadow”

トワイライト・ゾーンの”Valley of the Shadow”を観ました。新聞記者のフィリップ･レッドフィールドはある日道に迷い、ガソリンを入れるために偶然ピースフル･ヴァリーという町にたどり着きます。そこで彼が連れていた犬が女の子が操る何かのマシンで消されてしまうという事件が起きます。彼がそれをその女の子の父親に詰め寄ると、その男は犬は裏庭にいると言って、やはり同じようなマシンを操り、彼の犬を出現させます。レッドフィールドは食べ物屋を探してその町のホテルに立ち寄りますが、そのホテルは客は誰もおらず、そこの新聞は1953年の非常に古いものでした。彼は車で町を出ようとしますが、突然車がクラッシュし彼の犬が死んでしまいます。現れた男たちによって彼はその町の町長のところに連れていかれます。それによるとその町は100年ほど前にある星のエイリアンがやって来て、地球の科学レベルをはるかに超えた科学をもたらし、町の人はその科学によって作られたマシンで何でも作ることが出来、あらゆる病気や怪我もそのマシンで治すことが出来ました。町長はこの技術が世界の他の人に知られると戦争に使われるため、この町だけの秘密になっていると言います。秘密を外に出さないため、レッドフィールドは町の住民になるように言われ、家を与えられます。しかしその回りにはフォースフィールドが張り巡らされ、彼は一種の囚人と同じでした。しかしホテルで知り合った女性が彼を好きになり、彼が逃げ出す手伝いをします。レッドフィールドは何でも作れる機械で銃を作り、町長達3人を撃って逃げようとします。しかし彼が盗み出した秘密を書いたノートは白紙でした。結局、彼は罠にはめられて試され、銃を使ったことでやはり暴力のためにこの力を使ったとされ、処刑されます。その処刑とは記憶を消されて町を出て行くことでした…
まあ面白くなくはないですが、30分ものに比べてより面白くなったとは言えないと思います。前も書きましたが、アウター・リミッツ調になってしまったと思います。もちろんアウター・リミッツの方が影響を受けているのでしょうけど。

お墓参り

まだ彼岸の入りではありませんが、秋分の日は今年は土曜日と重なって色々と忙しいので、本日早野聖地公園にお墓参りに行って来ました。ついでに、墓地を登録している住所変更も行い、これで本当に全ての引っ越し手続きが完了しました。さすがにまだお墓参りに来ている人は少なかったです。もっとも秋分の日や春分の日でも、最近はお墓参りに来る人は少数派になっていると思います。

NHK杯戦囲碁　辻󠄀篤仁4段 対 許家元9段（2023年9月17日放送分）


本日のNHK杯戦の囲碁は、黒番が辻󠄀篤仁4段、白番が許家元9段の対戦です。この碁の序盤では、黒が左下隅で攻めを見られているのを手抜きし、他に先着して得を図りました。その代償で右下隅を攻められましたが、不可解だったのが形として両ノゾキが残る形を敢えて打ち、しかし実際にそこに打たれ、石の分断を避けるために白にポン抜きを許すことになったことです。白はポン抜いた後、更に切って劫を仕掛けました。黒には劫立てが無く、結局当たりの1子を延びて逃げましたが、白はその延びた黒を追って中央に厚みを築き、右下隅からの黒を狙いました。そのため黒はそちらに手を入れる必要があり、中央での競い合いで白は黒をハネることが出来ました。そしてその結果白は上辺に大きな地模様を築くことが出来ました。しかしその後上辺右で延びていれば普通だったのを押さえて、黒に切られて劫で受けました。これは明らかに白が無理気味の打ち方で、劫は白が勝ったものの、白の中央が薄くなりました。白はしかし中央の数子を捨てるかと思いきやしのぎに行きました。ここでの黒の打ち方に疑問があり、結果論としては左辺で白が取られていた2子を助けながら中央に2眼作ってしのぐことが出来、これで白の優勢が確定しました。結局地合は盤面でも白がいいということになり、黒の投了となりました。