新バージョン公開まで

毎週欠かさず結果という形でここに載せてきましたが、現時点で使える学習モデルがないっていうか、自分が利用しているものでもまだ学習させてる最中だったり、次期バージョン用のモデルの準備以前にAutoMLで想定する動作に至ってない問題の最初で時間を取られてます。

中途半端なものは載せる意味ないかと思うので次期バージョン公開までお休みさせて頂きます。

現状Copilotに質問ぶつけてたんですが、途中で回答がフリーズしてしまう現象(Copilot自体がです)にお手上げで、明日からはGeminiで試してみようと考えてます。

追記 2025.3.1 18:45
AutoMLは結局元に戻す事になりました。どこかでAutoML使い始めた時に基本floatって読んでたのでそれに従ってたんですが、stringへの変更は断念せざるを得なくなりました。なので、諸々のコーディングとテストは終わってまして、リリース用学習モデル作業に専念してます。

追記 2025.3.6 23:28
モデルビルダーで72時間学習させて得た最適RMSE 1.3887は196MBのモデルでロード時にOut Of Memoryで使い物になりませんでしたorz もう少なくとも今回5度目の24時間学習をさせてますが、これで得られたものが良くも悪くもここまでの成果をまとめてリリースに向けるかもです。

追記 2025.3.13 20:45
ここまでの通常用の最適RMSE 1.3971は178MBと大きいものの行けたので順位予測用学習データCSV出力したんですが、これが13時間越え😱 で、今学習させてますが、これ明日朝には終わる予定です。これが限界って勝手に決めてますが、精度がではなく時間的にリリースタイミングの限界って意味です。金曜朝に終わって準備は帰宅後。残念ながら明日は残業もあるので、それでも土曜日開催には間に合う様にここにはアップ出来るかと。

2025.2.15～2.25.2.16

ひたすら学習はさせておりますが、ここまで新馬戦用最適RMSE 1.9777と通常用最適RMSE 1.4159ともう一つ良いものが出なくて苦労しており公開出来ない状態が続いておりご迷惑をお掛けしております。

• ShinbaTimeCK.mlnet
  

  4R	1点	芝(0R)	ダート(4R)	8頭以下(0R)	9～12頭(1R)	13頭以上(3R)	多点
  単勝	0.00% (0.00%)	-- (--)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	50.00% (50.00%)
  複勝	50.00% (67.50%)	-- (--)	50.00% (67.50%)	-- (--)	0.00% (0.00%)	66.67% (90.00%)	100.00% (204.17%)
  枠連	0.00% (0.00%)	-- (--)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	50.00% (85.83%)
  馬連	0.00% (0.00%)	-- (--)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	25.00% (52.50%)
  ワイド	25.00% (102.50%)	-- (--)	25.00% (102.50%)	-- (--)	0.00% (0.00%)	33.33% (136.67%)	50.00% (720.00%)
  馬単	0.00% (0.00%)	-- (--)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	25.00% (45.83%)
  三連複	25.00% (350.00%)	-- (--)	25.00% (350.00%)	-- (--)	0.00% (0.00%)	33.33% (466.67%)	25.00% (87.50%)
  三連単	0.00% (0.00%)	-- (--)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	25.00% (47.60%)
  総合	50.00% (65.00%)	-- (--)	50.00% (65.00%)	-- (--)	0.00% (0.00%)	66.67% (86.67%)	100.00% (104.18%)

• SouhaTimeCK.mlnet
  

  68R	1点	芝(33R)	ダート(32R)	障害(3R)	8頭以下(1R)	9～12頭(16R)	13頭以上(51R)	多点
  単勝	20.59% (75.88%)	12.12% (41.21%)	25.00% (107.50%)	66.67% (120.00%)	100.00% (230.00%)	18.75% (48.75%)	19.61% (81.37%)	45.59% (73.63%)
  複勝	50.00% (77.35%)	42.42% (67.88%)	53.12% (82.50%)	100.00% (126.67%)	100.00% (150.00%)	56.25% (78.75%)	47.06% (75.49%)	91.18% (81.23%)
  枠連	14.52% (209.84%)	14.29% (163.21%)	15.62% (263.75%)	0.00% (0.00%)	-- (--)	18.75% (368.75%)	11.76% (139.41%)	29.03% (100.35%)
  馬連	10.29% (159.26%)	9.09% (133.03%)	12.50% (201.25%)	0.00% (0.00%)	0.00% (0.00%)	18.75% (369.38%)	7.84% (96.47%)	14.71% (62.06%)
  ワイド	22.06% (110.15%)	21.21% (128.48%)	21.88% (95.63%)	33.33% (63.33%)	0.00% (0.00%)	43.75% (226.25%)	15.69% (75.88%)	27.94% (82.45%)
  馬単	4.41% (188.68%)	3.03% (125.76%)	6.25% (271.25%)	0.00% (0.00%)	0.00% (0.00%)	6.25% (259.38%)	3.92% (170.20%)	14.71% (67.99%)
  三連複	7.35% (69.26%)	6.06% (57.27%)	9.38% (88.12%)	0.00% (0.00%)	0.00% (0.00%)	18.75% (148.75%)	3.92% (45.69%)	7.35% (17.32%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	7.35% (22.11%)
  総合	51.47% (110.20%)	45.45% (88.19%)	53.12% (138.75%)	100.00% (40.43%)	100.00% (54.29%)	56.25% (187.50%)	49.02% (85.56%)	91.18% (44.47%)

この二つがある程度のものが出来て、はじめて順位予測学習用データ出力出来るのでまずはこの2つが良いものになる様に進めてます。

次期バージョンについて

ちょっと残念なお知らせなんですが、これまで大体バージョンアップしてもある程度学習モデルの互換性を保つ努力はしてきました。今回は血統登録番号10桁を単精度実数として利用してきたこれまでのバージョンの、まあ設計ミスの対処となり、更にML.NETでの単精度実数か文字列のみの対応(倍精度実数は未対応、LightGBMとかは対応)という事で、ファクターとしてはカテゴリとしてましたので単精度実数としてたものを文字列にする事自体はそれ程影響はない筈ですが、実数と文字列という大きな変更をしてしまったので、これまでの学習モデルを指定するとエラーで使えません。

そんな訳で、今必死に学習モデルを準備してるんですが、これまでの予測精度と同等程度が期待出来るものが出てこないのです。適正的な学習時間はもちろん、それ以上長時間な学習を何度も試してますが、これまあ、若干運とかもあるんですが、全くリリース出来るレベルではないのでひたすら学習させてます。

精度が低くてもリリースして、ユーザー様にそれぞれ学習させて頂くという選択肢もなくはないのですが...根気強いまたは運があるユーザー様なら良い学習モデルを得られる可能性はあります。

もう少し頑張ってみますのでお待ち頂ければ幸いです。

2025.2.8～2025.2.10

• ShinbaTimeCK.mlnet
  

  6R	1点	芝(4R)	ダート(2R)	8頭以下(0R)	9～12頭(1R)	13頭以上(5R)	多点
  単勝	33.33% (125.00%)	25.00% (132.50%)	50.00% (110.00%)	-- (--)	100.00% (530.00%)	20.00% (44.00%)	33.33% (41.67%)
  複勝	83.33% (143.33%)	75.00% (135.00%)	100.00% (160.00%)	-- (--)	100.00% (220.00%)	80.00% (128.00%)	100.00% (62.22%)
  枠連	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	16.67% (40.00%)
  馬連	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)
  ワイド	16.67% (80.00%)	25.00% (120.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	20.00% (96.00%)	16.67% (26.67%)
  馬単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)
  三連複	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)
  総合	83.33% (43.54%)	75.00% (48.44%)	100.00% (33.75%)	-- (--)	100.00% (93.75%)	80.00% (33.50%)	100.00% (10.44%)

• SouhaTimeCK.mlnet
  

  66R	1点	芝(29R)	ダート(34R)	障害(3R)	8頭以下(1R)	9～12頭(14R)	13頭以上(51R)	多点
  単勝	13.64% (68.94%)	20.69% (130.00%)	8.82% (22.94%)	0.00% (0.00%)	0.00% (0.00%)	21.43% (116.43%)	11.76% (57.25%)	42.42% (75.81%)
  複勝	36.36% (69.55%)	31.03% (62.76%)	38.24% (68.53%)	66.67% (146.67%)	0.00% (0.00%)	57.14% (99.29%)	31.37% (62.75%)	89.39% (77.37%)
  枠連	9.38% (107.66%)	7.14% (133.57%)	11.76% (92.65%)	0.00% (0.00%)	-- (--)	7.14% (25.00%)	9.80% (128.24%)	20.31% (81.00%)
  馬連	6.06% (22.58%)	3.45% (22.41%)	8.82% (24.71%)	0.00% (0.00%)	0.00% (0.00%)	7.14% (46.43%)	5.88% (16.47%)	12.12% (53.79%)
  ワイド	9.09% (18.94%)	6.90% (18.97%)	11.76% (20.59%)	0.00% (0.00%)	0.00% (0.00%)	14.29% (30.71%)	7.84% (16.08%)	22.73% (42.32%)
  馬単	3.03% (28.79%)	3.45% (56.55%)	2.94% (7.65%)	0.00% (0.00%)	0.00% (0.00%)	7.14% (117.14%)	1.96% (5.10%)	12.12% (53.51%)
  三連複	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	3.03% (35.53%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	3.03% (37.57%)
  総合	37.88% (39.30%)	31.03% (52.68%)	41.18% (29.63%)	66.67% (19.13%)	0.00% (0.00%)	57.14% (54.37%)	33.33% (35.74%)	89.39% (47.89%)

• RaceJuniFullCK.mlnet
  

  72R	1点	芝(33R)	ダート(36R)	障害(3R)	8頭以下(1R)	9～12頭(15R)	13頭以上(56R)	多点
  単勝	18.06% (80.69%)	21.21% (133.94%)	16.67% (38.61%)	0.00% (0.00%)	0.00% (0.00%)	26.67% (96.00%)	16.07% (78.04%)	40.28% (65.19%)
  複勝	45.83% (82.36%)	33.33% (57.88%)	55.56% (99.44%)	66.67% (146.67%)	0.00% (0.00%)	53.33% (83.33%)	44.64% (83.57%)	87.50% (72.92%)
  枠連	7.14% (93.71%)	3.12% (10.94%)	8.33% (80.83%)	50.00% (1,650.00%)	-- (--)	13.33% (243.33%)	5.36% (51.96%)	15.71% (65.69%)
  馬連	5.56% (55.69%)	3.03% (19.70%)	5.56% (15.83%)	33.33% (930.00%)	0.00% (0.00%)	13.33% (229.33%)	3.57% (10.18%)	8.33% (24.17%)
  ワイド	11.11% (61.67%)	9.09% (31.21%)	11.11% (71.11%)	33.33% (283.33%)	0.00% (0.00%)	20.00% (85.33%)	8.93% (56.43%)	22.22% (44.35%)
  馬単	1.39% (3.61%)	0.00% (0.00%)	2.78% (7.22%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	1.79% (4.64%)	8.33% (23.45%)
  三連複	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	5.56% (61.56%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	5.56% (55.38%)
  総合	47.22% (47.06%)	33.33% (31.79%)	58.33% (39.13%)	66.67% (320.87%)	0.00% (0.00%)	53.33% (92.17%)	46.43% (35.60%)	87.50% (51.62%)

ここまで想定以上の不調で困惑中です。学習も進めてるんですが全く想定する様な学習モデルが得られないので新たなバージョン公開に至れないorz ちと作業的には気になる部分を修正して再度学習してみたいとは思ってます。で、仮にその仮定的に疑った部分が原因だったとすると、それに対処して頂ける為のデータ揃えたりで時間も掛かる可能性は大なので今しばらく現行バージョンで辛抱願います。

2025.2.1～2025.2.2

• ShinbaTimeCK.mlnet
  

  6R	1点	芝(4R)	ダート(2R)	8頭以下(0R)	9～12頭(0R)	13頭以上(6R)	多点
  単勝	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	33.33% (38.33%)
  複勝	33.33% (125.00%)	0.00% (0.00%)	100.00% (375.00%)	-- (--)	-- (--)	33.33% (125.00%)	83.33% (64.44%)
  枠連	16.67% (48.33%)	25.00% (72.50%)	0.00% (0.00%)	-- (--)	-- (--)	16.67% (48.33%)	16.67% (18.12%)
  馬連	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	0.00% (0.00%)
  ワイド	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	0.00% (0.00%)
  馬単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	0.00% (0.00%)
  三連複	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	0.00% (0.00%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	-- (--)	-- (--)	0.00% (0.00%)	0.00% (0.00%)
  総合	50.00% (21.67%)	25.00% (9.06%)	100.00% (46.88%)	-- (--)	-- (--)	50.00% (21.67%)	83.33% (7.33%)

• SouhaTimeCK.mlnet
  

  66R	1点	芝(28R)	ダート(35R)	障害(3R)	8頭以下(7R)	9～12頭(18R)	13頭以上(41R)	多点
  単勝	15.15% (60.45%)	14.29% (76.79%)	17.14% (52.57%)	0.00% (0.00%)	42.86% (101.43%)	11.11% (28.33%)	12.20% (67.56%)	45.45% (66.46%)
  複勝	59.09% (101.36%)	60.71% (121.43%)	57.14% (85.43%)	66.67% (100.00%)	100.00% (154.29%)	55.56% (80.56%)	53.66% (101.46%)	87.88% (82.32%)
  枠連	8.77% (51.40%)	4.17% (18.33%)	13.33% (83.00%)	0.00% (0.00%)	-- (--)	11.11% (51.11%)	7.32% (49.02%)	22.81% (101.06%)
  馬連	10.61% (61.52%)	7.14% (26.07%)	14.29% (95.14%)	0.00% (0.00%)	28.57% (92.86%)	11.11% (52.78%)	7.32% (60.00%)	16.67% (45.91%)
  ワイド	21.21% (112.27%)	21.43% (165.36%)	22.86% (79.43%)	0.00% (0.00%)	57.14% (115.71%)	11.11% (23.89%)	19.51% (150.49%)	39.39% (83.84%)
  馬単	4.55% (43.79%)	0.00% (0.00%)	8.57% (82.57%)	0.00% (0.00%)	14.29% (77.14%)	5.56% (33.89%)	2.44% (42.44%)	16.67% (40.10%)
  三連複	6.06% (116.82%)	7.14% (126.43%)	5.71% (119.14%)	0.00% (0.00%)	0.00% (0.00%)	5.56% (21.11%)	7.32% (178.78%)	22.73% (102.95%)
  三連単	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	0.00% (0.00%)	22.73% (97.78%)
  総合	59.09% (68.75%)	60.71% (67.68%)	57.14% (74.51%)	66.67% (12.50%)	100.00% (77.35%)	55.56% (36.46%)	53.66% (81.22%)	87.88% (84.25%)

• RaceJuniFullCK.mlnet
  

  72R	1点	芝(32R)	ダート(37R)	障害(3R)	8頭以下(7R)	9～12頭(18R)	13頭以上(47R)	多点
  単勝	20.83% (80.69%)	18.75% (90.31%)	24.32% (78.92%)	0.00% (0.00%)	42.86% (101.43%)	22.22% (66.67%)	17.02% (82.98%)	41.67% (60.14%)
  複勝	50.00% (84.31%)	46.88% (91.56%)	54.05% (81.89%)	33.33% (36.67%)	85.71% (110.00%)	50.00% (69.44%)	44.68% (86.17%)	84.72% (79.72%)
  枠連	7.94% (33.65%)	7.14% (26.07%)	9.38% (43.44%)	0.00% (0.00%)	-- (--)	11.11% (51.11%)	6.38% (25.53%)	22.22% (94.24%)
  馬連	8.33% (43.19%)	6.25% (22.81%)	10.81% (64.32%)	0.00% (0.00%)	28.57% (92.86%)	11.11% (52.78%)	4.26% (32.13%)	15.28% (40.23%)
  ワイド	19.44% (105.56%)	18.75% (144.69%)	21.62% (80.27%)	0.00% (0.00%)	57.14% (115.71%)	11.11% (23.89%)	17.02% (135.32%)	37.50% (81.81%)
  馬単	6.94% (66.39%)	3.12% (27.50%)	10.81% (105.41%)	0.00% (0.00%)	14.29% (77.14%)	11.11% (82.78%)	4.26% (58.51%)	15.28% (36.13%)
  三連複	6.94% (120.69%)	6.25% (110.62%)	8.11% (139.19%)	0.00% (0.00%)	0.00% (0.00%)	11.11% (75.56%)	6.38% (155.96%)	19.44% (89.93%)
  三連単	4.17% (152.08%)	3.12% (56.56%)	5.41% (247.03%)	0.00% (0.00%)	0.00% (0.00%)	11.11% (221.11%)	2.13% (148.30%)	19.44% (86.73%)
  総合	51.39% (86.65%)	50.00% (71.98%)	54.05% (106.12%)	33.33% (4.58%)	85.71% (71.02%)	50.00% (80.42%)	46.81% (90.61%)	84.72% (75.85%)

今回の修正は既にコーディングは終わっるんですが、学習モデルでちと苦労してます。新馬戦用ではRMSE 1.9774を採用しようかと思ってますが、通常用が苦戦してまして、なかなか1.4未満になりません。24時間学習で行ってますので時間を要します。後30分程度で終わる学習での最適RMSEは現時点で1.4069です。今週末までには変更申請したいと思ってますが、あまりに微妙な学習モデルでのリリースは避けたいと思ってますので、もしかすると今しばらくお待ち頂く事になるかもしれません。