DataRobotでのモデル構築の再現性について質問です。
学習データセットの列名を変えたことによって、リーダボード上の順位およびバックテストの結果に違いが見られました。
DataRobotに限らず、列名の変更がモデルに影響を及ぼすことはないといった認識ですが、こちら、何かDataRobotの仕様などありますでしょうか。
行方向のデータ変更でなくとも、データが変わるとパーティションが変わることがございますので、1つの可能性としてパーティションの変更が考えられます。モデルの"予測"から交差検定の結果をダウンロードしていただいて、パーティションのアサインが変わっているかどうかご確認いただいてもよろしいでしょうか?