予測ベンダーのトップ10の嘘
予測は非常に困難です、特に未来については。 ニールス・ボーア
Lokadはすでに5年以上にわたって予測ビジネスに従事しており、私たちは真実であると信じるものに固執することに莫大な誇りを持っている一方で、数え切れないほど多くの競合他社が恥知らずな嘘をついているのを目の当たりにしてきました。そこで、記録と楽しみのために、予測ベンダーのトップ10の嘘を挙げてみましょう。
1. 私たちの予測は正確です
2. 私たちはあなたのプロモーションを予測します
私たちは、already、written、extensivelyに、promotion予測について書いてきました。一言で言えば、プロモーション予測を正しく行うことは途方もなく難しいのです。特に、統計で利用可能な何かを得るには膨大なデータの整備が必要です。eコマースでは、どの商品も数分で何もない状態からフロントページに掲載され、また数分で何もない状態に戻るため、問題はさらに困難になります。ベンダー選定プロセスの中で、ある予測技術がプロモーション予測に十分であると主張することは、そのベンダーが実際のプロモーション予測において危険なほど経験不足であることを示しているに過ぎません。より経験豊富な、または正直なベンダーであれば、そのような プロモーション予測のベンチマーク が大規模なゴミ入力・ゴミ出力の演習にならない可能性は一切ないと主張するでしょう。
3. 私たちはあなたの業界に精通しています
ベンダーは 非常に精通している ため、(e)コマースの場合の日次または週次の中央値予測など、失敗が保証された予測手法をためらうことなく提案してきます。Lokadでは、在庫最適化において中央値予測がどうしても機能しないことに気づくまで数年を要しました。私たちは、顧客のビジネスに対する予測の実際の影響を観察し始めた日から、その問題の深刻さを実感しました。見栄えは良くありませんでしたが、大いに啓発される結果となりました。もし予測ベンダーが、在庫最適化においてリオーダー・ポイントと在庫補充の数量のみが唯一重要な予測であると強調しないのであれば、そのベンダーは欺瞞的であるか無知であると言えます。
4. 私たちの技術は直感的で効率的です
Statistical forecasting は非常に直感に反するため、直感的でありながら効率的であることは不可能です。それは直感的であっても完全に誤っているか、あるいは不安を覚えるほどでありながら おそらく 正しいかのどちらかです。これは人間の脳が働く仕組みそのものなのです。私たちはランダム性を正しく認識するための設計がなされていません。統計的ノイズに過ぎないにもかかわらず、あらゆるところにパターンを見出してしまうのです。統計的予測が人間の「専門家」予測に対して効率的である理由は、予測モデルが人間の知性の基準からすると非常に単純であっても、正しく設計されればバイアスが存在しないという事実に他なりません。
5. 在庫がX%少なく、品切れがY%減るでしょう
エンタープライズソフトウェアベンダーは、画期的な結果を主張するケーススタディを非常に好みます。Lokad内の内輪の冗談として、競合他社の主張に追いつくためには、私たちのソフトウェアが癌を治す と主張し始めるべきだと言われています。実際のところ、それらのケーススタディの大多数は全くのゴミです。数字は作り話であり、推薦文も作り話であり、もし見られる改善があったとしても、それは予測ソリューションとは全く関係がありません。ケーススタディが顧客に良い報道をもたらし、彼ら自身の競争相手を狂わせるため、顧客は満足しているのです。組み合わせとして、非常に大きな声で、超高価なエンタープライズソリューションXYZがあなたのビジネスに起こった最高の出来事であったと主張すれば、競合他社にも同じ途方もなく高価なミスをさせることになるのです。
6. あなたは予測を調整する自由を手に入れるでしょう
そして、自分の足を撃つ弾は無料で付いてきます。また、私たちから購入できる驚くべきヘルスケアプランもご覧になるべきでしょう。クライアントに対して予測を 完全にコントロール する機会を与えることは、技術的には嘘ではありませんが、その結果を考えれば極めて欺瞞的な行為に留まります。これはモラルハザードの一例です。成功した場合は、ベンダーの技術が称賛され、失敗した場合は、クライアントの無能なスタッフが非難されます。さらに、もし最初の試みが失敗した場合、追加のトレーニングセッションをベンダーから購入する以外に選択肢がありません。明らかに、問題を長引かせることでまともな利益が得られるのです。
7. 私たちは最先端技術を使用しています
統計学習に関して言えば、最先端技術は音声認識、顔認識、スパムフィルタリング、そしてGoogle、Microsoft、Appleといった企業が何億も投資しているその他の極めて横断的な機械学習の問題に見られます。謙虚に言えば、需要予測は数億円規模の研究開発投資を正当化するほどのニッチなビジネスです。その結果、私たちのような最も技術に積極的な企業であっても、実際に最先端とみなされる機械学習においては約10年程遅れをとっています。しかし、現実には、ほとんどの予測ベンダーは最先端から半世紀も遅れているのです。ARIMA、Holt-Winters、およびBox-Jenkinsモデルは1970年には既に存在していました。
8. 予測のベンチマークは嘘をつけない
統計は確かに嘘をつくための最も洗練された方法です。数字はさまざまな方法で作り話を作ることができます。Lokadでは、全商品の予測をゼロにするだけで、ベンチマークプロセスで圧倒的な勝利が保証されるベンチマークをいくつか経験しました。しかし、在庫レベルを全てゼロに設定することは、賢明なビジネス手法とは言えません。ベンダーが誤差がXパーセントであると主張するたびに、実際にどれだけの ドル の誤差が発生するのかを問い直すべきです。誤差のパーセント を最小化することは、誤差のドル を測定することとは大きく異なります。前者が後者を導くと信じるのは大きな誤りですが、ベンダーは、誤差のパーセントが非常に安全な根拠となるため、後者に対する責任を免れるために、正反対の主張をためらいなく行うのです。
9. 私たちのソフトウェアは最高です
そのベンダーのウェブサイトは90年代後半にデザインされたかのように見え、ソフトウェアをオンラインで試すことはできません。スクリーンショットもなく、公開された価格情報もなく、公開ドキュメントもなく、APIも存在しませんが、信じてください、実際のところ非常に優れたソフトウェアです。ライリーが言ったように、_アヒルのように歩き、アヒルのように泳ぎ、アヒルのように鳴く鳥を見たら、それをアヒルと呼ぶ_のです。ソフトウェアはオンラインで全てを販売する上で何の障壁もないビジネスの一つです。あなたのソフトウェアが深刻に機能不全でなければ、それを隠すインセンティブは 全く ありません。まともなベンダーは自分たちが最高だと議論するのではなく、クライアントに試してもらい、自ら判断させるのです。
10. 私たちはあなたの在庫と予測の両方を管理します
もちろんです。そして、チェスマスターの中にはサッカーのチャンピオンである人もいます。ソフトウェアは集中力が求められるものであり、例えばERPやWMSの設計に長けている企業が、予測ソフトウェアの設計に求められるものとは正反対の要素を必要とするのです。ERP企業は予測ツールが下手です。なぜなら、予測は何十、いや何百もの追加機能の一つに過ぎないからです。ベンダーが何を言おうと、予測はERPベンダーの最優先事項 にはできない のです。それは設計上、二級市民に過ぎません。さらに、もしデータサイエンティストの有能なチームを抱えていても、完全なERPを構築するために必要な何百もの画面の設計にそのエネルギーを注ぐことはできません。
読者のコメント (1)
このようなベンダーが書いた記事で正直さを見ることは新鮮です - 投稿してくれてありがとう。もちろん、このような過剰な約束は予測や分析ツールに限定されるものではありません。購入者は気をつけてください！ Andrew Gibson, Crabtree Analytcs
Andrew Gibson (4 years ago)
