追加学習AIの性能低下してしまう問題が発生しておりました。現在は復旧済となります。
概要
- 3月7日(土)夜の製品アップデート以降、「追加学習AI」との会話で性能が劣化してしまう確率が高まっておりました
- 3月9日(月)、社内の報告により異常を発見し、修正対応を進め、同日15時55分頃、完全に復旧いたしました
この度はご不便をおかけしたみなさまに心よりお詫び申し上げます。以下、原因と対応について記載いたします。
原因と対応
- 3月7日(土)夜の製品アップデート時、ChatSenseの開発内容に問題があり、「意図せず性能を劣化させてしまう」ような、副作用のあるアップデートが含まれてしまっておりました。
- そもそも「ChatSense」では、リリース前において十分な自動テストと、最低半日間に及ぶ手動テストによる検証が実施されております。しかし、この度の問題の発生内容が「性能が劣化する」という確率的な問題であったため、社内の自動テスト・手動テストでも、検知することができておりませんでした。また、同様の問題により、3/7(土)夜のリリース後も、問題の検知が遅れてしまっておりました。
- 今後の再発防止策として、リリース前における不具合検知テストの評価方法の、量的・質的な見直しを進めております。また、リリース後の不具合アラートの基準を見直し、「完全にエラーというわけではない」というようなグレーゾーンの不具合も検知できるよう修正を進めます。
この度はご迷惑をおかけしまして、大変申し訳ございません。
さらなる原因究明と再発防止に向けて尽力いたします。
お困りの場合、下記に問い合わせください
https://chatsense.jp/contact