Багатозадачна мережа Fusion на основі трансформатора для виявлення псування харчових продуктів та прогнозування терміну зберігання

Втрата харчових продуктів є однією з найважливіших проблем у ланцюзі поставок сільського господарства, і точне та ефективне виявлення псування може допомогти зменшити його. Крім того, дуже важливо прогнозувати інформацію про псування. Це сприяє довговічності управління ланцюгом поставок у галузі сільського господарства. Це мотивувало нас запропонувати архітектури на основі синтезу, поєднуючи CNN з трансформатором LSTM та DEiT одночасно для наступних багатозадач: (i) класифікація овочів, (ii) виявлення псування їжі та (iii) прогнозування терміну зберігання. Ми розробили набір даних, знімаючи зображення овочів від їх свіжого стану до тих пір, поки вони не були повністю зіпсовані. З експериментального аналізу робиться висновок, що запропоновані архітектури злиття CNN+CNN-LSTM та CNN+DeIT Transformer перевершили кілька моделей глибокого навчання, таких як CNN, VGG16, ResNet50, Capsule Networks та DeIT Transformers. Загалом, трансформатор CNN + DeIT дав оцінку F1 0,98 та 0,61 у класифікації овочів та виявленні псування відповідно та середню квадратну помилку (MSE) та симетричну середню абсолютну відсоткову помилку (SMAPE) 3,58 та 41,66% відповідно у прогнозуванні псування. Крім того, надійність моделей злиття була перевірена на галасливих зображеннях та інтегрована з LIME для візуалізації рішень моделі.