03. útmutató / Összehasonlítás és szoftverértékelés

Alternatívák tesztelése

A hasznos összehasonlítás elmagyarázza, mi változott, mi maradt rögzítve, és miért marad az előnyben részesített lehetőség hihető, amikor a feltevések változnak.

Ismételhető alapállapot kialakítása

Kezdje olyan kiindulópontból, amelyet a csapat reprodukálni tud, ellenőrzött bemeneti adatkészlet és dokumentált szoftververzió használatával. Rögzítse a repülőgép-konfigurációt, az ülés- és berendezésmeghatározásokat, a kereskedelmi feltevéseket és a kényelmi szempontokat. Ha az alapállapot nem állítható elő újra, a későbbi eredményeket nehéz megkülönböztetni az adatokban vagy beállításokban rejtett változásoktól.

Minden alternatívát tudatos beavatkozásként határozzon meg. Vizsgálhat eltérő utastérfelosztást, átdolgozott szolgáltatási koncepciót vagy másik üléscsaládot. Ha a cél az ok-okozati összefüggés megértése, egyszerre csak egy változócsoportot módosítson. Az összetett koncepciók később követhetők, de vezessen nyilvántartást arról, hogyan hatnak egymásra az egyéni változtatások.

Használjon semleges forgatókönyvneveket. A „prémium javítás” a következtetést a tesztelés előtt feltételezi; a tényleges konfigurációhoz kötött név könnyebben ellenőrizhető. Őrizze meg az elutasított jelölteket és az elutasítás okait is. Ezek feltárják a kötő korlátokat, és megakadályozzák, hogy a csapat egy ismert okból elbukott lehetőséghez újra és újra visszatérjen.

Kérdezze meg, mit csinál valójában az MI

Az „MI-alapú” megjelölés nagyon különböző funkciókat takarhat. Egy eszköz elrendezéseket generálhat, kényelmi helyettesítő mutatót jósolhat, tervezési teret kereshet vagy írásos magyarázatot készíthet. Ezek a funkciók eltérő bizonyítási igényekkel járnak. Kérje meg a szállítót, hogy határozza meg, mely kimenetek származnak gépi tanulásból, determinisztikus szabályokból, numerikus optimalizálásból vagy kézi bevitelből.

A kényszerprogramozás és a matematikai optimalizálás tanult modell nélkül is értékes lehet. Fordítva, egy tanult helyettesítő modell felgyorsíthat egy számítást, miközben közelítési hibát vihet be. Egyik megközelítés sem megbízhatóbb pusztán a címkéje miatt. Értékelje az adott feladatra való alkalmasságot, a nyomon követhetőséget és a helytelen ajánlás következményeit.

A nyelvi modell segíthet a követelmények strukturálásában vagy egy bemeneti regiszter összefoglalásában, de kitalálhat egy méretet, kihagyhat egy kivételt, vagy túl magabiztosan állíthat egy követelményt. Ne használja a folyékony szöveget annak bizonyítására, hogy egy elrendezést ellenőriztek. Követelje meg, hogy az eszköz elkülönítse a lekérdezett forrásokat, a számított eredményeket és a generált kommentárt.

Feltevési megjegyzés: kérjen egy sikertelen bemutatót

Adjon a szállítónak szándékosan ellentmondó bemeneti adatkészletet. Egy hasznos eszköznek fel kell ismernie a megvalósíthatatlanságot vagy a megoldatlan feltételeket, és nem szabad csendben lazítania egy kemény szabályt, hogy kellemes elrendezést állítson elő. Kérdezze meg, hogyan naplózzák az ellentmondást, és hogyan közlik azt a felhasználóval.

Tartsa átláthatóan ellenőrizhetőnek a célokat

Az utastér-tervezés több célt követ. A kapacitás, az utastér, a szolgáltatási gyakorlatiasság, a tömeg, a beépítési erőfeszítés és a kereskedelmi teljesítmény eltérő irányba húzhatnak. Határozza meg a mutatókat külön, mielőtt bármilyen súlyozott pontszámot fontolgatna. Egyetlen rangsor elrejthet jelentős veszteséget egy területen kisebb nyereségek mögött máshol.

A Pareto-összehasonlítás olyan lehetőségeket azonosít, amelyeknél az egyik megadott célkitűzés javítása egy másik romlásával jár. Nem választja ki a légitársaság által preferált kompromisszumot. Ez a döntés a prioritásoktól, a bizonytalanságtól és a felelősségi köröktől függ, amelyek az emberekhez tartoznak. Ahol gyakorlatilag lehetséges, mutassa be a kompromisszumok felületét, majd rögzítse, miért éppen egy adott kompromisszumot választották.

Ha pontszámot használnak, tüntesse fel a mértékegységeket, a normalizálást és a súlyokat. Vizsgálja meg, hogy az ésszerű alternatív súlyozások megváltoztatják-e a rangsort. Azt a lehetőséget, amely csak szűk súlyozási séma mellett nyer, preferenciaérzékenynek kell nevezni. Ugyanez vonatkozik a pénzügyi feltevésekre: egy bevételi becslés a kereslettől, az árazástól és az üzemeltetési hatásoktól függ, nem csupán az üléstérkép tulajdonsága.

Értékelési sablon — nem utal repülőgép-teljesítményi értékekre
DimenzióRögzítse vagy közöljeKérje meg az eszközt, hogy mutassa meg
GeometriaAzonos referencia-konfigurációMódosított burkolatok és ütközések
UtaskomfortAzonos populáció és feladatfeltevésekCsoportspecifikus eredmények és korlátok
Kereskedelmi modellKereslet- és költségfeltevésekÉrzékenység, nem csupán pontbecslés
Keresési folyamatBeállítások, adott esetben mag (seed), leállási szabályMegvalósíthatósági állapot és reprodukálhatóság

Robusztusság és gyakorlati illeszkedés tesztelése

Változtassa a bizonytalan feltevéseket védhető tartományokon belül. Az érzékenységi vizsgálatok hasznos jelöltjei: a poggyászterhelés, az utasok összetétele, a kiszolgálási időzítések és a becsült berendezéstömeg. Különböztesse meg az érzékenységelemzést a validálástól: annak bizonyítása, hogy az eredmény stabil a modellen belül, nem igazolja, hogy a modell pontosan képezi le a valódi kabint.

Sztochasztikus módszereknél őrizze meg a véletlenszám-magokat, ahol ezek rendelkezésre állnak, és ismételje meg a futtatásokat a változékonyság megértéséhez. Kérdezze meg, mit jelent a leállási szabály, és hogy a jelentett megoldás bizonyítottan optimális, lokálisan javított-e, vagy csupán a legjobb, amelyet egy időkereten belül találtak. Az „optimalizált” nem elég pontos eredménymeghatározás.

A szoftvernek is illeszkednie kell a tervezési munkafolyamatba. Tesztelje az exportformátumokat, a mértékegységeket, a verziótörténetet, a jogosultságokat, valamint azt, hogy vissza tudja-e keresni az ajánlás mögötti pontos bemeneti adatkészletet. Vizsgálja felül az adatkezelést, mielőtt bizalmas repülőgép-rajzokat vagy utasinformációkat tölt fel. Egy csiszolt bemutató tiszta mintaadatokon nem bizonyíték arra, hogy a rendszer kezelni fogja a konfigurációkezelést.

Zárja az összehasonlítást egy rövid döntési feljegyzéssel: a kiválasztott koncepció, a megfontolt alternatívák, a meghatározó kompromisszumok, az érzékeny feltevések és a nyitott ellenőrzések. Vigye át ezt a feljegyzést a mérnöki felülvizsgálatba. Egy tervezőeszköz célja nem a szakmai ítélőképesség kiiktatása, hanem az, hogy ez az ítélőképesség megalapozottabb és könnyebben megkérdőjelezhető legyen.

Döntési kapu: az előnyben részesített lehetőség reprodukálható, a rangsora megmagyarázható, és a fennmaradó bizonytalanságokért felelősök vannak kijelölve.