03. útmutató / Összehasonlítás és szoftverértékelés
Alternatívák tesztelése
A hasznos összehasonlítás elmagyarázza, mi változott, mi maradt rögzítve, és miért marad az előnyben részesített lehetőség hihető, amikor a feltevések változnak.
Ismételhető alapállapot kialakítása
Kezdje olyan kiindulópontból, amelyet a csapat reprodukálni tud, ellenőrzött bemeneti adatkészlet és dokumentált szoftververzió használatával. Rögzítse a repülőgép-konfigurációt, az ülés- és berendezésmeghatározásokat, a kereskedelmi feltevéseket és a kényelmi szempontokat. Ha az alapállapot nem állítható elő újra, a későbbi eredményeket nehéz megkülönböztetni az adatokban vagy beállításokban rejtett változásoktól.
Minden alternatívát tudatos beavatkozásként határozzon meg. Vizsgálhat eltérő utastérfelosztást, átdolgozott szolgáltatási koncepciót vagy másik üléscsaládot. Ha a cél az ok-okozati összefüggés megértése, egyszerre csak egy változócsoportot módosítson. Az összetett koncepciók később követhetők, de vezessen nyilvántartást arról, hogyan hatnak egymásra az egyéni változtatások.
Használjon semleges forgatókönyvneveket. A „prémium javítás” a következtetést a tesztelés előtt feltételezi; a tényleges konfigurációhoz kötött név könnyebben ellenőrizhető. Őrizze meg az elutasított jelölteket és az elutasítás okait is. Ezek feltárják a kötő korlátokat, és megakadályozzák, hogy a csapat egy ismert okból elbukott lehetőséghez újra és újra visszatérjen.
Kérdezze meg, mit csinál valójában az MI
Az „MI-alapú” megjelölés nagyon különböző funkciókat takarhat. Egy eszköz elrendezéseket generálhat, kényelmi helyettesítő mutatót jósolhat, tervezési teret kereshet vagy írásos magyarázatot készíthet. Ezek a funkciók eltérő bizonyítási igényekkel járnak. Kérje meg a szállítót, hogy határozza meg, mely kimenetek származnak gépi tanulásból, determinisztikus szabályokból, numerikus optimalizálásból vagy kézi bevitelből.
A kényszerprogramozás és a matematikai optimalizálás tanult modell nélkül is értékes lehet. Fordítva, egy tanult helyettesítő modell felgyorsíthat egy számítást, miközben közelítési hibát vihet be. Egyik megközelítés sem megbízhatóbb pusztán a címkéje miatt. Értékelje az adott feladatra való alkalmasságot, a nyomon követhetőséget és a helytelen ajánlás következményeit.
A nyelvi modell segíthet a követelmények strukturálásában vagy egy bemeneti regiszter összefoglalásában, de kitalálhat egy méretet, kihagyhat egy kivételt, vagy túl magabiztosan állíthat egy követelményt. Ne használja a folyékony szöveget annak bizonyítására, hogy egy elrendezést ellenőriztek. Követelje meg, hogy az eszköz elkülönítse a lekérdezett forrásokat, a számított eredményeket és a generált kommentárt.
Feltevési megjegyzés: kérjen egy sikertelen bemutatót
Adjon a szállítónak szándékosan ellentmondó bemeneti adatkészletet. Egy hasznos eszköznek fel kell ismernie a megvalósíthatatlanságot vagy a megoldatlan feltételeket, és nem szabad csendben lazítania egy kemény szabályt, hogy kellemes elrendezést állítson elő. Kérdezze meg, hogyan naplózzák az ellentmondást, és hogyan közlik azt a felhasználóval.
Tartsa átláthatóan ellenőrizhetőnek a célokat
Az utastér-tervezés több célt követ. A kapacitás, az utastér, a szolgáltatási gyakorlatiasság, a tömeg, a beépítési erőfeszítés és a kereskedelmi teljesítmény eltérő irányba húzhatnak. Határozza meg a mutatókat külön, mielőtt bármilyen súlyozott pontszámot fontolgatna. Egyetlen rangsor elrejthet jelentős veszteséget egy területen kisebb nyereségek mögött máshol.
A Pareto-összehasonlítás olyan lehetőségeket azonosít, amelyeknél az egyik megadott célkitűzés javítása egy másik romlásával jár. Nem választja ki a légitársaság által preferált kompromisszumot. Ez a döntés a prioritásoktól, a bizonytalanságtól és a felelősségi köröktől függ, amelyek az emberekhez tartoznak. Ahol gyakorlatilag lehetséges, mutassa be a kompromisszumok felületét, majd rögzítse, miért éppen egy adott kompromisszumot választották.
Ha pontszámot használnak, tüntesse fel a mértékegységeket, a normalizálást és a súlyokat. Vizsgálja meg, hogy az ésszerű alternatív súlyozások megváltoztatják-e a rangsort. Azt a lehetőséget, amely csak szűk súlyozási séma mellett nyer, preferenciaérzékenynek kell nevezni. Ugyanez vonatkozik a pénzügyi feltevésekre: egy bevételi becslés a kereslettől, az árazástól és az üzemeltetési hatásoktól függ, nem csupán az üléstérkép tulajdonsága.
| Dimenzió | Rögzítse vagy közölje | Kérje meg az eszközt, hogy mutassa meg |
|---|---|---|
| Geometria | Azonos referencia-konfiguráció | Módosított burkolatok és ütközések |
| Utaskomfort | Azonos populáció és feladatfeltevések | Csoportspecifikus eredmények és korlátok |
| Kereskedelmi modell | Kereslet- és költségfeltevések | Érzékenység, nem csupán pontbecslés |
| Keresési folyamat | Beállítások, adott esetben mag (seed), leállási szabály | Megvalósíthatósági állapot és reprodukálhatóság |
Robusztusság és gyakorlati illeszkedés tesztelése
Változtassa a bizonytalan feltevéseket védhető tartományokon belül. Az érzékenységi vizsgálatok hasznos jelöltjei: a poggyászterhelés, az utasok összetétele, a kiszolgálási időzítések és a becsült berendezéstömeg. Különböztesse meg az érzékenységelemzést a validálástól: annak bizonyítása, hogy az eredmény stabil a modellen belül, nem igazolja, hogy a modell pontosan képezi le a valódi kabint.
Sztochasztikus módszereknél őrizze meg a véletlenszám-magokat, ahol ezek rendelkezésre állnak, és ismételje meg a futtatásokat a változékonyság megértéséhez. Kérdezze meg, mit jelent a leállási szabály, és hogy a jelentett megoldás bizonyítottan optimális, lokálisan javított-e, vagy csupán a legjobb, amelyet egy időkereten belül találtak. Az „optimalizált” nem elég pontos eredménymeghatározás.
A szoftvernek is illeszkednie kell a tervezési munkafolyamatba. Tesztelje az exportformátumokat, a mértékegységeket, a verziótörténetet, a jogosultságokat, valamint azt, hogy vissza tudja-e keresni az ajánlás mögötti pontos bemeneti adatkészletet. Vizsgálja felül az adatkezelést, mielőtt bizalmas repülőgép-rajzokat vagy utasinformációkat tölt fel. Egy csiszolt bemutató tiszta mintaadatokon nem bizonyíték arra, hogy a rendszer kezelni fogja a konfigurációkezelést.
Zárja az összehasonlítást egy rövid döntési feljegyzéssel: a kiválasztott koncepció, a megfontolt alternatívák, a meghatározó kompromisszumok, az érzékeny feltevések és a nyitott ellenőrzések. Vigye át ezt a feljegyzést a mérnöki felülvizsgálatba. Egy tervezőeszköz célja nem a szakmai ítélőképesség kiiktatása, hanem az, hogy ez az ítélőképesség megalapozottabb és könnyebben megkérdőjelezhető legyen.
Döntési kapu: az előnyben részesített lehetőség reprodukálható, a rangsora megmagyarázható, és a fennmaradó bizonytalanságokért felelősök vannak kijelölve.