Yöntemler · Sıralama
ELECTRE III (ELimination Et Choix Traduisant la REalité III)
Seçenek çiftlerini "ne kadar güvenilir biçimde üstünler" sorusuyla bulanık bir ölçekte karşılaştırır ve bu güvenilirlik derecelerini iki yönde damıtarak (distilasyon) bir sıra çıkarır; bazı çiftler kıyaslanamaz kalabilir.
Temel yöntemin veri türü: Kesin (Classical)
Yöntem Nedir?
ELECTRE III, elinizde bir karar tablosu olduğunda seçenekleri neredeyse tam bir sıraya dizen, ama kesin bir sıralama yöntemi olmayan bir üstünlük (outranking) yöntemidir. Bernard Roy tarafından 1978'de, ELECTRE I'in ürettiği ikili ("üstünler / üstünlenmez") sonucu yeterince ince bulmadığı için önerilmiştir. ELECTRE I'in aksine ELECTRE III seçenekleri bir çekirdek kümeye ayıklamaz; iki aşamalı bir sıralama (distilasyon) prosedürüyle seçenekler arasında neredeyse tam bir sıra kurar.
Aradaki fark eşiklerin yapısındadır. ELECTRE I'de uyum ve uyumsuzluk "yeterli mi / değil mi" biçiminde keskin bir eşikle karşılaştırılır. ELECTRE III ise her kriter için üç ayrı eşik (kayıtsızlık, tercih, veto) tanımlar ve üstünlük derecesini 0 ile 1 arasında bulanık bir "güvenilirlik" değeri olarak hesaplar. Çıktısı, hemen her çiftin karşılaştırıldığı bir sıradır; yalnız birbirine göre net biçimde ayrılamayan az sayıda çift "kıyaslanamaz" olarak işaretlenir. Karmaşık, çok paydaşlı ve eşiklerin dilsel olarak ifade edilebildiği kararlarda (altyapı, çevre, kamu politikası) tercih edilir.
Yöntemin Felsefesi
ELECTRE III'ün arkasındaki fikir, "a, b'den daha iyi mi" sorusuna evet/hayır değil, "ne kadar güvenilir biçimde daha iyi" diye bir derece ile cevap vermektir. ELECTRE I'de bir seçenek çifti ya üstünlük ilişkisini kurar ya kurmaz; ELECTRE III'te bu ilişki 0 (hiç güvenilir değil) ile 1 (tam güvenilir) arasında bir sayıdır. Bu derecelendirmeyi mümkün kılan, her kriter için üç eşiğin ayrı ayrı tanımlanmasıdır: kayıtsızlık eşiği (bu kadar küçük bir fark önemsizdir), tercih eşiği (bu kadar büyük bir fark kesin bir tercih oluşturur) ve veto eşiği (bu kadar büyük bir aleyhte fark, diğer bütün kriterlerdeki uyuma rağmen üstünlüğü tamamen geçersiz kılar). Bu üç eşik sabit bir sayı olabileceği gibi, kriterin kendi ölçeğine göre orantılı da tanımlanabilir; DecisionMind her iki biçimi de destekler.
Bu felsefenin sonucu, ELECTRE III'ün hem ELECTRE I'in veto mantığını hem de bunu bir dereceye yayan bir hassasiyeti birleştirmesidir. ELECTRE I'in veto mantığında tek bir kriterdeki çok büyük kötülük üstünlüğü engeller. Yeni eklenen hassasiyette küçük farklar göz ardı edilir (kayıtsızlık eşiği), orta büyüklükteki farklar kısmi bir güvenilirlik azalması yaratır, çok büyük farklar (veto) ise üstünlüğü tümüyle iptal eder. Sonuç bir sayı ya da bir küme değildir. Seçenekler arasındaki güvenilirlik derecelerinin iki yönden (en iyiden başlayarak ve en kötüden başlayarak) damıtılmasıyla elde edilen, çoğunlukla tam ama bazı çiftlerde kıyaslanamaz kalabilen bir sıradır.
Yöntem Nasıl Çalışır?
Yöntem yedi adımda ilerler.
Birinci adım, üç eşik. Her kriter için kayıtsızlık, tercih ve veto eşikleri belirlenir. Bu eşikler karar vericiden ya da alan uzmanından gelir; sabit bir sayı olabilir ya da kriterin kendi değerine bağlı olarak değişebilir.
İkinci adım, kriter bazında uyum. Her seçenek çifti (a,b) ve her kriter için, a'nın b'den ne kadar "yeterince iyi" olduğu, kayıtsızlık ve tercih eşikleri arasında kademeli bir geçişle (tam uyumdan tam uyumsuzluğa) hesaplanır. Fark kayıtsızlık eşiğinin altındaysa tam uyum, tercih eşiğinin üstündeyse hiç uyum yoktur; arada kalan farklar kademeli bir değer alır.
Üçüncü adım, genel uyum. Kriter bazındaki uyum değerleri, kriter ağırlıklarıyla ağırlıklandırılarak tek bir genel uyum değerinde toplanır; bu değer ELECTRE I'deki uyum indeksinin bulanık karşılığıdır.
Dördüncü adım, kriter bazında uyumsuzluk. Her kriter için, b'nin a'dan ne kadar kötü olduğu tercih ve veto eşikleri arasında kademeli olarak hesaplanır. Fark veto eşiğini aşarsa tam uyumsuzluk (o kriter üstünlüğü tek başına engeller), tercih eşiğinin altındaysa hiç uyumsuzluk yoktur.
Beşinci adım, güvenilirlik derecesi. Genel uyum değeri, yüksek uyumsuzluk gösteren kriterlerin varlığında aşağı çekilir. Bir kriterin uyumsuzluğu genel uyumdan büyükse, bu kriter güvenilirliği genel uyumun altına indirir; birden çok kriter böyleyse etkileri çarpılarak birleşir. Sonuç, a'nın b'yi üstünlemesinin ne kadar güvenilir olduğunu gösteren 0 ile 1 arasında tek bir sayıdır.
Altıncı adım, iki yönlü damıtma (distilasyon). Güvenilirlik matrisi üzerinden iki ayrı sıralama kurulur: biri en güvenilir üstünlükten başlayarak seçenekleri sırayla ayıklayan "iniş" sıralaması, diğeri en zayıf seçenekten başlayarak ayıklayan "çıkış" sıralamasıdır. Her iki sıralama da kendi içinde tutarlı birer tam ön-sıradır (bazı seçenekler eşit sırada kalabilir).
Yedinci adım, iki sıralamanın kesişimi. İniş ve çıkış sıralamaları karşılaştırılır: iki sıralama da aynı yönde anlaşıyorsa kesin bir tercih ya da eşitlik kurulur; anlaşmıyorlarsa o çift kıyaslanamaz (incomparable) olarak işaretlenir. Nihai sonuç, kesin tercihler, eşitlikler ve kıyaslanamaz çiftlerden oluşan kısmi bir sıradır.
Adımların formülleri, ara tabloları ve atıf biçimleri DecisionMind'daki yöntem sayfasında verilir; bu kart formül taşımaz.
Çıktı Nasıl Yorumlanır?
ELECTRE III'ün çıktısı, ELECTRE I'in çekirdek kümesinden farklı olarak neredeyse tam bir sıradır. Ama TOPSIS ya da VIKOR'un ürettiği kesintisiz bir sıradan da farklıdır: bazı seçenek çiftleri "kıyaslanamaz" kalabilir. Bir çiftin kıyaslanamaz olması "eşit derecede iyi" demek değildir; iki damıtma yönünün (iniş ve çıkış) bu çift için birbiriyle çelişmesi, verinin ve seçilen eşiklerin bu iki seçeneği güvenilir biçimde ayıramadığı anlamına gelir.
Sıradaki bir seçeneğin "birinci" çıkması, onun her kriterde en iyi olduğu anlamına gelmez. Seçilen eşiklerle kurulan güvenilirlik derecelerinin distilasyon sonunda en üstte kalması anlamına gelir. Eşikler (özellikle veto eşiği) değiştirildiğinde hem sıra hem kıyaslanamaz çiftlerin sayısı değişebilir.
Bu nedenle:
"ELECTRE III, A6'yı en iyi seçenek olarak sıraladı"
yerine:
"Seçilen eşiklerle kurulan güvenilirlik derecelerine göre A6 iniş ve çıkış damıtmalarının ikisinde de en üstte çıkmıştır; bazı seçenek çiftleri ise bu eşiklerle güvenilir biçimde sıralanamamış, kıyaslanamaz kalmıştır"
biçiminde yazmak doğrudur.
Veri Türü ve Girdiler
ELECTRE III kesin (crisp) veriyle çalışır; her hücrede tek bir sayı olmalıdır. ELECTRE I'den farklı olarak ELECTRE III ağırlık üretmez ve eşikleri de kendiliğinden hesaplamaz. Elinizde satırlarda seçenekler, sütunlarda kriterler, her hücrede bir sayı; her kriter için yön bilgisi; toplamı 1 olan ağırlıklar; ve her kriter için ayrı ayrı belirlenmiş üç eşik (kayıtsızlık, tercih, veto) olmalıdır. Bu eşiklerin belirlenmesi yöntemin en zor ve en kritik adımıdır; karar vericinin ya da alan uzmanının katılımı gerektirir. DecisionMind'da temel yöntemle birlikte üç ELECTRE III üyesi bulunur (bulanık ve çok-paydaşlı uzantılar). En az iki seçenek, üç ile on beş seçenek arası rahat çalışır (otuza kadar desteklenir); üç ile on iki kriter arası önerilir.
Ne Zaman Kullanılır, Ne Zaman Kullanılmaz?
Bir kriterdeki çok kötü performansın diğer kriterlerdeki iyi performansla telafi edilmesini istemiyorsanız ELECTRE III uygun bir seçimdir. Bunun için ELECTRE I'in ürettiği geniş çekirdek kümesi yerine neredeyse tam bir sıra istemeniz ve eşikleri (kayıtsızlık, tercih, veto) alan uzmanıyla birlikte belirleyebiliyor olmanız gerekir. Tipik alanı, çok paydaşlı ve non-kompanzatuar mantığın önemli olduğu karmaşık kararlardır.
Kullanılmaması gereken durumlar şunlardır. Eşikleri belirleyecek bir uzman görüşü yoksa ve yalnızca ağırlıklarla, eşiksiz bir sıralama yeterliyse TOPSIS ya da SAW daha basittir. Bir kriterdeki zayıflığın başka kriterlerle telafi edilmesi kabul edilebiliyorsa non-kompanzatuar bir yöntem gereksizdir. Yalnız öne çıkanlar kümesi yeterliyse, yani tam sıra gerekmiyorsa, daha basit olan ELECTRE I yeterlidir.
Non-kompanzatuar mantık + neredeyse tam sıra isteniyor, eşikler belirlenebiliyor → ELECTRE III
Non-kompanzatuar mantık yeterli, yalnız "öne çıkanlar kümesi" isteniyor → ELECTRE I
Eşiksiz, telafi edici bir sıralama yeterliyse → TOPSIS, SAW, VIKOR
Ağırlık değil sıralama gerekiyor ve kriterler arası bağımlılık önemliyse → önce DEMATEL ile ağırlık, sonra bir sıralama yöntemi
Eşikleri belirleyecek uzman görüşü yoksa → nesnel ağırlıklandırma + telafi edici bir sıralama yöntemi
Güçlü Yanları
ELECTRE III'ün en önemli üstünlüğü, ELECTRE I'in kaba ikili üstünlük mantığını bulanık bir dereceye yaymasıdır. Bu sayede hem non-kompanzatuar mantığı korur hem de daha ayırt edici bir sıra üretir. Kayıtsızlık eşiği, ölçüm hatası kadar küçük farkların sıralamayı gereksiz yere etkilemesini engeller; veto eşiği, tek bir kriterdeki kabul edilemez kötülüğün diğer bütün kriterlerdeki uyuma rağmen üstünlüğü engellemesini sağlar. İki yönlü damıtma, tek yönlü bir sıralamanın gizleyebileceği belirsizlikleri (kıyaslanamaz çiftler) açıkça gösterir; bu dürüst bir çıktıdır. ELECTRE ailesinin en çok kullanılan ve en olgun üyelerinden biridir (Figueira, Greco, Roy ve Słowiński, 2013).
Zayıf Yanları
Sınırlılıkları da aynı yapıdan gelir. Birincisi, üç eşiğin (kayıtsızlık, tercih, veto) her kriter için ayrı ayrı belirlenmesi büyük bir bilgi yüküdür; bu eşikler keyfi seçilirse sonuç da keyfi olur (Figueira, Greco, Roy ve Słowiński, 2013). İkincisi, iki yönlü damıtma prosedürünün kendisi karmaşıktır ve farklı damıtma parametreleriyle farklı sonuçlar üretebilir; bu husus literatürde ayrıca tartışılmıştır (Govindan ve Jepsen, 2016).
Üçüncüsü, kıyaslanamaz çift sayısı arttıkça yöntemin pratik faydası azalır. Bütün çiftler kıyaslanamaz çıkarsa ELECTRE III da ELECTRE I gibi ayırt edici olmaktan çıkar. Dördüncüsü, sonuçların nihai bir öneriye (tek bir "en iyi" seçenek) indirgenmesi ayrı bir prosedür (ör. net akış ya da ek bir karar kuralı) gerektirebilir.
Sık Yapılan Hatalar
En yaygın hata, üç eşiği (kayıtsızlık, tercih, veto) birbirine çok yakın ya da birbirinden çok uzak, veriye bakmadan "standart" değerler olarak belirlemektir; bu, kademeli geçişin faydasını ortadan kaldırır. İkinci hata, iniş ve çıkış damıtmalarından yalnızca birini kullanıp diğerini görmezden gelmektir; nihai sonuç ikisinin kesişimidir, tek yönlü bir damıtma tam bir resim vermez. Üçüncü hata, kıyaslanamaz çıkan bir çifti "eşit derecede iyi" diye yorumlamaktır; kıyaslanamazlık verinin bu ikisini ayıramadığının işaretidir, eşitlik iddiası değildir.
Dördüncü hata, ELECTRE III'ün sonucunu ELECTRE I gibi bir "çekirdek küme" diye sunmaktır; ELECTRE III bir küme değil kısmi bir sıra üretir. Beşinci hata, veto eşiğini çok düşük belirleyip neredeyse her farkı bir veto haline getirmektir; bu durumda hemen her çift kıyaslanamaz çıkar ve yöntem ayırt edicilikten yoksun kalır.
Temel ilke şudur:
ELECTRE III'ün ürettiği sıra, seçilen üç eşiğin (kayıtsızlık, tercih, veto) ve damıtma prosedürünün bir sonucudur; kıyaslanamaz çiftler bir hata değil, verinin ve eşiklerin bu ikisini güvenilir biçimde ayıramadığının dürüst bir işaretidir.
Vakalar
Her vaka bir karar tablosuyla başlar, yöntemin bu tabloya ne yaptığını kelimeyle anlatır ve sonucun nasıl okunacağını gösterir. Birinci vaka yöntemin literatürdeki referans uygulamasından alınmıştır; diğerleri öğretici kurgudur.
1. Ulaşım: Sekiz otomobil modeli arasında karşılaştırmalı değerlendirme (Skalka, Bouyssou ve Bernabéu, 1986)
ELECTRE III ve IV yöntemlerinin referans uygulama kılavuzunda, sekiz otomobil modeli (A1-A8) dört ölçüte göre karşılaştırılmıştır: yakıt tüketimi ve fiyat ("azı iyi"), azami hız ve iç hacim ("çoğu iyi"). Ağırlıklar yakıt tüketimi ve fiyata 0,30'ar, hız ve iç hacme 0,20'şer olarak belirlenmiştir. Her ölçüt için ayrı kayıtsızlık, tercih ve veto eşikleri tanımlanmıştır; bazı eşikler sabit bir sayı, bazıları ölçütün kendi değerine bağlı (afin) tanımlanmıştır.
| Model | Yakıt tüketimi | Fiyat | Azami hız | İç hacim |
|---|---|---|---|---|
| A1 | 7,8 | 41.360 | 140 | 6,13 |
| A2 | 7,5 | 45.700 | 150 | 6,70 |
| A3 | 8,2 | 46.450 | 160 | 6,63 |
| A4 | 8,4 | 48.200 | 153 | 6,91 |
| A5 | 8,5 | 48.800 | 164 | 6,65 |
| A6 | 7,0 | 50.830 | 148 | 7,36 |
| A7 | 8,1 | 51.700 | 155 | 7,40 |
| A8 | 7,8 | 52.500 | 170 | 6,19 |
| Yön | azı iyi | azı iyi | çoğu iyi | çoğu iyi |
| Ağırlık | 0,30 | 0,30 | 0,20 | 0,20 |
Yöntem her model çifti için, tanımlanan eşiklerle bir güvenilirlik derecesi hesaplar, sonra bu dereceleri iki yönde (en iyiden başlayarak ve en kötüden başlayarak) damıtır. İki damıtmanın kesişimi nihai kısmi sırayı verir.
| Sıra grubu | Modeller |
|---|---|
| 1 | A6 |
| 2 | A2, A3 |
| 3 | A1, A5, A7 (aralarında kıyaslanamaz) |
| 4 | A8 |
| 5 | A4 |
Sonuç şöyle okunur: A6 açık farkla en üstte çıkmıştır. Düşük yakıt tüketimi ve makul fiyatı, orta düzeydeki hız ve hacmiyle birlikte iki damıtmanın da onu üstte bıraktığı anlamına gelir. A2 ve A3 ikinci grupta eşit sırada kalmıştır. Üçüncü grupta A1, A5 ve A7 birbirleriyle kıyaslanamaz çıkmıştır: her biri diğer ikisine göre bir ölçütte güçlü, bir ölçütte zayıftır ve seçilen eşiklerle bu üçü arasında güvenilir bir üstünlük kurulamamıştır. A4 dördüncü sırada, en pahalı ve en yüksek yakıt tüketimine sahip A4 ise beşinci ve son sıradadır.
Komisyonun tereddüdü: A1, A5 ve A7'nin kıyaslanamaz çıkması bir hesap eksikliği değildir. Üçünün de birbirine göre bir ölçütte üstün, bir ölçütte geride olduğu ve tanımlanan eşiklerin (özellikle veto eşiklerinin) bu farkları "kesin bir üstünlük" saymadığı anlamına gelir. Nihai seçim bu üçünden yapılacaksa, ELECTRE III'ün kendisi tek bir cevap vermez; ek bir kriter (ör. bakım maliyeti) ya da karar vericinin doğrudan tercihi devreye girmelidir.
Raporda: "Belirlenen ölçüt ağırlıkları ve eşiklerle A6 açık farkla en üstte, A4 en altta çıkmıştır; A1, A5 ve A7 birbirleriyle kıyaslanamaz kalmıştır ve aralarındaki seçim ek bir kritere ya da doğrudan tercihe bırakılmalıdır."
Kaynak: Skalka, J.M., Bouyssou, D., & Bernabéu, Y.A. (1986). Electre III et IV: Aspects méthodologiques et guide d'utilisation. Document du LAMSADE No. 25 (3. baskı), Université Paris-Dauphine, s. 37-95 (güvenilirlik matrisi s. 60, damıtma turları s. 82-95, nihai kısmi sıra s. 95). (DOI yok — kurum çalışma raporu) Sıra sonuçları kılavuzun kendi değerleridir; DecisionMind'ın ELECTRE III motoru bağımsız bir kaynaktan (yayının kendisi) aktarılan bu sonuçları doğrulama örneği olarak kullanır.
2. Kamu: Bir belediyenin toplu taşıma hattı güzergâh yatırımı önceliklendirmesi
Bir belediye, sınırlı bütçesiyle üç toplu taşıma güzergâhı yatırımından hangisine öncelik vereceğine karar verecektir. Dört ölçüt belirlenmiştir: tahmini yolcu sayısı ve güzergâh üzerindeki düşük gelirli mahalle oranı ("çoğu iyi"), yapım maliyeti ve tahmini yapım süresi ("azı iyi"). Belediye meclisi ağırlıkları tartışarak belirlemiş, her ölçüt için ayrı kayıtsızlık, tercih ve veto eşikleri tanımlamıştır. Özellikle maliyet ölçütünde düşük bir veto eşiği kabul edilmiştir; çünkü bütçeyi ciddi ölçüde aşan bir güzergâh, diğer ölçütlerdeki üstünlüğüne bakılmaksızın elenmek istenmektedir.
Yöntem üç güzergâhı karşılaştırır. Diyelim ki en çok yolculuk potansiyeli olan güzergâh aynı zamanda maliyeti en yüksek olan güzergâhtır ve bu fark veto eşiğini aşmaktadır; bu durumda bu güzergâh, yolcu potansiyelindeki üstünlüğüne rağmen diğerlerini üstünleyemez. Düşük gelirli mahalle oranı yüksek, maliyeti orta olan güzergâh ise iki damıtmada da öne çıkar.
Meclisin tereddüdü: maliyet veto eşiği biraz gevşetilseydi, en yüksek yolcu potansiyelli güzergâh üstünlük kurabilirdi. Bu, meclisin "bütçe disiplini" ile "yolcu potansiyeli" arasında yaptığı bir değer tercihidir ve rapor bunu açıkça söylemelidir. Ayrıca düşük gelirli mahalle oranı ölçütü sosyal etki puanına dayandığından, bu puanın nasıl hesaplandığı şeffaf olmalıdır.
Raporda: "Belirlenen eşiklerle en yüksek yolcu potansiyeline sahip güzergâh, maliyet veto eşiğini aşması nedeniyle üstünlük kuramamış; düşük gelirli mahalle oranı yüksek, maliyeti dengeli güzergâh iki damıtmada da öne çıkmıştır. Maliyet veto eşiğinin seçimi meclisin bütçe disiplini tercihini yansıtmaktadır."
3. Çevre: Bir atık yönetimi tesisinin yer seçimi ön değerlendirmesi
Bir çevre kurumu, katı atık ayrıştırma tesisi için üç aday arazi arasında ön değerlendirme yapacaktır. Dört ölçüt: yerleşim alanına uzaklık ve arazi maliyeti (uzaklık için "çoğu iyi", maliyet için "azı iyi"), taşıma mesafesi ("azı iyi") ve toprak/su kirliliği riski puanı ("azı iyi"). Kurum kirliliği riski ölçütüne yüksek bir veto eşiği tanımlamıştır: bu risk belirli bir sınırı aşarsa arazi diğer bütün ölçütlerdeki uygunluğuna bakılmaksızın elenmelidir.
Yöntem üç araziyi karşılaştırır. Diyelim ki yerleşime en uzak ve maliyeti en düşük arazi, aynı zamanda kirlilik riski en yüksek aday araziyse ve bu risk veto eşiğini aşıyorsa, bu arazi diğer ölçütlerdeki üstünlüğüne rağmen üstünlük kuramaz. Taşıma mesafesi orta, kirlilik riski düşük olan arazi ise iki damıtmada da öne çıkar.
Kurumun tereddüdü: kirlilik riski puanı bir laboratuvar ölçümü değil, bir çevresel etki raporunun modele dayalı tahminidir. Veto eşiğine yakın bir puan, modelin belirsizlik payı içinde kolayca değişebilir. ELECTRE III'ün veto mekanizması burada kritik bir rol oynadığından, bu puanın güvenilirlik aralığı ayrıca raporlanmalıdır.
Raporda: "Kirlilik riski en yüksek arazi, veto eşiğini aşması nedeniyle üstünlük kuramamıştır; taşıma mesafesi dengeli, kirlilik riski düşük arazi öne çıkmaktadır. Kirlilik riski puanının belirsizlik payı, veto eşiğine olan yakınlığı nedeniyle ayrıca değerlendirilmelidir."
4. Yapılmaması Gereken
Otomobil vakasındaki tabloda fiyat ölçütü yanlışlıkla "çoğu iyi" işaretlenseydi, en pahalı model olan A8 bu ölçütte de avantajlı sayılır ve sonuç yön hatası nedeniyle anlamsızlaşırdı. İkinci yanlış, A1, A5 ve A7'nin kıyaslanamaz çıkması karşısında bunu görmezden gelip "üçü de eşit derecede iyi, hangisi seçilirse seçilsin" diye rapor etmektir. Doğrusu, seçilen eşiklerin bu üçünü ayıramadığını ve ek bir kritere ihtiyaç olduğunu söylemektir. Üçüncü yanlış, ELECTRE III'ün ürettiği kısmi sırayı ELECTRE I'in çekirdek kümesiyle karıştırıp "üstünlenmeyenler kümesi" diye sunmaktır; ELECTRE III bir kısmi sıra üretir, küme değil.
Uzantılar: farklı veri türleri için
ELECTRE III yönteminin kütüphanede 2 uzantısı var. Aynı karar mantığı, farklı veri türü: veriniz kesin sayı değilse ilgili veri türü kartını okuyun, sonra o türdeki üyeyi açın.
Kaynaklar
Adımların formülleri, ara tabloları ve atıf biçimleri için DecisionMind yöntem sayfası: decisionmind.app/library/electre-iii
Roy, B. (1978). ELECTRE III: Un algorithme de classement fondé sur une représentation floue des préférences en présence de critères multiples. Cahiers du CERO, 20(1), 3–24. (DOI yok — 1978 tarihli bu makale için Crossref'te doğrulanabilir bir DOI bulunamadı; manifestte kayıtlı DOI [10.1051/ro/1977110201451] Crossref'te farklı bir makaleyle eşleşti, bu yüzden karta alınmadı.)
Figueira, J., Greco, S., Roy, B., & Słowiński, R. (2013). An overview of ELECTRE methods and their recent extensions. Journal of Multi-Criteria Decision Analysis, 20(1–2), 61–85. DOI: 10.1002/mcda.1482
Govindan, K., & Jepsen, M. B. (2016). ELECTRE: A comprehensive literature review on methodologies and applications. European Journal of Operational Research, 250(1), 1–29. DOI: 10.1016/j.ejor.2015.07.019
Skalka, J.M., Bouyssou, D., & Bernabéu, Y.A. (1986). Electre III et IV: Aspects méthodologiques et guide d'utilisation. Document du LAMSADE No. 25 (3. baskı), Université Paris-Dauphine. (DOI yok)