tests for _fetch_supported_languages in engines

and refactor method to make it testable without making requests

1 files changed, 25 insertions, 85 deletions

diff --git a/searx/languages.py b/searx/languages.py
index 0337947f4..63291ff9d 100644
--- a/searx/languages.py
+++ b/searx/languages.py
@@ -3,36 +3,27 @@
 # this file is generated automatically by utils/update_search_languages.py
 
 language_codes = (
-    (u"ach", u"Acoli", u"", u""),
     (u"af", u"Afrikaans", u"", u""),
-    (u"ak", u"Akan", u"", u""),
-    (u"am", u"አማርኛ", u"", u""),
+    (u"am", u"አማርኛ", u"", u"Amharic"),
     (u"ar-SA", u"العربية", u"المملكة العربية السعودية", u"Arabic"),
     (u"az", u"Azərbaycanca", u"", u"Azerbaijani"),
-    (u"ban", u"Balinese", u"", u""),
     (u"be", u"Беларуская", u"", u"Belarusian"),
-    (u"bem", u"Ichibemba", u"", u""),
     (u"bg-BG", u"Български", u"България", u"Bulgarian"),
-    (u"bn", u"বাংলা", u"", u""),
-    (u"br", u"Brezhoneg", u"", u""),
-    (u"bs", u"Bosanski", u"", u""),
+    (u"bn", u"বাংলা", u"", u"Bengali"),
+    (u"br", u"Brezhoneg", u"", u"Breton"),
+    (u"bs", u"Bosnian", u"", u"Bosnian"),
     (u"ca", u"Català", u"", u"Catalan"),
     (u"ca-CT", u"Català", u"", u"Catalan"),
     (u"ca-ES", u"Català", u"Espanya", u"Catalan"),
     (u"ce", u"Нохчийн", u"", u"Chechen"),
     (u"ceb", u"Sinugboanong Binisaya", u"", u"Cebuano"),
-    (u"chr", u"ᏣᎳᎩ", u"", u""),
-    (u"ckb", u"Central Kurdish", u"", u""),
-    (u"co", u"Corsican", u"", u""),
-    (u"crs", u"Seychellois Creole", u"", u""),
     (u"cs-CZ", u"Čeština", u"Česko", u"Czech"),
-    (u"cy", u"Cymraeg", u"", u""),
+    (u"cy", u"Cymraeg", u"", u"Welsh"),
     (u"da-DK", u"Dansk", u"Danmark", u"Danish"),
     (u"de", u"Deutsch", u"", u"German"),
     (u"de-AT", u"Deutsch", u"Österreich", u"German"),
     (u"de-CH", u"Deutsch", u"Schweiz", u"German"),
     (u"de-DE", u"Deutsch", u"Deutschland", u"German"),
-    (u"ee", u"Eʋegbe", u"", u""),
     (u"el-GR", u"Ελληνικά", u"Ελλάδα", u"Greek"),
     (u"en", u"English", u"", u"English"),
     (u"en-AU", u"English", u"Australia", u"English"),
@@ -60,30 +51,20 @@ language_codes = (
     (u"eu", u"Euskara", u"", u"Basque"),
     (u"fa", u"فارسی", u"", u"Persian"),
     (u"fi-FI", u"Suomi", u"Suomi", u"Finnish"),
-    (u"fo", u"Føroyskt", u"", u""),
     (u"fr", u"Français", u"", u"French"),
     (u"fr-BE", u"Français", u"Belgique", u"French"),
     (u"fr-CA", u"Français", u"Canada", u"French"),
     (u"fr-CH", u"Français", u"Suisse", u"French"),
     (u"fr-FR", u"Français", u"France", u"French"),
-    (u"fy", u"West-Frysk", u"", u""),
-    (u"ga", u"Gaeilge", u"", u""),
-    (u"gaa", u"Ga", u"", u""),
-    (u"gd", u"Gàidhlig", u"", u""),
+    (u"ga", u"Gaeilge", u"", u"Irish"),
     (u"gl", u"Galego", u"", u"Galician"),
-    (u"gn", u"Guarani", u"", u""),
-    (u"gu", u"ગુજરાતી", u"", u""),
-    (u"ha", u"Hausa", u"", u""),
-    (u"haw", u"ʻŌlelo HawaiʻI", u"", u""),
+    (u"gu", u"ગુજરાતી", u"", u"Gujarati"),
     (u"he-IL", u"עברית", u"ישראל", u"Hebrew"),
     (u"hi", u"हिन्दी", u"", u"Hindi"),
     (u"hr-HR", u"Hrvatski", u"Hrvatska", u"Croatian"),
-    (u"ht", u"Haitian Creole", u"", u""),
     (u"hu-HU", u"Magyar", u"Magyarország", u"Hungarian"),
     (u"hy", u"Հայերեն", u"", u"Armenian"),
-    (u"ia", u"Interlingua", u"", u""),
     (u"id-ID", u"Bahasa Indonesia", u"Indonesia", u"Indonesian"),
-    (u"ig", u"Igbo", u"", u""),
     (u"is", u"Íslenska", u"", u""),
     (u"it", u"Italiano", u"", u"Italian"),
     (u"it-CH", u"Italiano", u"Svizzera", u"Italian"),
@@ -91,86 +72,48 @@ language_codes = (
     (u"iw", u"עברית", u"", u""),
     (u"ja-JP", u"日本語", u"日本", u"Japanese"),
     (u"ka", u"ქართული", u"", u"Georgian"),
-    (u"kg", u"Kongo", u"", u""),
     (u"kk", u"Қазақша", u"", u"Kazakh"),
-    (u"km", u"ខ្មែរ", u"", u""),
-    (u"kn", u"ಕನ್ನಡ", u"", u""),
+    (u"kn", u"ಕನ್ನಡ", u"", u"Kannada"),
     (u"ko-KR", u"한국어", u"대한민국", u"Korean"),
-    (u"kri", u"Krio", u"", u""),
-    (u"ky", u"Кыргызча", u"", u""),
     (u"la", u"Latina", u"", u"Latin"),
-    (u"lg", u"Luganda", u"", u""),
-    (u"ln", u"Lingála", u"", u""),
-    (u"lo", u"ລາວ", u"", u""),
-    (u"loz", u"Lozi", u"", u""),
     (u"lt-LT", u"Lietuvių", u"Lietuva", u"Lithuanian"),
-    (u"lua", u"Luba-Lulua", u"", u""),
     (u"lv-LV", u"Latviešu", u"Latvijas Republika", u""),
-    (u"mfe", u"Kreol Morisien", u"", u""),
-    (u"mg", u"Malagasy", u"", u""),
-    (u"mi", u"Maori", u"", u""),
+    (u"mi", u"Reo Māori", u"", u"Maori"),
     (u"min", u"Minangkabau", u"", u"Minangkabau"),
-    (u"mk", u"Македонски", u"", u""),
-    (u"ml", u"മലയാളം", u"", u""),
-    (u"mn", u"Монгол", u"", u""),
-    (u"mr", u"मराठी", u"", u""),
+    (u"mk", u"Македонски", u"", u"Macedonian"),
+    (u"mn", u"Монгол", u"", u"Mongolian"),
+    (u"mr", u"मराठी", u"", u"Marathi"),
     (u"ms-MY", u"Bahasa Melayu", u"Malaysia", u"Malay"),
-    (u"mt", u"Malti", u"", u""),
-    (u"my", u"ဗမာ", u"", u""),
+    (u"mt", u"Malti", u"", u"Maltese"),
     (u"nb-NO", u"Norwegian Bokmål", u"Norge", u"Norwegian Bokmål"),
-    (u"ne", u"नेपाली", u"", u""),
     (u"nl", u"Nederlands", u"", u"Dutch"),
     (u"nl-BE", u"Nederlands", u"België", u"Dutch"),
     (u"nl-NL", u"Nederlands", u"Nederland", u"Dutch"),
     (u"nn", u"Nynorsk", u"", u"Norwegian"),
     (u"no-NO", u"Norsk", u"Norge", u"Norwegian"),
-    (u"nso", u"Northern Sotho", u"", u""),
-    (u"ny", u"Nyanja", u"", u""),
-    (u"nyn", u"Runyankore", u"", u""),
-    (u"oc", u"Occitan", u"", u""),
-    (u"om", u"Oromoo", u"", u""),
-    (u"or", u"ଓଡ଼ିଆ", u"", u""),
-    (u"pa", u"ਪੰਜਾਬੀ", u"", u""),
-    (u"pcm", u"Nigerian Pidgin", u"", u""),
+    (u"oc", u"Occitan", u"", u"Occitan"),
+    (u"or", u"Oriya", u"", u"Oriya"),
+    (u"pa", u"ਪੰਜਾਬੀ", u"", u"Panjabi"),
     (u"pl-PL", u"Polski", u"Rzeczpospolita Polska", u"Polish"),
-    (u"ps", u"پښتو", u"", u""),
+    (u"ps", u"Pushto", u"", u"Pushto"),
     (u"pt", u"Português", u"", u"Portuguese"),
     (u"pt-BR", u"Português", u"Brasil", u"Portuguese"),
     (u"pt-PT", u"Português", u"Portugal", u"Portuguese"),
-    (u"qu", u"Runasimi", u"", u""),
-    (u"rm", u"Rumantsch", u"", u""),
-    (u"rn", u"Ikirundi", u"", u""),
     (u"ro-RO", u"Română", u"România", u"Romanian"),
     (u"ru-RU", u"Русский", u"Россия", u"Russian"),
-    (u"rw", u"Kinyarwanda", u"", u""),
-    (u"sd", u"Sindhi", u"", u""),
+    (u"rw", u"Ikinyarwanda", u"", u"Kinyarwanda"),
     (u"sh", u"Srpskohrvatski / Српскохрватски", u"", u"Serbo-Croatian"),
-    (u"si", u"සිංහල", u"", u""),
     (u"sk-SK", u"Slovenčina", u"Slovenská republika", u"Slovak"),
     (u"sl", u"Slovenščina", u"", u"Slovenian"),
-    (u"sn", u"Chishona", u"", u""),
-    (u"so", u"Soomaali", u"", u""),
-    (u"sq", u"Shqip", u"", u""),
     (u"sr", u"Српски / Srpski", u"", u"Serbian"),
-    (u"st", u"Southern Sotho", u"", u""),
-    (u"su", u"Sundanese", u"", u""),
     (u"sv-SE", u"Svenska", u"Sverige", u"Swedish"),
     (u"sw", u"Kiswahili", u"", u""),
-    (u"ta", u"தமிழ்", u"", u""),
-    (u"te", u"తెలుగు", u"", u""),
-    (u"tg", u"Tajik", u"", u""),
+    (u"ta", u"தமிழ்", u"", u"Tamil"),
     (u"th-TH", u"ไทย", u"ไทย", u"Thai"),
-    (u"ti", u"ትግርኛ", u"", u""),
-    (u"tk", u"Turkmen", u"", u""),
+    (u"ti", u"ትግርኛ", u"", u"Tigrinya"),
     (u"tl-PH", u"Filipino", u"Pilipinas", u""),
-    (u"tlh", u"Klingon", u"", u""),
-    (u"tn", u"Tswana", u"", u""),
-    (u"to", u"Lea Fakatonga", u"", u""),
     (u"tr-TR", u"Türkçe", u"Türkiye", u"Turkish"),
-    (u"tt", u"Tatar", u"", u""),
-    (u"tum", u"Tumbuka", u"", u""),
-    (u"tw", u"Twi", u"", u""),
-    (u"ug", u"ئۇيغۇرچە", u"", u""),
+    (u"tt", u"Татарча", u"", u"Tatar"),
     (u"uk-UA", u"Українська", u"Україна", u"Ukrainian"),
     (u"ur", u"اردو", u"", u"Urdu"),
     (u"uz", u"O‘zbek", u"", u"Uzbek"),
@@ -179,13 +122,10 @@ language_codes = (
     (u"vo", u"Volapük", u"", u"Volapük"),
     (u"wa", u"Walon", u"", u"Walloon"),
     (u"war", u"Winaray", u"", u"Waray-Waray"),
-    (u"wo", u"Wolof", u"", u""),
-    (u"xh", u"Xhosa", u"", u""),
-    (u"yi", u"ייִדיש", u"", u""),
-    (u"yo", u"Èdè Yorùbá", u"", u""),
+    (u"xh", u"Xhosa", u"", u"Xhosa"),
     (u"zh", u"中文", u"", u"Chinese"),
-    (u"zh-CN", u"中文", u"中国", u"Chinese"),
+    (u"zh-CN", u"中文", u"中国", u""),
     (u"zh-HK", u"中文", u"香港", u"Chinese"),
-    (u"zh-TW", u"中文", u"台湾", u"Chinese"),
-    (u"zu", u"Isizulu", u"", u"")
+    (u"zh-TW", u"中文", u"台湾", u""),
+    (u"zu", u"Isi-Zulu", u"", u"Zulu")
 )