Refresh generated charmap data and ChangeLog

	[BZ #21750]
	* charmaps/UTF-8: Refresh.

2 files changed, 111355 insertions, 127 deletions

diff --git a/localedata/ChangeLog b/localedata/ChangeLog
index 04ef5ad071..9e05b4a652 100644
--- a/localedata/ChangeLog
+++ b/localedata/ChangeLog
@@ -1,3 +1,17 @@
+2017-07-14  Thorsten Glaser  <tg@mirbsd.de>
+
+	[BZ #21750]
+	* charmaps/UTF-8: Refresh.
+	* unicode-gen/utf8_gen.py (U+00AD): Set width to 1.
+	* unicode-gen/utf8_gen.py (U+1160..U+11FF): Set width to 0.
+	* unicode-gen/utf8_gen.py (U+3248..U+324F): Set width to 2.
+	* unicode-gen/utf8_gen.py (U+4DC0..U+4DFF): Likewise.
+	* unicode-gen/utf8_gen.py: Treat category Me and Mn as combining.
+	[BZ #19852]
+	* unicode-gen/utf8_gen.py: Process EastAsianWidth lines before
+	UnicodeData lines so the latter have precedence; remove hack
+	to group output by EastAsianWidth ranges.
+
 2017-08-14  Mike FABIAN  <mfabian@redhat.com>
 
 	[BZ #14925]
diff --git a/localedata/charmaps/UTF-8 b/localedata/charmaps/UTF-8
index 42f7d4eaec..21f59a1f57 100644
--- a/localedata/charmaps/UTF-8
+++ b/localedata/charmaps/UTF-8
@@ -46404,7 +46404,6 @@ END CHARMAP
 % - Format control characters have width 0; generated from
 %   "grep '^[^;]*;[^;]*;Cf;' UnicodeData.txt"
 WIDTH
-<U00AD>	0
 <U0300>	0
 <U0301>	0
 <U0302>	0
@@ -46848,6 +46847,8 @@ WIDTH
 <U0C63>	0
 <U0C81>	0
 <U0CBC>	0
+<U0CBF>	0
+<U0CC6>	0
 <U0CCC>	0
 <U0CCD>	0
 <U0CE2>	0
@@ -47001,7 +47002,103 @@ WIDTH
 <U1086>	0
 <U108D>	0
 <U109D>	0
-<U1100>...<U115F>	2
+<U1100>	2
+<U1101>	2
+<U1102>	2
+<U1103>	2
+<U1104>	2
+<U1105>	2
+<U1106>	2
+<U1107>	2
+<U1108>	2
+<U1109>	2
+<U110A>	2
+<U110B>	2
+<U110C>	2
+<U110D>	2
+<U110E>	2
+<U110F>	2
+<U1110>	2
+<U1111>	2
+<U1112>	2
+<U1113>	2
+<U1114>	2
+<U1115>	2
+<U1116>	2
+<U1117>	2
+<U1118>	2
+<U1119>	2
+<U111A>	2
+<U111B>	2
+<U111C>	2
+<U111D>	2
+<U111E>	2
+<U111F>	2
+<U1120>	2
+<U1121>	2
+<U1122>	2
+<U1123>	2
+<U1124>	2
+<U1125>	2
+<U1126>	2
+<U1127>	2
+<U1128>	2
+<U1129>	2
+<U112A>	2
+<U112B>	2
+<U112C>	2
+<U112D>	2
+<U112E>	2
+<U112F>	2
+<U1130>	2
+<U1131>	2
+<U1132>	2
+<U1133>	2
+<U1134>	2
+<U1135>	2
+<U1136>	2
+<U1137>	2
+<U1138>	2
+<U1139>	2
+<U113A>	2
+<U113B>	2
+<U113C>	2
+<U113D>	2
+<U113E>	2
+<U113F>	2
+<U1140>	2
+<U1141>	2
+<U1142>	2
+<U1143>	2
+<U1144>	2
+<U1145>	2
+<U1146>	2
+<U1147>	2
+<U1148>	2
+<U1149>	2
+<U114A>	2
+<U114B>	2
+<U114C>	2
+<U114D>	2
+<U114E>	2
+<U114F>	2
+<U1150>	2
+<U1151>	2
+<U1152>	2
+<U1153>	2
+<U1154>	2
+<U1155>	2
+<U1156>	2
+<U1157>	2
+<U1158>	2
+<U1159>	2
+<U115A>	2
+<U115B>	2
+<U115C>	2
+<U115D>	2
+<U115E>	2
+<U115F>	2
+<U1160>...<U11FF>	0
 <U135D>	0
 <U135E>	0
 <U135F>	0
@@ -47297,39 +47394,66 @@ WIDTH
 <U20EE>	0
 <U20EF>	0
 <U20F0>	0
-<U231A>...<U231B>	2
+<U231A>	2
+<U231B>	2
 <U2329>	2
 <U232A>	2
-<U23E9>...<U23EC>	2
+<U23E9>	2
+<U23EA>	2
+<U23EB>	2
+<U23EC>	2
 <U23F0>	2
 <U23F3>	2
-<U25FD>...<U25FE>	2
-<U2614>...<U2615>	2
-<U2648>...<U2653>	2
+<U25FD>	2
+<U25FE>	2
+<U2614>	2
+<U2615>	2
+<U2648>	2
+<U2649>	2
+<U264A>	2
+<U264B>	2
+<U264C>	2
+<U264D>	2
+<U264E>	2
+<U264F>	2
+<U2650>	2
+<U2651>	2
+<U2652>	2
+<U2653>	2
 <U267F>	2
 <U2693>	2
 <U26A1>	2
-<U26AA>...<U26AB>	2
-<U26BD>...<U26BE>	2
-<U26C4>...<U26C5>	2
+<U26AA>	2
+<U26AB>	2
+<U26BD>	2
+<U26BE>	2
+<U26C4>	2
+<U26C5>	2
 <U26CE>	2
 <U26D4>	2
 <U26EA>	2
-<U26F2>...<U26F3>	2
+<U26F2>	2
+<U26F3>	2
 <U26F5>	2
 <U26FA>	2
 <U26FD>	2
 <U2705>	2
-<U270A>...<U270B>	2
+<U270A>	2
+<U270B>	2
 <U2728>	2
 <U274C>	2
 <U274E>	2
-<U2753>...<U2755>	2
+<U2753>	2
+<U2754>	2
+<U2755>	2
 <U2757>	2
-<U2795>...<U2797>	2
+<U2795>	2
+<U2796>	2
+<U2797>	2
 <U27B0>	2
 <U27BF>	2
-<U2B1B>...<U2B1C>	2
+<U2B1B>	2
+<U2B1C>	2
 <U2B50>	2
 <U2B55>	2
 <U2CEF>	0
@@ -47368,12 +47492,351 @@ WIDTH
 <U2DFD>	0
 <U2DFE>	0
 <U2DFF>	0
-<U2E80>...<U2E99>	2
-<U2E9B>...<U2EF3>	2
-<U2F00>...<U2FD5>	2
-<U2FF0>...<U2FFB>	2
+<U2E80>	2
+<U2E81>	2
+<U2E82>	2
+<U2E83>	2
+<U2E84>	2
+<U2E85>	2
+<U2E86>	2
+<U2E87>	2
+<U2E88>	2
+<U2E89>	2
+<U2E8A>	2
+<U2E8B>	2
+<U2E8C>	2
+<U2E8D>	2
+<U2E8E>	2
+<U2E8F>	2
+<U2E90>	2
+<U2E91>	2
+<U2E92>	2
+<U2E93>	2
+<U2E94>	2
+<U2E95>	2
+<U2E96>	2
+<U2E97>	2
+<U2E98>	2
+<U2E99>	2
+<U2E9B>	2
+<U2E9C>	2
+<U2E9D>	2
+<U2E9E>	2
+<U2E9F>	2
+<U2EA0>	2
+<U2EA1>	2
+<U2EA2>	2
+<U2EA3>	2
+<U2EA4>	2
+<U2EA5>	2
+<U2EA6>	2
+<U2EA7>	2
+<U2EA8>	2
+<U2EA9>	2
+<U2EAA>	2
+<U2EAB>	2
+<U2EAC>	2
+<U2EAD>	2
+<U2EAE>	2
+<U2EAF>	2
+<U2EB0>	2
+<U2EB1>	2
+<U2EB2>	2
+<U2EB3>	2
+<U2EB4>	2
+<U2EB5>	2
+<U2EB6>	2
+<U2EB7>	2
+<U2EB8>	2
+<U2EB9>	2
+<U2EBA>	2
+<U2EBB>	2
+<U2EBC>	2
+<U2EBD>	2
+<U2EBE>	2
+<U2EBF>	2
+<U2EC0>	2
+<U2EC1>	2
+<U2EC2>	2
+<U2EC3>	2
+<U2EC4>	2
+<U2EC5>	2
+<U2EC6>	2
+<U2EC7>	2
+<U2EC8>	2
+<U2EC9>	2
+<U2ECA>	2
+<U2ECB>	2
+<U2ECC>	2
+<U2ECD>	2
+<U2ECE>	2
+<U2ECF>	2
+<U2ED0>	2
+<U2ED1>	2
+<U2ED2>	2
+<U2ED3>	2
+<U2ED4>	2
+<U2ED5>	2
+<U2ED6>	2
+<U2ED7>	2
+<U2ED8>	2
+<U2ED9>	2
+<U2EDA>	2
+<U2EDB>	2
+<U2EDC>	2
+<U2EDD>	2
+<U2EDE>	2
+<U2EDF>	2
+<U2EE0>	2
+<U2EE1>	2
+<U2EE2>	2
+<U2EE3>	2
+<U2EE4>	2
+<U2EE5>	2
+<U2EE6>	2
+<U2EE7>	2
+<U2EE8>	2
+<U2EE9>	2
+<U2EEA>	2
+<U2EEB>	2
+<U2EEC>	2
+<U2EED>	2
+<U2EEE>	2
+<U2EEF>	2
+<U2EF0>	2
+<U2EF1>	2
+<U2EF2>	2
+<U2EF3>	2
+<U2F00>	2
+<U2F01>	2
+<U2F02>	2
+<U2F03>	2
+<U2F04>	2
+<U2F05>	2
+<U2F06>	2
+<U2F07>	2
+<U2F08>	2
+<U2F09>	2
+<U2F0A>	2
+<U2F0B>	2
+<U2F0C>	2
+<U2F0D>	2
+<U2F0E>	2
+<U2F0F>	2
+<U2F10>	2
+<U2F11>	2
+<U2F12>	2
+<U2F13>	2
+<U2F14>	2
+<U2F15>	2
+<U2F16>	2
+<U2F17>	2
+<U2F18>	2
+<U2F19>	2
+<U2F1A>	2
+<U2F1B>	2
+<U2F1C>	2
+<U2F1D>	2
+<U2F1E>	2
+<U2F1F>	2
+<U2F20>	2
+<U2F21>	2
+<U2F22>	2
+<U2F23>	2
+<U2F24>	2
+<U2F25>	2
+<U2F26>	2
+<U2F27>	2
+<U2F28>	2
+<U2F29>	2
+<U2F2A>	2
+<U2F2B>	2
+<U2F2C>	2
+<U2F2D>	2
+<U2F2E>	2
+<U2F2F>	2
+<U2F30>	2
+<U2F31>	2
+<U2F32>	2
+<U2F33>	2
+<U2F34>	2
+<U2F35>	2
+<U2F36>	2
+<U2F37>	2
+<U2F38>	2
+<U2F39>	2
+<U2F3A>	2
+<U2F3B>	2
+<U2F3C>	2
+<U2F3D>	2
+<U2F3E>	2
+<U2F3F>	2
+<U2F40>	2
+<U2F41>	2
+<U2F42>	2
+<U2F43>	2
+<U2F44>	2
+<U2F45>	2
+<U2F46>	2
+<U2F47>	2
+<U2F48>	2
+<U2F49>	2
+<U2F4A>	2
+<U2F4B>	2
+<U2F4C>	2
+<U2F4D>	2
+<U2F4E>	2
+<U2F4F>	2
+<U2F50>	2
+<U2F51>	2
+<U2F52>	2
+<U2F53>	2
+<U2F54>	2
+<U2F55>	2
+<U2F56>	2
+<U2F57>	2
+<U2F58>	2
+<U2F59>	2
+<U2F5A>	2
+<U2F5B>	2
+<U2F5C>	2
+<U2F5D>	2
+<U2F5E>	2
+<U2F5F>	2
+<U2F60>	2
+<U2F61>	2
+<U2F62>	2
+<U2F63>	2
+<U2F64>	2
+<U2F65>	2
+<U2F66>	2
+<U2F67>	2
+<U2F68>	2
+<U2F69>	2
+<U2F6A>	2
+<U2F6B>	2
+<U2F6C>	2
+<U2F6D>	2
+<U2F6E>	2
+<U2F6F>	2
+<U2F70>	2
+<U2F71>	2
+<U2F72>	2
+<U2F73>	2
+<U2F74>	2
+<U2F75>	2
+<U2F76>	2
+<U2F77>	2
+<U2F78>	2
+<U2F79>	2
+<U2F7A>	2
+<U2F7B>	2
+<U2F7C>	2
+<U2F7D>	2
+<U2F7E>	2
+<U2F7F>	2
+<U2F80>	2
+<U2F81>	2
+<U2F82>	2
+<U2F83>	2
+<U2F84>	2
+<U2F85>	2
+<U2F86>	2
+<U2F87>	2
+<U2F88>	2
+<U2F89>	2
+<U2F8A>	2
+<U2F8B>	2
+<U2F8C>	2
+<U2F8D>	2
+<U2F8E>	2
+<U2F8F>	2
+<U2F90>	2
+<U2F91>	2
+<U2F92>	2
+<U2F93>	2
+<U2F94>	2
+<U2F95>	2
+<U2F96>	2
+<U2F97>	2
+<U2F98>	2
+<U2F99>	2
+<U2F9A>	2
+<U2F9B>	2
+<U2F9C>	2
+<U2F9D>	2
+<U2F9E>	2
+<U2F9F>	2
+<U2FA0>	2
+<U2FA1>	2
+<U2FA2>	2
+<U2FA3>	2
+<U2FA4>	2
+<U2FA5>	2
+<U2FA6>	2
+<U2FA7>	2
+<U2FA8>	2
+<U2FA9>	2
+<U2FAA>	2
+<U2FAB>	2
+<U2FAC>	2
+<U2FAD>	2
+<U2FAE>	2
+<U2FAF>	2
+<U2FB0>	2
+<U2FB1>	2
+<U2FB2>	2
+<U2FB3>	2
+<U2FB4>	2
+<U2FB5>	2
+<U2FB6>	2
+<U2FB7>	2
+<U2FB8>	2
+<U2FB9>	2
+<U2FBA>	2
+<U2FBB>	2
+<U2FBC>	2
+<U2FBD>	2
+<U2FBE>	2
+<U2FBF>	2
+<U2FC0>	2
+<U2FC1>	2
+<U2FC2>	2
+<U2FC3>	2
+<U2FC4>	2
+<U2FC5>	2
+<U2FC6>	2
+<U2FC7>	2
+<U2FC8>	2
+<U2FC9>	2
+<U2FCA>	2
+<U2FCB>	2
+<U2FCC>	2
+<U2FCD>	2
+<U2FCE>	2
+<U2FCF>	2
+<U2FD0>	2
+<U2FD1>	2
+<U2FD2>	2
+<U2FD3>	2
+<U2FD4>	2
+<U2FD5>	2
+<U2FF0>	2
+<U2FF1>	2
+<U2FF2>	2
+<U2FF3>	2
+<U2FF4>	2
+<U2FF5>	2
+<U2FF6>	2
+<U2FF7>	2
+<U2FF8>	2
+<U2FF9>	2
+<U2FFA>	2
+<U2FFB>	2
 <U3000>	2
-<U3001>...<U3003>	2
+<U3001>	2
+<U3002>	2
+<U3003>	2
 <U3004>	2
 <U3005>	2
 <U3006>	2
@@ -47388,7 +47851,8 @@ WIDTH
 <U300F>	2
 <U3010>	2
 <U3011>	2
-<U3012>...<U3013>	2
+<U3012>	2
+<U3013>	2
 <U3014>	2
 <U3015>	2
 <U3016>	2
@@ -47399,54 +47863,29736 @@ WIDTH
 <U301B>	2
 <U301C>	2
 <U301D>	2
-<U301E>...<U301F>	2
+<U301E>	2
+<U301F>	2
 <U3020>	2
-<U3021>...<U3029>	2
-<U302A>...<U302D>	2
-<U302E>...<U302F>	2
+<U3021>	2
+<U3022>	2
+<U3023>	2
+<U3024>	2
+<U3025>	2
+<U3026>	2
+<U3027>	2
+<U3028>	2
+<U3029>	2
+<U302A>	0
+<U302B>	0
+<U302C>	0
+<U302D>	0
+<U302E>	2
+<U302F>	2
 <U3030>	2
-<U3031>...<U3035>	2
-<U3036>...<U3037>	2
-<U3038>...<U303A>	2
+<U3031>	2
+<U3032>	2
+<U3033>	2
+<U3034>	2
+<U3035>	2
+<U3036>	2
+<U3037>	2
+<U3038>	2
+<U3039>	2
+<U303A>	2
 <U303B>	2
 <U303C>	2
 <U303D>	2
 <U303E>	2
-<U3041>...<U3096>	2
-<U3099>...<U309A>	2
-<U309B>...<U309C>	2
-<U309D>...<U309E>	2
+<U3041>	2
+<U3042>	2
+<U3043>	2
+<U3044>	2
+<U3045>	2
+<U3046>	2
+<U3047>	2
+<U3048>	2
+<U3049>	2
+<U304A>	2
+<U304B>	2
+<U304C>	2
+<U304D>	2
+<U304E>	2
+<U304F>	2
+<U3050>	2
+<U3051>	2
+<U3052>	2
+<U3053>	2
+<U3054>	2
+<U3055>	2
+<U3056>	2
+<U3057>	2
+<U3058>	2
+<U3059>	2
+<U305A>	2
+<U305B>	2
+<U305C>	2
+<U305D>	2
+<U305E>	2
+<U305F>	2
+<U3060>	2
+<U3061>	2
+<U3062>	2
+<U3063>	2
+<U3064>	2
+<U3065>	2
+<U3066>	2
+<U3067>	2
+<U3068>	2
+<U3069>	2
+<U306A>	2
+<U306B>	2
+<U306C>	2
+<U306D>	2
+<U306E>	2
+<U306F>	2
+<U3070>	2
+<U3071>	2
+<U3072>	2
+<U3073>	2
+<U3074>	2
+<U3075>	2
+<U3076>	2
+<U3077>	2
+<U3078>	2
+<U3079>	2
+<U307A>	2
+<U307B>	2
+<U307C>	2
+<U307D>	2
+<U307E>	2
+<U307F>	2
+<U3080>	2
+<U3081>	2
+<U3082>	2
+<U3083>	2
+<U3084>	2
+<U3085>	2
+<U3086>	2
+<U3087>	2
+<U3088>	2
+<U3089>	2
+<U308A>	2
+<U308B>	2
+<U308C>	2
+<U308D>	2
+<U308E>	2
+<U308F>	2
+<U3090>	2
+<U3091>	2
+<U3092>	2
+<U3093>	2
+<U3094>	2
+<U3095>	2
+<U3096>	2
+<U3099>	0
+<U309A>	0
+<U309B>	2
+<U309C>	2
+<U309D>	2
+<U309E>	2
 <U309F>	2
 <U30A0>	2
-<U30A1>...<U30FA>	2
+<U30A1>	2
+<U30A2>	2
+<U30A3>	2
+<U30A4>	2
+<U30A5>	2
+<U30A6>	2
+<U30A7>	2
+<U30A8>	2
+<U30A9>	2
+<U30AA>	2
+<U30AB>	2
+<U30AC>	2
+<U30AD>	2
+<U30AE>	2
+<U30AF>	2
+<U30B0>	2
+<U30B1>	2
+<U30B2>	2
+<U30B3>	2
+<U30B4>	2
+<U30B5>	2
+<U30B6>	2
+<U30B7>	2
+<U30B8>	2
+<U30B9>	2
+<U30BA>	2
+<U30BB>	2
+<U30BC>	2
+<U30BD>	2
+<U30BE>	2
+<U30BF>	2
+<U30C0>	2
+<U30C1>	2
+<U30C2>	2
+<U30C3>	2
+<U30C4>	2
+<U30C5>	2
+<U30C6>	2
+<U30C7>	2
+<U30C8>	2
+<U30C9>	2
+<U30CA>	2
+<U30CB>	2
+<U30CC>	2
+<U30CD>	2
+<U30CE>	2
+<U30CF>	2
+<U30D0>	2
+<U30D1>	2
+<U30D2>	2
+<U30D3>	2
+<U30D4>	2
+<U30D5>	2
+<U30D6>	2
+<U30D7>	2
+<U30D8>	2
+<U30D9>	2
+<U30DA>	2
+<U30DB>	2
+<U30DC>	2
+<U30DD>	2
+<U30DE>	2
+<U30DF>	2
+<U30E0>	2
+<U30E1>	2
+<U30E2>	2
+<U30E3>	2
+<U30E4>	2
+<U30E5>	2
+<U30E6>	2
+<U30E7>	2
+<U30E8>	2
+<U30E9>	2
+<U30EA>	2
+<U30EB>	2
+<U30EC>	2
+<U30ED>	2
+<U30EE>	2
+<U30EF>	2
+<U30F0>	2
+<U30F1>	2
+<U30F2>	2
+<U30F3>	2
+<U30F4>	2
+<U30F5>	2
+<U30F6>	2
+<U30F7>	2
+<U30F8>	2
+<U30F9>	2
+<U30FA>	2
 <U30FB>	2
-<U30FC>...<U30FE>	2
+<U30FC>	2
+<U30FD>	2
+<U30FE>	2
 <U30FF>	2
-<U3105>...<U312E>	2
-<U3131>...<U318E>	2
-<U3190>...<U3191>	2
-<U3192>...<U3195>	2
-<U3196>...<U319F>	2
-<U31A0>...<U31BA>	2
-<U31C0>...<U31E3>	2
-<U31F0>...<U31FF>	2
-<U3200>...<U321E>	2
-<U3220>...<U3229>	2
-<U322A>...<U3247>	2
+<U3105>	2
+<U3106>	2
+<U3107>	2
+<U3108>	2
+<U3109>	2
+<U310A>	2
+<U310B>	2
+<U310C>	2
+<U310D>	2
+<U310E>	2
+<U310F>	2
+<U3110>	2
+<U3111>	2
+<U3112>	2
+<U3113>	2
+<U3114>	2
+<U3115>	2
+<U3116>	2
+<U3117>	2
+<U3118>	2
+<U3119>	2
+<U311A>	2
+<U311B>	2
+<U311C>	2
+<U311D>	2
+<U311E>	2
+<U311F>	2
+<U3120>	2
+<U3121>	2
+<U3122>	2
+<U3123>	2
+<U3124>	2
+<U3125>	2
+<U3126>	2
+<U3127>	2
+<U3128>	2
+<U3129>	2
+<U312A>	2
+<U312B>	2
+<U312C>	2
+<U312D>	2
+<U312E>	2
+<U3131>	2
+<U3132>	2
+<U3133>	2
+<U3134>	2
+<U3135>	2
+<U3136>	2
+<U3137>	2
+<U3138>	2
+<U3139>	2
+<U313A>	2
+<U313B>	2
+<U313C>	2
+<U313D>	2
+<U313E>	2
+<U313F>	2
+<U3140>	2
+<U3141>	2
+<U3142>	2
+<U3143>	2
+<U3144>	2
+<U3145>	2
+<U3146>	2
+<U3147>	2
+<U3148>	2
+<U3149>	2
+<U314A>	2
+<U314B>	2
+<U314C>	2
+<U314D>	2
+<U314E>	2
+<U314F>	2
+<U3150>	2
+<U3151>	2
+<U3152>	2
+<U3153>	2
+<U3154>	2
+<U3155>	2
+<U3156>	2
+<U3157>	2
+<U3158>	2
+<U3159>	2
+<U315A>	2
+<U315B>	2
+<U315C>	2
+<U315D>	2
+<U315E>	2
+<U315F>	2
+<U3160>	2
+<U3161>	2
+<U3162>	2
+<U3163>	2
+<U3164>	2
+<U3165>	2
+<U3166>	2
+<U3167>	2
+<U3168>	2
+<U3169>	2
+<U316A>	2
+<U316B>	2
+<U316C>	2
+<U316D>	2
+<U316E>	2
+<U316F>	2
+<U3170>	2
+<U3171>	2
+<U3172>	2
+<U3173>	2
+<U3174>	2
+<U3175>	2
+<U3176>	2
+<U3177>	2
+<U3178>	2