#47742 [Opn->Fbk]: mb_strtoupper and mb_strtolower failure cases

[jani]

 ID:               47742
 Updated by:       j...@php.net
 Reported By:      fsb at thefsb dot org
-Status:           Open
+Status:           Feedback
 Bug Type:         mbstring related
 Operating System: os x
 PHP Version:      5.2.9
 Assigned To:      fb-req-jani
 New Comment:

Please provide a bit shorter example script. Or does the bug only
appear 
with such long strings..?


Previous Comments:
------------------------------------------------------------------------

[2009-05-04 17:00:15] fsb at thefsb dot org

in php5.2-200904162030, mb_strto(upp|low)er appears to be even worse. 
mb_convert_case is now also badly broken.

  $strs = array(
    'Iñtërnâtiônàlizætiøn',
    'החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית',
    'ايران لا ترى تغييرا في الموقف
الأمريكي',
    '独・米で死傷者を出した銃の乱射事件',
    '國會預算處公布驚人的赤字數據後',
    '이며 세계 경제 회복에 걸림돌이 되고 있다',
    'В дагестанском лесном массиве южнее
села Какашура',
    'นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่',
    'ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ',
   
'ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་',
    'Χιόνια, βροχές και θυελλώδεις
άνεμοι συνθέτουν το',
    'Հայաստանում սկսվել է դատական
համակարգի ձեւավորումը',
    'რუსეთი ასევე გეგმავს
სამხედრო');
  print(phpversion() . "\n");
  foreach ($strs as $s) {
    print("\n1: $s\n");
    print('2: '. ($s = mb_strtoupper($s)) . "\n");
    print('3'. ($s = mb_convert_case($s, MB_CASE_UPPER, "UTF-8")) . 
"\n");
    print('4: '. ($s = mb_strtolower($s)) . "\n");
    print('5: '. ($s = mb_convert_case($s, MB_CASE_LOWER, "UTF-8")) . 
"\n");
  }


./php -f test.php 
5.2.10-dev

1: Iñtërnâtiônàlizætiøn
2: IñTëRNâTIôNàLIZæTIøN
3IÑTËRNÂTIÔNÀLIZÆTIØN
4: i?t?rn?ti?n?liz?ti?n
5: itrntinliztin

1: החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
2: החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
3החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
4: החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
5: החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית

1: ايران لا ترى تغييرا في الموقف
الأمريكي
2: ايران لا ترى تغييرا في الموقف
الأمريكي
3ايران لا ترى تغييرا في الموقف
الأمريكي
4: ?????????? ???? ?????? ???????????? ???? ???????????? ?????????????
???
5:       

1: 独・米で死傷者を出した銃の乱射事件
2: Nj?Ã?DZ?Á?ƭ?ł?Ȁ?Â?Ň?Á?Á?Ɋ?Á?Ĺ?Ű?ĺ?Ļ?
3NjÃDZÁƬŁȀÂŇÁÁɊÁĹŰĹĻ
4: ?????????????????
5: 

1: 國會預算處公布驚人的赤字數據後
2: Ŝ?Ɯ?ɠ?Ǯ?ș?Ņ?Ÿ?ɩ?ĺ?ǚ????ŭ?ƕ?Ɠ?ž?
3ŜƜƓǮȘŅŸƖĹǙ?ŬǶƓŽ
4: ???????????????
5: ?

1: 이며 세계 경제 회복에 걸림돌이 되고 있다
2: ̝?˩? ̄?ʳ? ʲ?̠? ͚?˳?̗? ʱ?˦?ˏ?̝? ː?ʳ? ̞?ˋ?
3̝˩ ̄ʳ ʲ̠ ͚˳?̗ ʱ˦ˏ̝ ːʳ ̞ˋ
4: ?? ?? ?? ???? ???? ?? ??
5:    ?   

1: В дагестанском лесном массиве южнее
села Какашура
2: В даг??станском л??сном массив?? южн????
с??ла Какашура
3В ДАГ?СТАНСКОМ Л?СНОМ МАССИВ? ЮЖН?? С?ЛА
КАКАШУРА
4: ? ???????????? ?????? ??????? ????? ???? ????????
5:  ? ? ? ?? ? 

1: นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่
2: ???????????????????????????????????? ??????????????????????????? ??
???????????????????????????? ?????????????????????????????????????????
???????????????????????????? ???.??????????????????????????????
3   ? .
4:    ? .
5:    ? .

1: ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ
2: ?????????????????? ??????????????? ?????????????????? ????????? : ?
??????????????????????? ?????? ????????????
3  ?  : ?  
4:   ?  : ?  
5:   ?  : ?  

1:
ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་
2: ???????????????????????????????????????????????????????????????????
??????????????????????????????????????????????????????????????????????
???????
3
4: 
5: 

1: Χιόνια, βροχές και θυελλώδεις άνεμοι
συνθέτουν το
2: Χιόνια, βροχές και θυ??λλώδ??ις άν??μοι
συνθέτουν το
3ΧΙΌΝΙΑ, ΒΡΟΧΈΣ ΚΑΙ ΘΥ?ΛΛΏΔ?ΙΣ ΆΝ?ΜΟΙ
ΣΥΝΘΈΤΟΥΝ ΤΟ
4: ??????, ?????? ??? ?????????? ?????? ????????? ??
5: ,   ?? ?  

1: Հայաստանում սկսվել է դատական
համակարգի ձեւավորումը
2: Հա??աստանում սկսվել է դատական
համակարգի ձեւավորումը
3ՀԱ?ԱՍՏԱՆՈՒՄ ՍԿՍՎԵԼ Է ԴԱՏԱԿԱՆ
ՀԱՄԱԿԱՐԳԻ ՁԵՒԱՎՈՐՈՒՄԸ
4: ????????????????????? ???????????? ?? ?????????????? ??????????????
???? ??????????????????????
5: ?     

1: რუსეთი ასევე გეგმავს
სამხედრო
2: ?????????????????? ??????????????? ????????????????????? ??????????
??????????????
3   
4:    
5:

------------------------------------------------------------------------

[2009-04-21 07:06:33] j...@php.net

To test the mbstring bug you don't need mysql. So just disable that. Or
pass the path to mysql_config properly. 

------------------------------------------------------------------------

[2009-04-16 23:05:12] fsb at thefsb dot org

unfortunately i have not been able to compile this on os-x.

it seems configure wants to find mysql_config in a location where it is

not and i am not able to coerce it into accepting the default os-x
mysql 
layout.

frustrating.

------------------------------------------------------------------------

[2009-04-16 19:32:33] j...@php.net

Please try using this CVS snapshot:

  http://snaps.php.net/php5.2-latest.tar.gz
 
For Windows:

  http://windows.php.net/snapshots/



------------------------------------------------------------------------

[2009-03-21 17:42:53] fsb at thefsb dot org

Description:
------------
In some alphabets including greek, mb_strtoupper and mb_strtolower fail

on strings that mb_convert_case handles ok.

Reproduce code:
---------------
<?php
        $strs = array(
                'החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית',
                'ايران لا ترى تغييرا في الموقف
الأمريكي',
                '独・米で死傷者を出した銃の乱射事件',
                '國會預算處公布驚人的赤字數據後',
                '이며 세계 경제 회복에 걸림돌이 되고 있다',
                'В дагестанском лесном массиве 
южнее
села Какашура',
                'นายประสิทธิ์ 
รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่',
                'ભારતીય ટીમનો સુવર્ણ 
યુગ :
કિવીઝમાં પણ કમાલ',
                
'ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་',
                'Χιόνια, βροχές και θυελλώδεις 
άνεμοι
συνθέτουν το',
                'Հայաստանում սկսվել է դատական
համակարգի ձեւավորումը',
                'რუსეთი ასევე გეგმავს
სამხედრო');
        foreach ($strs as $s) {
                print("\n$s\n");
                print(($s = mb_strtoupper($s)) . "\n"); // cf: print(($s =
mb_convert_case($s, MB_CASE_UPPER, "UTF-8")) . "\n");
                print(($s = mb_strtolower($s)) . "\n"); // cf: print(($s =
mb_convert_case($s, MB_CASE_LOWER, "UTF-8")) . "\n");
        }
?>

Expected result:
----------------
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית

ايران لا ترى تغييرا في الموقف الأمريكي
ايران لا ترى تغييرا في الموقف الأمريكي
ايران لا ترى تغييرا في الموقف الأمريكي

独・米で死傷者を出した銃の乱射事件
独・米で死傷者を出した銃の乱射事件
独・米で死傷者を出した銃の乱射事件

國會預算處公布驚人的赤字數據後
國會預算處公布驚人的赤字數據後
國會預算處公布驚人的赤字數據後

이며 세계 경제 회복에 걸림돌이 되고 있다
이며 세계 경제 회복에 걸림돌이 되고 있다
이며 세계 경제 회복에 걸림돌이 되고 있다

В дагестанском лесном массиве южнее
села Какашура
В ДАГЕСТАНСКОМ ЛЕСНОМ МАССИВЕ ЮЖНЕЕ
СЕЛА КАКАШУРА
в дагестанском лесном массиве южнее
села какашура

นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่
นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่
นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่

ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ
ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ
ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ

ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་
ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་
ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་

Χιόνια, βροχές και θυελλώδεις άνεμοι
συνθέτουν το
ΧΙΌΝΙΑ, ΒΡΟΧΈΣ ΚΑΙ ΘΥΕΛΛΏΔΕΙΣ ΆΝΕΜΟΙ
ΣΥΝΘΈΤΟΥΝ ΤΟ
χιόνια, βροχέσ και θυελλώδεισ άνεμοι
συνθέτουν το

Հայաստանում սկսվել է դատական
համակարգի ձեւավորումը
ՀԱՅԱՍՏԱՆՈՒՄ ՍԿՍՎԵԼ Է ԴԱՏԱԿԱՆ
ՀԱՄԱԿԱՐԳԻ ՁԵՒԱՎՈՐՈՒՄԸ
հայաստանում սկսվել է դատական
համակարգի ձեւավորումը

რუსეთი ასევე გეგმავს
სამხედრო
რუსეთი ასევე გეგმავს
სამხედრო
რუსეთი ასევე გეგმავს
სამხედრო






Actual result:
--------------
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית
החמאס: רוצים להשלים את עסקת שליט
במהירות האפשרית

ايران لا ترى تغييرا في الموقف الأمريكي
ايران لا ترى تغييرا في الموقف الأمريكي
?????????? ???? ?????? ???????????? ???? ???????????? ????????????????

独・米で死傷者を出した銃の乱射事件
Nj?Ã?DZ?Á?ƭ?ł?Ȁ?Â?Ň?Á?Á?Ɋ?Á?Ĺ?Ű?ĺ?Ļ?
独・米で死傷者を出した銃の乱射事件

國會預算處公布驚人的赤字數據後
Ŝ?Ɯ?ɠ?Ǯ?ș?Ņ?Ÿ?ɩ?ĺ?ǚ????ŭ?ƕ?Ɠ?ž?
國會預算處公布驚人的???字數據後

이며 세계 경제 회복에 걸림돌이 되고 있다
̝?˩? ̄?ʳ? ʲ?̠? ͚?˳?̗? ʱ?˦?ˏ?̝? ː?ʳ? ̞?ˋ?
이며 세계 경제 회??에 걸림돌이 되고 있다

В дагестанском лесном массиве южнее
села Какашура
В даг??станском л??сном массив?? южн????
с??ла Какашура
? ????????????? ??????? ???????? ??????? ????? ????????

นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตรี
ต.ท่าทองใหม่
???????????????????????????????????? ??????????????????????????? ?????
????????????????????????? ????????????????????????????????????????????
????????????????????????? ???.??????????????????????????????
นายประสิทธิ์ รุ่งสะอาด
ปลัดเทศบาล
รักษาการแทนนายกเทศมนตร??
ต.ท่าทองใหม่

ભારતીય ટીમનો સુવર્ણ યુગ :
કિવીઝમાં પણ કમાલ
?????????????????? ??????????????? ?????????????????? ????????? : ????
???????????????????? ?????? ????????????
ભારતીય ટીમનો સુ??ર્ણ યુગ :
કિ??ીઝમાં પણ કમાલ

ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་
??????????????????????????????????????????????????????????????????????
??????????????????????????????????????????????????????????????????????
????
ཁམས་དཀར་མཛེས་ས་ཁུལ་དུ་རྒྱ་གཞུང་ལ་ཞི་བའི་ངོ་རྒོལ་

Χιόνια, βροχές και θυελλώδεις άνεμοι
συνθέτουν το
Χιόνια, βροχές και θυ??λλώδ??ις άν??μοι
συνθέτουν το
??????, ?????? ??? ???????????? ??????? ????????? ??

Հայաստանում սկսվել է դատական
համակարգի ձեւավորումը
Հա??աստանում սկսվել է դատական
համակարգի ձեւավորումը
?????????????????????? ???????????? ?? ?????????????? ????????????????
?? ??????????????????????

რუსეთი ასევე გეგმავს
სამხედრო
?????????????????? ??????????????? ????????????????????? ?????????????
???????????
რუსეთი ასევე გეგმავს
სამხედრო







------------------------------------------------------------------------


-- 
Edit this bug report at http://bugs.php.net/?id=47742&edit=1