rulinux.net - Форум - General - А почему могут рваться пайпы, когда по ним шлют неюникодовые символы? http://rulinux.net/ rulinux.net - Форум - General - А почему могут рваться пайпы, когда по ним шлют неюникодовые символы? http://rulinux.net/ http://rulinux.net/rss_icon.png Re: А почему могут рваться пайпы, когда по ним шлют неюникодовые символы? https://rulinux.net/message.php?newsid=33834&page=1#96970 https://rulinux.net/message.php?newsid=33834&page=1#96970 Wed, 13 Jul 2011 18:57:01 +0400 А если почитать stderr, что получится?

И да, анонимус выше абсолютно прав.

]]> Re: А почему могут рваться пайпы, когда по ним шлют неюникодовые символы? https://rulinux.net/message.php?newsid=33834&page=1#96969 https://rulinux.net/message.php?newsid=33834&page=1#96969 Thu, 30 Jun 2011 21:43:56 +0400 > Только вот не надо уходить от темы
Это делает не пайп, а iconv потому что не знает во что ему преобразовывать твои символы. Припиши в конец команды " -t UTF-8" и я уверен твоя жизнь сразу же улучшится в полтора раза.

]]> А почему могут рваться пайпы, когда по ним шлют неюникодовые символы? https://rulinux.net/message.php?newsid=33834&page=1#96968 https://rulinux.net/message.php?newsid=33834&page=1#96968 Thu, 30 Jun 2011 21:29:00 +0400 Для максимальной простоты приведу пример CGI приложения:

  1.  #!/bin/bash
  2.  echo "200 OK"
  3.  echo "Content-Type: text/plain; charset=UTF-8"
  4.  echo
  5.  echo
  6.  echo -e 'test\xC0\xC1\xC2' | iconv -f windows-1251
  7.  

Вместо iconv можно воткнуть sed 'y/\xC0\xC1\xC2/АБВ/', итог тот же. Так вот, если запусить пример из консоли как приложение, то получим итоговую строку testАБВ, как и ожидалось. Если же зайти по соотв. адресу через браузер (вебсервер никаких mod_ не содержит, тупо запускает CGI приложения через execl), то получим только test, а всё что написано дальше - не приходит, причём, в логах веб-сервера увидим что не приходит, т.к. само приложение дальше ничего и не говорило. Если вместо пайпов использовать временные файлы - всё работает. Если перенаправить вывод iconv в файл - увидим что при запуске через веб-сервер в файле только test и написано, а при запуске из терминала - вся строка.

which показывает что бинарники берутся одни и те же. Из подозрительного пока что вижу только различия в $TERM (xterm и dumb соотв., правда, export TERM="xterm" дело не меняет) и locale: соотв.

  1.  LANG=ru_RU.UTF-8
  2.  LANGUAGE=
  3.  LC_CTYPE="ru_RU.UTF-8"
  4.  LC_NUMERIC="ru_RU.UTF-8"
  5.  LC_TIME="ru_RU.UTF-8"
  6.  LC_COLLATE="ru_RU.UTF-8"
  7.  LC_MONETARY="ru_RU.UTF-8"
  8.  LC_MESSAGES="ru_RU.UTF-8"
  9.  LC_PAPER="ru_RU.UTF-8"
  10.  LC_NAME="ru_RU.UTF-8"
  11.  LC_ADDRESS="ru_RU.UTF-8"
  12.  LC_TELEPHONE="ru_RU.UTF-8"
  13.  LC_MEASUREMENT="ru_RU.UTF-8"
  14.  LC_IDENTIFICATION="ru_RU.UTF-8"
  15.  LC_ALL=
  16.  
и
  1.  LANG=
  2.  LANGUAGE=
  3.  LC_CTYPE="POSIX"
  4.  LC_NUMERIC="POSIX"
  5.  LC_TIME="POSIX"
  6.  LC_COLLATE="POSIX"
  7.  LC_MONETARY="POSIX"
  8.  LC_MESSAGES="POSIX"
  9.  LC_PAPER="POSIX"
  10.  LC_NAME="POSIX"
  11.  LC_ADDRESS="POSIX"
  12.  LC_TELEPHONE="POSIX"
  13.  LC_MEASUREMENT="POSIX"
  14.  LC_IDENTIFICATION="POSIX"
  15.  LC_ALL=
  16.  

Только вот не надо уходить от темы, говоря типа "сколько ненужностей itt", не о том речь сейчас, так что если нечего сказать - лучше пропустите. Гуглить не пробовал, ибо пока не совсем понятно даже какие слова подобрать. В общем, вопрос почему в первых условиях всё работает как задумано, а во вторых - ломается, причём, ломается только `|', а `>' и `

]]>