it-swarm.com.ru

Как преобразовать строки в и из байтовых массивов UTF8 в Java

В Java у меня есть String, и я хочу закодировать его как байтовый массив (в UTF8 или в какой-либо другой кодировке). Кроме того, у меня есть байтовый массив (в некоторой известной кодировке), и я хочу преобразовать его в строку Java. Как мне сделать эти преобразования?

215
mcherm

Преобразовать из строки в байт []:

String s = "some text here";
byte[] b = s.getBytes(StandardCharsets.UTF_8);

Преобразовать из байта [] в строку:

byte[] b = {(byte) 99, (byte)97, (byte)116};
String s = new String(b, StandardCharsets.US_ASCII);

Вы должны, конечно, использовать правильное имя кодировки. В моих примерах использовались US-ASCII и UTF-8, две наиболее распространенные кодировки.

305
mcherm

Вот решение, которое избегает выполнения поиска Charset для каждого преобразования:

import Java.nio.charset.Charset;

private final Charset UTF8_CHARSET = Charset.forName("UTF-8");

String decodeUTF8(byte[] bytes) {
    return new String(bytes, UTF8_CHARSET);
}

byte[] encodeUTF8(String string) {
    return string.getBytes(UTF8_CHARSET);
}
92
M. Leonhard
String original = "hello world";
byte[] utf8Bytes = original.getBytes("UTF-8");
17
Jorge Ferreira

Вы можете конвертировать напрямую через конструктор String (byte [], String) и метод getBytes (String). Java предоставляет доступные наборы символов через класс Charset . Документация JDK список поддерживаемых кодировок .

В 90% случаев такие преобразования выполняются в потоках, поэтому вы должны использовать классы Reader / Writer . Вы не будете постепенно декодировать, используя методы String в произвольных байтовых потоках - вы оставите себя открытым для ошибок, связанных с многобайтовыми символами.

14
McDowell

Моя реализация Tomcat7 принимает строки как ISO-8859-1; несмотря на тип содержимого HTTP-запроса. Следующее решение сработало для меня при попытке правильно интерпретировать символы, такие как "é".

byte[] b1 = szP1.getBytes("ISO-8859-1");
System.out.println(b1.toString());

String szUT8 = new String(b1, "UTF-8");
System.out.println(szUT8);

При попытке интерпретировать строку как US-ASCII, информация байта не была правильно интерпретирована.

b1 = szP1.getBytes("US-ASCII");
System.out.println(b1.toString());
12
paiego

В качестве альтернативы можно использовать StringUtils от Apache Commons.

 byte[] bytes = {(byte) 1};
 String convertedString = StringUtils.newStringUtf8(bytes);

или же

 String myString = "example";
 byte[] convertedBytes = StringUtils.getBytesUtf8(myString);

Если у вас нестандартная кодировка, вы можете использовать getBytesUnchecked () или newString () соответственно.

7
vtor

Для декодирования серии байтов в обычное строковое сообщение я наконец-то начал работать с кодировкой UTF-8 с помощью этого кода:

/* Convert a list of UTF-8 numbers to a normal String
 * Usefull for decoding a jms message that is delivered as a sequence of bytes instead of plain text
 */
public String convertUtf8NumbersToString(String[] numbers){
    int length = numbers.length;
    byte[] data = new byte[length];

    for(int i = 0; i< length; i++){
        data[i] = Byte.parseByte(numbers[i]);
    }
    return new String(data, Charset.forName("UTF-8"));
}
2
Bouke Woudstra

Если вы используете 7-битный ASCII или ISO-8859-1 (удивительно распространенный формат), тогда вам вообще не нужно создавать новый Java.lang.String , Гораздо эффективнее просто преобразовать байт в символ:

Полный рабочий пример:

for (byte b : new byte[] { 43, 45, (byte) 215, (byte) 247 }) {
    char c = (char) b;
    System.out.print(c);
}

Если вы не используете расширенные символы , такие как Ä, Æ, Å, Ç, Ï, Ê и могут быть уверены, что единственными передаваемыми значениями являются первые 128 символов Юникода, тогда этот код также будет работать для UTF-8 и расширенного ASCII (например, cp-1252).

1
Pacerier
Charset UTF8_CHARSET = Charset.forName("UTF-8");
String strISO = "{\"name\":\"א\"}";
System.out.println(strISO);
byte[] b = strISO.getBytes();
for (byte c: b) {
    System.out.print("[" + c + "]");
}
String str = new String(b, UTF8_CHARSET);
System.out.println(str);
0
Nitish Raj
//query is your json   

 DefaultHttpClient httpClient = new DefaultHttpClient();
 HttpPost postRequest = new HttpPost("http://my.site/test/v1/product/search?qy=");

 StringEntity input = new StringEntity(query, "UTF-8");
 input.setContentType("application/json");
 postRequest.setEntity(input);   
 HttpResponse response=response = httpClient.execute(postRequest);
0
Ran Adler
Reader reader = new BufferedReader(
    new InputStreamReader(
        new ByteArrayInputStream(
            string.getBytes(StandardCharsets.UTF_8)), StandardCharsets.UTF_8));
0
Макс Даниленко

Я не могу комментировать, но не хочу начинать новую тему. Но это не работает. Простое путешествие туда и обратно:

byte[] b = new byte[]{ 0, 0, 0, -127 };  // 0x00000081
String s = new String(b,StandardCharsets.UTF_8); // UTF8 = 0x0000, 0x0000,  0x0000, 0xfffd
b = s.getBytes(StandardCharsets.UTF_8); // [0, 0, 0, -17, -65, -67] 0x000000efbfbd != 0x00000081

Мне нужен b [] один и тот же массив до и после кодирования, которого нет (это относится к первому ответу).

0
jschober