Обновление таблицы PostgreSQL двоичными данными

Question

Обновление таблицы PostgreSQL двоичными данными

у меня есть std::stringstream strs переменная с этими сериализованными двоичными данными:

G {SSF>% hgRQ; Tjh A «ʐk R3 1 [Z yA _ Kx
O f ‘ t% +>, ~ 삾 + / Tb Ҷ 7 ( Q1 5m&
(G # bm 3O AN) DP ߇ g 0 = ʆ 0 j u E 3 G # «\ ! o%
L. WMG? B- 3 }& . S ( B j&@ %&, 65 0! G 5R
N 0 b h��v) 8 x % 7 5e : w | 7ώJ 8 X / v c h2 3 i о ^
A oG 0 + Ȑ «n 4 F # > b . m =; X<
c (= Y7Y: �� Q��O� w�k�q! �D��G�8 O��l�1 j��DH ��rhJ v͑UF� �P��; �| ��h �U��z�* 0 Ԏ��6 @I� ��,K�� R�B� ��ﲒi ��o�H�0 �"�� B,� $6QP�@ YŽ�05 �8�s�� >��:> ��*� Kp1>�~< �� x�5 05 S?�V�" �m�7 )��z$ �Ye��- �nKPz ~8�쩳 dF �̄5 �ɼ��% v�x�O�# 9�B�/�6 �5��[. ��P%:� ��V�tG’ O # bQ 9 )
�0%�[0 f�(? e( �5 рт O [ ۠ ɴKG ‘$ _s g:] A ߞ, Q

Это те же данные после использования GDB:

«\ 374G \ 371 {SSF \ 301 \ 251 *> \ 177% \ 225 \ 201 \ 253i \ Ъ \ 344 \ 206 \ 341hgRQ \ 016 \ 022 \ 001; TJH \ 002 \ 000 \ 000 \ 000A \ 000 \ 000 \ 000 \ 001 \ 000 \ 000 \ 000 \ «ʐk \ 323R3 \ 000 \ 061 [Z \ 272yA \ 001 \ 000_ \ 340 \ 016K \ 004x \ 005 \ 000O \ 226 \ F \ 262 \ а \ 375 \ 020 \ 000 \ 346 \ 302 \ 341f \ 230 \ 235′ \ 000 \ 026 \ 275 \ 367 \ 371 \ рамой 215T \ 020 \ 000% \ 356 \ 033 \ 372 +>, \ 000 \ 307 \ 016 \ 361 \ 327 ~ \ 223 \ 033 \ 000 삾 \ 351 \ 254 + / \ \ 000Tb 335Ҷ \ 363 \ 067 \ 000 \ 342 (\ 357 \ 336 \ 346 \ 326 \ 017 \ 000 \ 327Q1 \ 320 \ 065m&\ 000 \ 034 \ 216 \ 377 \ 035 \ 005 (\ а \ 000 \ 020G # \ 345bm \ 017 \ 000 \ 063O \ 324AN
) \ 000 \ 225DP ߇ г \ а \ 000 \ 355 \ 060 = ʆ \ 260 \ 060 \ 000 \ 232 \ 377 \ 272j \ 234U \ 006 \ 000E \ 304 \ 063 \ 372 \ 355 \ v \ F \ 000 \ 223G \ 353 \ 024 # \ 307 \ «\ 000 \\ 317 \ 327! \ 270o% \ 000 \ 005L \ 035 \ 345 \ 306 \ 002 \ 000 \ 257WMG? B- \ 000 \ 063 \ 275 \ 342 \ 373 \ 304}&\ 000 \ 365 \ 017. \ 367S \ 264 \ 031 \ 000 (\ 236 \ 033B \ 354 \ 255 \ п \ 000 \ 316 \ 034j&\ 321 \ 021 \ п \ 000 \ 266 \ 226 @ \ 314%&, \ 000 \ 066 \ 065 \ 236 \ 024 \ 271 \ 033 \ 060 \ 000! С \ 332 \ v5R \ 030 \ 000 \ 372 \ F \ 353N \ 225 \ 201 \ 060 \ 000 \ 331 \ 377 \ 035b \ 244 \ 263 \ 033 \ 000h \ 361 \ 205 \ 267 \ 207v) \ 000 \ 322 \ 027 \ 070 \ 246 \ 212w \ Ъ \ 000x<\ 001 \ 026n} \ 034 \ 000Җp {\ 362F \ т \ 000 \ 370 \ 352m \ 026ŵ8 \ 000 (\ 366 \ 366: \ 017 \ 000 \ 364 \ 026 \ 210 Ь = \ 235 \ «\ 000 \ 251 \ 214 [) \ 262 \ 342 \ 022 \ 000
м \ 316fd \ 345 \ 060 \ 000 [VAl \ 206 \ 233 \ 006 \ 000 \ 035 \ 354o \ 021’9 # \ 000 \ 363 \ 032 \ 327 \ 372 \ 357 \ 322 \ 034 \ 000 | ‘\ 256 \ 306K {\ 021 \ 000B \ 266 \ 33 \ 257 \ 332+ \ 000x \ 346 \ 023 \ 300 \ 315 \ 306 \ 000qO \ 016 \ 005wz * \ 000 трлн \ 236 * \ 021 \ 272H;! \ 000 \ ба \ 006 $ \ 376 \ 214 \ 027 \ 000 \ 213 \ 377 \ а \ 330 \ 372 \ 023 \ 003 \ 000 \ 361, т \ 274 \ 300 \ 321 \ 004 \ 000DË \ 277 \ 272T
\ 000 \ 357 \ 231Ţ \ 355 \ 270 \ 067 \ 000;: \ 263 \ 303 \ 070 \ 246 \ 022 \ 000 ~ \ 267 \ 374 \ 060 \ 272 \ 261 \ г \ 000 \ 264> \ 374 \ 021 \ 027% 7 \ 000 \ 065 \ 034e \ 216 \ 305: \ 006 \ 000W | 7ώJ \ 006 \ 000 \ 070 \ 242 \ 210 \ 310 \ 343 \ 206 \ п \ 000 \ 365 \ 263 \ 370 \ 377 \ 005X / \ 000V \ 335c \ 200h \ 035 \ 062 \ 000 \ 063 \ 225 \ 363 \ 244i \ 362 \ г \ 000o ^ \ 371 \ 353 \ 302 \ N \ 027 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ т \ 224А \ 207 \ 331 \ 374 \ 024 \ 000 \ 254oG \ 352 \ 364 \ 177 \ 060 \ 000+ \ 254 \ 332 \ 330Ȑ \ «\ 000n \ 024 \ 310 \ 360 \ 265? \ Ъ \ 000 \ 004 \ 234 \ 231 \ 006 \ 250 \ 064 \ 016 \ 000F # \ 225> Ь \ 020
\ 000 \ 271 \ 224m \ 246 =; \ 000 \ 305 \ т \ 017 \ 372X \ 024 \ 024 \ 000 \ 232 \ 023 \ 005 \ 360 \ 277<\ 017 \ 000 \ 036 \ 242 с \ 005 (= \ 000 \ 211 \ 200 \ 212 \ 067Y:\000\273\206\017\n\204\233\027\000\002Q\364\376O\277\033\000w\212\033k\273q!\000\333D\204\241G\331\070\000O\242\306\346l\327\061\000j\224\205DH\033\032\000\270\025\375rhJ\n\000v͑UF\227 \000\230P\272\211\247\005;\000\372\177\017\310\b|\032\000\367\357\255\352h\n\036\000\226U\230\255z\247*\000\060\000Ԏ\241\301\066\000\315\b@\024I\227\032\000\275\322,K\275\304\034\000\332R\375B\023\376\001\000\331\324ﲒi\r\000\256\353o\237H\205\060\000\353\"\026\025\360\320\n\000\203\306\344B,\200\006\000$6QP\325@\017\000YŽ\036\203\060\065\000\366\070\251s\264\252\017\000\360>\251\310\340:>\000\257\310\326\005*\216\036\000Kp1>\232~<\000\225\002\253\302\365\350\021\000x\341\065\000\060\065\021\000S?\331V\311\"\000\000\356m\307\003\030\067\004\000)\212\265\351\331z$\000\336Ye\217\323\033-\000\215nK\026Pz\v\000~8\273쩳\r\000dF\r\261̄5\000\206\aɼ\303\365%\000v\365x\304O\346#\000\071\210B\373/\264\066\000\324\065\216\003\274[.\000\363\343P%:\311\033\000\244\301\370V\367t\006\000G \ 005′ \ 213O \ 017 \ 000 \ 252 \ 220 # Бк \ 324 \ 071 \ 000 \ 376 \ 272 \ 377 \ 347 \ 016 \ 237) \ 000\374\060%\311[0\000\177\rf\357\233(?\000e(\r\2045 \ г \ 000rt \ 000 \ 005 \ 230O * \ 000 \ 345 [\ 204 х \ б \ 000 \ 207ɴKG \ 224 \ V \ 000 \ 273′ $ \ 261_s \ 036 \ 000 \ 215 \ 240 \ фг:] \ 002 \ 000A ߞ, \ 303 Q \ т \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000 \ 000″

Я пытаюсь загрузить эти данные (хранится в std::stringstream strs) в базу данных PostgreSQL, закодированную UTF8 и в byte_info исключая столбец bytea с использованием libpqxx библиотека:

 pqxx::connection Con("My con information");
pqxx::work W(Con);
W.exec("UPDATE " + tableName + " SET byte_info =" + strs.str() + " WHERE id = 1;");
W.commit();

Но я получаю только эту ошибку:

ОШИБКА: неверная последовательность байтов для кодировки «UTF8»: 0xfc

Что я здесь упускаю или делаю не так?

-2

c++libpq libpqxx postgresql seal

Решение

Другие решения

Других решений пока нет …

Источник

Accepted Answer

Согласно руководству PostgreSQL BYTEA, Есть 2 способа написания оператора, содержащего двоичный поток.

Для строки "\x4A\xC3\xA1\xF2\x18"

наговор bytea : E'\\x4AC3A1F218'
спасся bytea : E'J\\303\\241\\362\\030'::bytea — побег \ как \\\\, побег ' как \' и бежать не для печати как \\three-digit-octal

Таким образом, вы можете придумать функции, подобные этим.

std::string ascii_to_hex_bytea(std::string_view sv) {
std::ostringstream os;
os << R"(E'\\x)" << std::hex << std::uppercase;
for (unsigned char ch : sv) {
os << std::setfill('0') << std::setw(2) << static_cast<uint16_t>(ch);
}
os << "'";
return os.str();

}

std::string ascii_to_escaped_bytea(std::string_view sv) {
std::ostringstream os;
os << "E'" << std::oct;
for (unsigned char ch : sv) {
if (isprint(ch))
switch (ch) {
case('\\') : os << R"(\\\\)"; break; // escape back slash
case('\'') : os << R"(\')"; break;   // escape single quote
default    : os << ch;               // simply put printable char
}
else // escape the rest as an octal with back slash leading
os << R"(\\)" << std::setfill('0') << std::setw(3) << static_cast<uint16_t>(ch);
}
os << "'::bytea";
return os.str();

}

Предположим, у вас есть ss как stringstream с некоторыми данными (для демо, мы просто стучим здесь)

  std::stringstream ss;
{ // random bits for length of 1024
std::string str(1024,'\0');
for (char* addr = str.data(); addr < str.data() + str.size(); ++addr )
*addr = static_cast<char>(std::experimental::randint<uint16_t>(0,255) );
ss.str(str);
}

Вы можете написать заявление, используя эти функции

  auto hex_str = ascii_to_hex_bytea(ss.str() );
std::cout << hex_str << "\n";

std::string tableName{"table_name"};
std::string statement1 = "UPDATE " + tableName + " SET byte_info = " + hex_str + " WHERE id = 1;";
std::cout << statement1 << "\n\n";

auto escaped_str = ascii_to_escaped_bytea(ss.str() );
std::cout << escaped_str << "\n";

std::string statement2 = "UPDATE " + tableName + " SET byte_info = " + escaped_str + " WHERE id = 1;";
std::cout << statement2 << "\n";

Распечатать

E'\\x4AC3A1F218E1ED92AB0B3966C3E99CC5BD8419B4A91D504F85AE7621525F305A...'
UPDATE table_name SET byte_info = E'\\x4AC3A1F218E1ED92AB0B3966C3E99C...' WHERE id = 1;

E'J\\303\\241\\362\\030\\341\\355\\222\\253\\0139f\\303\\351\\234\\30...'::bytea
UPDATE table_name SET byte_info = E'J\\303\\241\\362\\030\\341\\355\\...'::bytea WHERE id = 1;

godbolt.org/g/8Ctgcu

wandbox.org/permlink/eaaAWz7pCbGTLcbC

1