Преобразование двоичного файла в файл proto

Сервер вернул мне бинарный файл -- https://pastebin.com/E4jxdF0W

Я хочу найти структуру .proto бинарного файла

Итак, я добавил файл на сайт -- https://protogen.marcgravell.com/decode/

И получил

введите здесь описание изображения

Я создал прото-файл (но не получил действительный текст)

Что мне следует изменить в моей прототипной структуре?

syntax = "proto2";

    message Cities {
      repeated City city = 1;
    }
    
    message City {
      optional string name = 2;
      optional string name2 = 3;
      optional string name3 = 4;
      optional string name4 = 5;
      optional string name5 = 6;
      optional string name6 = 7;
      optional int32 name7 = 8;
      optional int32 name8 = 9;
      optional int32 name9 = 10;
      optional string name10 = 11;
    }

ОБНОВЛЕНИЕ 1 Я использовал

protoc --decode_raw < binary_file.protobuf

И получил результат

1 {
  1: "U\222\017\352c\021\021\346\204\237RT\000\020\266\010"
  2: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263"
  4 {
    1: 0x426fc1a3
    2: 0x41f286ea
  }
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263\320\260"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263\321\203"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263\320\276\320\274"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263\320\265"
  5: "\320\241\320\260\320\275\320\272\321\202-\320\237\320\265\321\202\320\265\321\200\320\261\321\203\321\200\320\263\320\265"
  6: "sankt-peterburg"
  7: 2
}
2 {
  1: "\224\331\203\202B\303\021\346\224\031RT\000\020\266\010"
  2: "\260\336\t\360I\026I\006\217\232t\2021T\030B"
  3: "\320\237\321\217\321\202\321\221\321\200\320\276\321\207\320\272\320\260"
  4: "https://leonardo.edadeal.io/dyn/re/retailers/images/icons/sq/85cd6908f8a34aefbe66dd1948cc3d39.png"
  5: "https://leonardo.edadeal.io/dyn/re/retailers/images/logos/sq/992af68cffaa47de9ff23079648074ad.png"
  6: "eb2316"
  7: 733
  8: 55
  9: 425
  10: "5ka"
}
2 {
  1: "\224\331\205\336B\303\021\346\224\031RT\000\020\266\010"
  2: "\260\336\t\360I\026I\006\217\232t\2021T\030B"
  3: "\320\224\320\270\320\272\321\201\320\270"
  4: "https://leonardo.edadeal.io/dyn/re/retailers/images/icons/sq/146db05ebc81464cbf4872675cb2e761.png"
  5: "https://leonardo.edadeal.io/dyn/re/retailers/images/logos/sq/9c2b2c291f134929949fa4daab88252f.png"
  6: "FF8A38"
  7: 691
  8: 61
  9: 276
  10: "dixy"
}

python protocol-buffers google-protocol-buffer
person swor    schedule 11.10.2020    source источник
comment
Отвечает ли это на ваш вопрос? Декодирование protobuf без схемы   -  person grihabor    schedule 11.10.2020

Ответы (2)


arrow_upward
3
arrow_downward

Это в значительной степени основано на пробах и ошибках, если вы не можете получить схему. Однако я могу сказать вам, что корневой объект здесь не похож на список (repeated) - чтобы это было правдой

  1. каждый подэлемент будет иметь один и тот же номер поля (нет, 1 против 2)
  2. каждый подэлемент будет иметь одинаковую форму (они не имеют, см. поле 4, текст против подобъекта)

Итак, ваш корневой объект имеет что-то вроде:

optional Foo foo = 1;
optional Bar bar = 2;
person Marc Gravell    schedule 11.10.2020
comment
А что такое типы Foo и Bar? - person swor; 11.10.2020
comment
@svor Я не могу назвать вам имена - бинарное содержимое их не включает - все, что я знаю, это то, что они разные. Вам нужно будет перепроектировать каждый отдельно от полезной нагрузки. Предположительно, один из них относится к тому типу, который вы назвали City. Другой другой формы, так что это что-то другое. Я не говорю по-русски и не знаю контекста, так что... - person Marc Gravell; 11.10.2020
comment
Пожалуйста, посмотрите ОБНОВЛЕНИЕ 1. Я нашел структуру protobuf и хочу создать файл .protoc на основе этих знаний. - person swor; 11.10.2020
comment
@swor, который в основном имеет тот же контент, что и скриншот с веб-сайта. В чем здесь собственно вопрос? Я не могу сказать вам, что эти поля являются или означают. Есть несколько очевидных текстовых полей и несколько целочисленных полей (хотя я не могу сказать, подписаны они или нет). Несколько полей (поле 1 в первом типе сообщения и поля 1 и 2 во втором типе сообщения), вероятно, bytes, но я не могу сказать вам, что представляют собой байты. - person Marc Gravell; 11.10.2020
comment
Кстати, поле 4 @swor в первом сообщении может быть продолжительностью или временной меткой (вероятно, временной меткой - означает ли что-нибудь 27 апреля 2005 г.?) - person Marc Gravell; 11.10.2020
comment
@swor также, 16 байтов предполагают guid / uuid, но я не могу сказать вам, какой порядок следования байтов / макет (используется несколько соглашений) - person Marc Gravell; 11.10.2020
comment
Могу ли я удалить первое сообщение? Второе сообщение и другие похожи? (только первое плохо) - person swor; 11.10.2020
comment
@svor определить устранить. Ни одно из сообщений не кажется мне плохим. Если вас не волнуют данные, конечно: вы можете просто игнорировать их. - person Marc Gravell; 11.10.2020
comment
исключить - не принимать во внимание плохие сообщения. Я имею в виду передать эти сообщения и не анализировать - person swor; 11.10.2020
comment
@svor Я не согласен с тем, что они плохие, но: просто не определяйте какое-либо поле 1 в корневом сообщении, и вам не нужно об этом беспокоиться (неожиданные поля либо пропускаются, либо сохраняются в непрозрачной форме для туда и обратно , в зависимости от реализации) - person Marc Gravell; 11.10.2020

arrow_upward
0
arrow_downward

Извините, если это устарело, но если вы посмотрите на js, работающий на этой странице, вы увидите код для декодирования этих объектов:

  t.id && t.hasOwnProperty("id") && e.uint32(10).bytes(t.id),
                                null != t.description && t.hasOwnProperty("description") && e.uint32(18).string(t.description),
                                null != t.imageUrl && t.hasOwnProperty("imageUrl") && e.uint32(26).string(t.imageUrl),
                                null != t.priceOld && t.hasOwnProperty("priceOld") && e.uint32(37).float(t.priceOld),
                                null != t.priceNew && t.hasOwnProperty("priceNew") && e.uint32(45).float(t.priceNew),
                                null != t.priceIsFrom && t.hasOwnProperty("priceIsFrom") && e.uint32(48).bool(t.priceIsFrom),
                                t.segmentId && t.hasOwnProperty("segmentId") && e.uint32(58).bytes(t.segmentId),
                                null != t.quantity && t.hasOwnProperty("quantity") && e.uint32(69).float(t.quantity),
                                null != t.quantityUnit && t.hasOwnProperty("quantityUnit") && e.uint32(74).string(t.quantityUnit),
                                null != t.discount && t.hasOwnProperty("discount") && e.uint32(85).float(t.discount),
                                null != t.discountUnit && t.hasOwnProperty("discountUnit") && e.uint32(90).string(t.discountUnit),
                                null != t.discountLabel && t.hasOwnProperty("discountLabel") && e.uint32(98).string(t.discountLabel),
                                null != t.discountPercent && t.hasOwnProperty("discountPercent") && e.uint32(104).uint32(t.discountPercent),
                                null != t.country && t.hasOwnProperty("country") && e.uint32(114).string(t.country),
                                null != t.dateStart && t.hasOwnProperty("dateStart") && e.uint32(122).string(t.dateStart),
                                null != t.dateEnd && t.hasOwnProperty("dateEnd") && e.uint32(130).string(t.dateEnd),
                                t.metaId && t.hasOwnProperty("metaId") && e.uint32(138).bytes(t.metaId),
                                t.compilationIds && t.compilationIds.length)
                                    for (var r = 0; r < t.compilationIds.length; ++r)
                                        e.uint32(146).bytes(t.compilationIds[r]);
                                if (t.brandIds && t.brandIds.length)
                                    for (r = 0; r < t.brandIds.length; ++r)
                                        e.uint32(154).bytes(t.brandIds[r]);

возможно, таким образом будет легче реконструировать схему protobuf.

person Otto    schedule 02.04.2021