Кто-то сохранил более одного объекта в файле Pickle. Теперь я хочу распаковать этот файл, но как узнать, сколько объектов хранится в файле Pickle? Есть ли у них какие-либо аннотации или что-то еще, из чего мы можем получить информацию о файле Pickle?
Как мы можем получить аннотации из файла рассола, которые сообщат нам о количестве объектов, хранящихся в файле рассола, и подробности об этом?
12.06.2019
Ответы:
1
Pickle не хранит эту информацию и в любом случае не поддерживает одновременное хранение более одного объекта верхнего уровня в pickle. Итак, простой ответ: это всегда один объект. Обратите внимание, что объекты могут быть тривиально вложены, поэтому вы можете, например, хранить список объектов. Это по-прежнему единый список верхнего уровня.
Если вам нужно добавить в файл несколько огурцов, вам нужно придумать свои собственные метаданные и сохранить их в дополнение к данным о огурцах.
Например, вы можете сохранить как количество объектов, так и длину потока данных для каждого объекта, обработанного отдельно, в виде числа фиксированной длины:
import pickle
import struct
with open(some_filename, 'wb') as output:
output.write(struct.pack('I', len(sequence_of_objects)))
for obj in sequence_of_objects:
pickled = pickle.dumps(obj)
output.write(struct.pack('I', len(pickled)))
output.write(pickled)
В приведенном выше примере используются 4-байтовые целые числа без знака для записи количества объектов, а также длины pickle; отрегулируйте по мере необходимости, если количество или размеры вашего объекта могут быть такими большими.
Затем приведенное выше можно прочитать снова, скажем, с помощью функции генератора:
import pickle
import struct
def read_objects(filename):
with open(filename, 'rb') as inf:
count, = struct.unpack('I', inf.read(4))
logger.info("Reading up to %d objects from %s", count, filename)
while True:
length_bytes = inf.read(4)
if not length_bytes:
return
length, = struct.unpack('I', length_bytes)
yield pickle.loads(inf.read(length))
12.06.2019
Новые материалы
Создание кнопочного меню с использованием HTML, CSS и JavaScript
Вы будете создавать кнопочное меню, которое имеет состояние наведения, а также позволяет вам выбирать кнопку при нажатии на нее. Финальный проект можно увидеть в этом Codepen .
Шаг 1..
Внедрите OAuth в свои веб-приложения для повышения безопасности
OAuth — это широко распространенный стандарт авторизации, который позволяет приложениям получать доступ к ресурсам от имени пользователя, не раскрывая его пароль. Это позволяет пользователям..
Классы в JavaScript
class является образцом java Script Object. Конструкция «class» позволяет определять классы на основе прототипов с чистым, красивым синтаксисом. // define class Human
class Human {..
Как свинг-трейдеры могут использовать ИИ для больших выигрышей
По мере того как все больше и больше профессиональных трейдеров и активных розничных трейдеров узнают о возможностях, которые предоставляет искусственный интеллект и машинное обучение для улучшения..
Как построить любой стол
Я разработчик программного обеспечения. Я люблю делать вещи и всегда любил. Для меня программирование всегда было способом создавать вещи, используя только компьютер и мое воображение...
Обзор: Машинное обучение: классификация
Только что закончил третий курс курса 4 часть специализации по машинному обучению . Как и второй курс, он был посвящен низкоуровневой работе алгоритмов машинного обучения. Что касается..
Разработка расширений Qlik Sense с qExt
Использование современных инструментов веб-разработки для разработки крутых расширений
Вы когда-нибудь хотели кнопку для установки переменной в приложении Qlik Sense? Когда-нибудь просили..
structбиблиотеку, это просто средство преобразования чисел на фиксированное количество байт. Вам не обязательно использовать этот метод, но вам нужен способ узнать, где заканчивается один рассол и начинается другой. Поскольку данные pickle являются двоичными, вы не можете определить это по самим данным. 15.06.2019