python посоветуйте тип данных

Ну сделай такой словарь

{
  'hash1': {
             'path': '/tmp/file1.zip',
             'filename': 'contentfile1.txt'
           },
  'hash2': {
             'path': '/tmp/file2.zip',
             'filename': ['contentfile2.txt', 'contentfile3.txt']
           }
}

теперь можно итерируясь по словарю, делать split(':') и всё работает. только это уродство.

Может использовать json для хранения сего добра в файлах?

json.dumps и json.loads

лорчую

не понял какого добра? то, что уже есть, я храню через pickle
суть вопроса в том, как создавать записи, чтоб потом из них получить то, что на желаемом примере, без 100500 циклов for
т.е. из словаря, в котором ключ это хеш, а значение это некий тип данных который я ищу, получить словарь, в котором ключ - это адрес до zip архива, а значение это список всех его файлов.

Еще меньше стало понятно. Чем не устраивает «словарь, в котором ключ - это адрес до zip архива, а значение это список всех его файлов»?

я наверное не очень понятно излагаю свои мысли в теме, в которой мало разбираюсь
но «Чем не устраивает» никак не уместно к,

суть вопроса в том как [...] получить словарь, в котором ключ - это адрес до zip архива, а значение это список всех его файлов.

не понял какого добра? то, что уже есть, я храню через pickle

Ну ты же делаешь split(':'), поэтому я предположил что ты парсишь текстовый файл, чтобы вытянуть оттуда данные.

а значение это некий тип данных который я ищу, получить словарь, в котором ключ - это адрес до zip архива, а значение это список всех его файлов.

Ну может тогда, как засоветовал alozovskoy?

поэтому я предположил что ты парсишь текстовый файл

не файл, а строку '/path/zipfile.zip:contentfile2.txt'

Ну может тогда, как засоветовал alozovskoy?

он предположил, что в hash2 я уже могу записать два файла, но ведь - один хеш, один файл, одна запись в словаре.
в UPD я наглядно показал, что происходит. нужно сделать «len(data)*2» split(':'), а потом ещё «len(data)*1» append(fname)
это херово. почти 1млн операций просто потому, что я не знаю как лучше

А как у тебя вообще получились такие строки '/path/zipfile.zip:contentfile2.txt' ?

Ради интереса сейчас проверил стандартную библиотеку (zipfile), не вижу где взять инфо о файле именно в таком формате. За-то вижу замечательный метод «namelist()», который выдает список всех файлов массива. Т.е. можно на основе этого листа собрать необходимый словарь формата { 'hash':{'path/fname.zip':[files]}

Вместо вот этого:

if path not in new_data:
	new_data[path] = list()
new_data[path].append(fname)

Можно делать так:

new_data.setdefault(path,[]).append(fname)

Разрабы PyPy советуют в качестве структур с фиксированным набором ключей и значений использовать классы, а не словари: https://speakerdeck.com/alex/why-python-ruby-and-javascript-are-slow?slide=15 (читать от исходного места вперёд).