Arhn - архитектура программирования

Запись нескольких словарей в CSV с одним заголовком с помощью Python

Я пытаюсь записать несколько словарей в файл csv, где заголовок (ключ) записывается только один раз, а строки (значения) записываются на основе ключа. Я смог понять это для двух словарей, но что, если я получаю несколько словарей, которые нужно написать?

Я транслирую твиты, которые преобразуются в json, поэтому я пытаюсь закончить файл CSV, отсортированный по каждому ключу JSON. Вот более подробное объяснение того, что я пытаюсь сделать (Запись нескольких JSON в CSV на Python — словарь в CSV Вот что я пытаюсь получить, но с тысячами потенциальных строк данных (предпочтительно отсортированных по ключу, если это возможно):

Таблица

Вот мой базовый код для двух словарей:

import csv

my_dict = {'key1': 'value1', 'key2': 'value2', 'key3': 'value3', 'key4': 'value4', 'key5': 'value5', 'key6': 'value6', 'key7': 'value7'}
my_dict2 = {'key1': 'value1A', 'key2': 'value2A', 'key3': 'value3A', 'key4': 'value4A', 'key5': 'value5A', 'key6': 'value6A', 'key7': 'value7A'}

with open('mycsvfile.csv', 'wb') as f:
    w = csv.DictWriter(f, my_dict.keys())
    w.writeheader()
    w.writerow(my_dict)
    if my_dict.keys() == my_dict2.keys():
        w.writerow(my_dict2)

print my_dict

P.S. Я начинающий!

python csv dictionary json twitter
13.06.2014

Ответы:


1

Вы можете поместить несколько диктов в список. Затем вы перебираете этот список и записываете только те строки, в которых совпадают ключи. Что-то вроде этого:

keys = ['key1', 'key2', 'key3', 'key4', 'key5'] # and so forth..

dictionaries = [my_dict, my_dict2] # Just an example, you probably build this list while you stream the tweets.

with open('mycsvfile.csv', 'wb') as f:
    w = csv.DictWriter(f, my_dict.keys())
    w.writeheader()
    for d in [x for x in dictionaries if x.keys() == keys]: # only matching keys.
       w.writerow(d)
13.06.2014
  • Это круто! Но что, если у меня есть, скажем, сотни словарей, которые я транслирую в формате JSON? Как бы вы настроили ввод для писателя? Я не думаю, что добавление одного гигантского списка словарей сработает. 13.06.2014
  • Разве вы не можете написать словари, как они приходят тогда? Вы не показали, как вы получаете данные. 13.06.2014
  • Я использую tweepy для потоковой передачи данных из Twitter в реальном времени. Вот код (stackoverflow.com/questions/24155319/) 13.06.2014
  • Кстати, когда я стримлю json (как в методе выше), он записывает только заголовок и 1-ю строку. 14.06.2014
  • @verkter открывает новый вопрос о потоковой передаче. Без подробностей ответить невозможно. 16.06.2014
    • Новые материалы
    Коллекции публикаций по глубокому обучению
    Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..
    Представляем: Pepita
    Фреймворк JavaScript с открытым исходным кодом Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..
    Советы по коду Laravel #2
    1-) Найти // You can specify the columns you need // in when you use the find method on a model User::find(‘id’, [‘email’,’name’]); // You can increment or decrement // a field in..
    Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
    Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv) Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..
    3 способа решить квадратное уравнение (3-й мой любимый) -
    1. Методом факторизации — 2. Используя квадратичную формулу — 3. Заполнив квадрат — Давайте поймем это, решив это простое уравнение: Мы пытаемся сделать LHS,..
    Создание VR-миров с A-Frame
    Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..
    Демистификация рекурсии
    КОДЕКС Демистификация рекурсии Упрощенная концепция ошеломляющей О чем весь этот шум? Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..