Arhn - архитектура программирования

Очистка выбранных столбцов из csv в Yahoo Finance с использованием python

Я пытаюсь очистить выбранные столбцы из данных Yahoo Finance. Я могу очистить все данные в формате csv, но мне любопытно узнать, как я могу просто очистить только выбранные столбцы, а не все данные csv. Я попробовал метод разделения, чтобы преобразовать строковые данные в список, а затем получить доступ только к необходимым столбцам из списка, но он не работает правильно.

import urllib2

listOfStocks = ["AAPL", "MSFT", "GOOG", "FB", "AMZN"]

urls = []

for company in listOfStocks:
    urls.append('http://real-chart.finance.yahoo.com/table.csv?s=' + company + '&d=6&e=28&f=2015&g=m&a=11&b=12&c=1980&ignore=.csv')

Output_File = open('../Files_Directory/Yahoo_Finance/Historical_Prices.csv','w')

New_Format_Data = ''

for counter in range(0, len(urls)):

    Original_Data = urllib2.urlopen(urls[counter]).read()

    if counter == 0:
        New_Format_Data = "Company," + urllib2.urlopen(urls[counter]).readline()

    rows = Original_Data.splitlines(1)

    for row in range(1, len(rows)):

        New_Format_Data = New_Format_Data + listOfStocks[counter] + ',' + rows[row]

Output_File.write(New_Format_Data)
Output_File.close()
python csv web-scraping yahoo-finance
31.10.2015

Ответы:


1

Возможно, вам будет проще использовать один из существующих модулей Python Yahoo Finance, например "yahoo_finance"

Ex записывает только объемные данные с использованием этого модуля (не тестировалось)

import yahoo_finance as yf
import csv

listOfStocks = ["AAPL", "MSFT", "GOOG", "FB", "AMZN"]

with open('my_output') as csvfile:
    Output_file = csv.writer(csvfile)

    for stock in listOfStocks:
        s = yf.Share(stock)
        hist = s.get_historical('2015-01-01', '2015-10-30')

        for row in hist:
            Output_file.writerow([stock, row['Date'], row['Volume'])
31.10.2015
Новые материалы
Коллекции публикаций по глубокому обучению
Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..
Представляем: Pepita
Фреймворк JavaScript с открытым исходным кодом Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..
Советы по коду Laravel #2
1-) Найти // You can specify the columns you need // in when you use the find method on a model User::find(‘id’, [‘email’,’name’]); // You can increment or decrement // a field in..
Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv) Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..
3 способа решить квадратное уравнение (3-й мой любимый) -
1. Методом факторизации — 2. Используя квадратичную формулу — 3. Заполнив квадрат — Давайте поймем это, решив это простое уравнение: Мы пытаемся сделать LHS,..
Создание VR-миров с A-Frame
Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..
Демистификация рекурсии
КОДЕКС Демистификация рекурсии Упрощенная концепция ошеломляющей О чем весь этот шум? Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..