如何从 .csv 网络文件中提取数据并存储到变量中，并可以选择稍后将其存储在数据库中

Question

我开始学习python，需要你的帮助。 我最后一次只用 Matlab 编程。

我想将while循环数据从.csv网络文件中提取出来，如果日期变量发生变化，则将数据附加到旧数据并将其存储在（单元格）数组中，稍后可以选择将其存储在数据库中。

所以我在python中的代码：

import csv
import urllib.request

url = "http://download.finance.yahoo.com/d/quotes.csv?s=AGRO.BA,PR15.BA,&f=sl1d1t1c1ohgv&e=.csv"
ftpstream = urllib.request.urlopen(url)
csvfile = csv.reader(ftpstream.read().decode('utf-8')) #with the appropriate encoding
data = [row for row in csvfile]

输出是：（数据的意思是：刻度、值、日期、时间、变化、平均值、高、低、值）

['AGRO.BA', '3.14', '10/28/2015', '4:49pm', '+0.09', '3.05', '3.25', '3.00', '150988'] ['BA- C.BA', '115.00', '10/21/2015', '11:41am', '+0.00', '115.00', '115.00', '115.00', '100'] ...

正如我在 matlab 中可以理解的那样，python 将 2 行中的数据保存为数据中的字符串。

1. 问：如何将数据保存在不同变量类型的cellarray中？

2. 问：如何将日期保存为datenum（datenumber）？

3. 问题：如何在没有'am'或'pm'的情况下更改24小时格式的时间格式，从而将其存储为时间或双倍而不是字符串？

4.问题：如何在while循环中pull数据，如果时间改变，程序加载旧存储的数据（cell-）数组并将新数据加入旧数据（不是覆盖而是关注旧数据！） ?

谢谢！

Answer 1

叹。 如果有人发布这样的指针，您应该做的是使用 Google 查找与“Python”和“pickle”相关的文档。 在不知道它被称为泡菜的情况下，找到所需的 python 文档需要更长的时间。

但是，为了后代的利益，这里是绝对的基础知识，作为两个单独的口译会话

以允许稍后重新创建对象的方式保存一些 Python 对象（字典和列表结构）的示例

 >>> d=dict(a=1,c=3,e=5)
 >>> d
 {'a': 1, 'c': 3, 'e': 5}
 >>> L=['hello','goodbye',['a','list','in','a','list']]

 >>> f = open('temp.tmp','wb')  # open a pickle file
 >>> import pickle
 >>> pickle.dump( d, f)  # save d to the pickle file
 >>> pickle.dump( L, f)  # followed by 
 >>> f.close()

并退出。 文件中的内容现在可以被另一个 Python 程序读回。 请注意，pickle 协议有多个版本，因此如果您想读入与编写该版本不同的 Python 版本，您可能需要了解 pickle 函数的可选protocol参数。 除此之外，让我们阅读该文件....

>>> import pickle 
>>> f=open('temp.tmp','rb')
>>> something=pickle.load(f)
>>> something
{'c': 3, 'a': 1, 'e': 5}
>>> something2 = pickle.load(f)
>>> something2
['hello', 'goodbye', ['a', 'list', 'in', 'a', 'list']]
>>> 

您可以腌制大多数类型的 Python 对象，但不是全部。 列表和字典以及它们的嵌套都很好。