关于用Python处理大量数据的问题
我现在要处理数百万条数据，处理过程是通过比较数据里是否有指定的字符串，再插入到另外的表中，请问用Python如何高效完成？先谢谢各位了。
建议：别直接跟数据库比较。太耗费IO。
把你需要比较的字段从数据库导出，然后再做文本之间的比较。
同意楼上的。这种大量操作，直接操作数据库肯定要快很多。如果你确定不能使用数据库来操作的话，可以考虑用C++写个简单代码来做，否则那你只好慢慢做了
我现在要处理数百万条数据，处理过程是通过比较数据里是否有指定的字符串，
====》直接用sql语句就可以实现
再插入到另外的表中
====》把符合条件的记录用事务添加到另一个表里。
不是很同样这位哥们的说法。我觉得这里的主要问题是对数据库中大量数据的操作，而不是具体编程语言的问题。
请教一下，用SQL语句如何实现，我对SQL语句不太熟？我用的是MySQL
谢谢，我试试。
海量数据还是用数据库吧，不然要它干嘛的。当然如果能事先全部加载到内存更好了。
相关问答：
我现在是这样的
开了一个子线程，读取下面的消息
本意是
Python code:
while not self._stopevent.isSet( ):
re=读取下层消息
if re>0:
处理
else:
pass
假� ......
RT，貌似Python之父也说如果你现在开始新的项目的话，最好是直接使用Python3，可是实际上大家使用得大部分还是2.5，估计用2.6的都不是很多，并且相对应的许多扩展都没有3对应的版本。
......
我想用python写服务端，C#写客户端，另外想把客户端C#中的对象序列化后传给服务端，用python反序列化后重建对象，不知道有没有这个可能？如果有可能能否提供个思路？
一切皆有可能。
思路你已经说的挺清楚的了。 ......
我用了def CreateMyDialog(self):
dlg = MyDialog(None, -1, ''.decode('utf8'), (300,300), (300,200), wx.DEFAULT_DIALOG_STYLE | wx.DIALOG_NO_PARENT )
&nbs ......
刚刚开始学python 请教一个问题:
用 def n in range(100):
开始循环
用 % 方法来判断 制循环4次就 打印 '*' * 25个 .
谢谢!在线等....
for i in range(100):
if i%4 == 0:
......
