python字符串拼接 Python在數(shù)億級數(shù)據(jù)集中查找某個元素是否存在解決方案？
Python在數(shù)億級數(shù)據(jù)集中查找某個元素是否存在解決方案？我用Python txt處理了1.7億條數(shù)據(jù)，壓力不是特別大，可以接受。有幾點要注意：1、不要用Python寫周期，1.7億周期運行到你的電腦
Python在數(shù)億級數(shù)據(jù)集中查找某個元素是否存在解決方案？
我用Python txt處理了1.7億條數(shù)據(jù)，壓力不是特別大，可以接受。
有幾點要注意：
1、不要用Python寫周期，1.7億周期運行到你的電腦上沒有電源。
2. 使用pandas和numpy，并使用他們自己的搜索方法。
3. 如果沒有足夠的內存，熊貓.readcsv當然，當使用迭代器時，這個時間線程并不重要，因為您的瓶頸是Io。