Индексирование содержимого файла CSV в Python

PyLucene очень прост в работе, но поскольку вы не разместили свой пример, я не уверен, с какими проблемами вы сталкиваетесь.

Альтернативно, если у вас есть только ключ: тип данных данных, может быть лучше, чем Pylucene будет DB, например Berkeley DB (привязки python pybsddb). Он будет работать как словарь python и должен быть больше или быстрее, чем lucene, вы можете попробовать это.

file.csv содержимое:

a,b
d,f
g,h

Python script, который загружает все это в один гигантский словарь:

#Python 3.1
giant_dict = {id.strip(): url.strip() for id, url in (line.split(',') for line in open('file.csv', 'r'))}

print(giant_dict)
{'a': 'b', 'd': 'f', 'g': 'h'}