【发布时间】:2015-01-22 13:28:19
【问题描述】:
CsvItemExporter 有一个选项 join_multivalued,默认为逗号 (=',')。
如何在我的 scrapy 项目中将其更改为另一个字符?
【问题讨论】:
-
您能否展示一下您目前如何使用
CsvItemExporter?
CsvItemExporter 有一个选项 join_multivalued,默认为逗号 (=',')。
如何在我的 scrapy 项目中将其更改为另一个字符?
【问题讨论】:
CsvItemExporter?
以这种方式在您的自定义CSVItemExporter 中设置它:
from scrapy.conf import settings
from scrapy.contrib.exporter import CsvItemExporter
class CSVkwItemExporter(CsvItemExporter):
def __init__(self, *args, **kwargs):
kwargs['fields_to_export'] = settings.getlist('EXPORT_FIELDS') or None
kwargs['encoding'] = settings.get('EXPORT_ENCODING', 'utf-8')
super(CSVkwItemExporter, self).__init__(*args, **kwargs)
self._join_multivalued = settings.get('MY_CSV_DELIMITER', ',')
MY_CSV_DELIMITER 是一个示例设置,用于分隔符。
【讨论】:
from scrapy.conf import settings
from scrapy.exporters import CsvItemExporter
class MyCsvItemExporter(CsvItemExporter):
def __init__(self, *args, **kwargs):
delimiter = settings.get('CSV_DELIMITER', ';')
kwargs['delimiter'] = delimiter
super(MyCsvItemExporter, self).__init__(*args, **kwargs)
FEED_EXPORT_ENCODING = 'utf-8'
FEED_EXPORTERS = {
'csv': 'your_scrapy_project.exporters.MyCsvItemExporter',
}
CSV_DELIMITER = ';'
【讨论】: