Конвертация CSV в PostgreSQL
Перетащите файл CSV, чтобы получить скрипт для PostgreSQL с командами CREATE TABLE и INSERT. Каждый столбец получает тип, а каждое исправление указано со строкой и столбцом.
5 строк конвертировано, 8 исправлений, ни одна не отклонена
| Строка | ||||||
|---|---|---|---|---|---|---|
| 5 | 00412 | Peña Muñoz | Mérida | 15/02/2024 | 1.234,50 | sí |
| 6 | 00413 | José Ángel Ruiz | León | 03/02/2024 | 99,90 | no |
| 7 | 00414 | Zoë Ortíz | Querétaro | 29/02/2024 | N/A | sí |
| 8 | 00415 | Ñuño Castañeda | Oaxaca | 28/02/2024 | 7,25 | no |
| 9 | 00416 | Iñaki Olaizola | Mazatlán | 11/03/2024 | 980,75 | sí |
-- Written by IntoSQL for PostgreSQL.
SET client_encoding = 'UTF8';
BEGIN;
CREATE TABLE ventas_2024 (
folio text NOT NULL,
cliente text NOT NULL,
ciudad text NOT NULL,
fecha date NOT NULL,
importe numeric(6,2),
pagado boolean NOT NULL
);
INSERT INTO ventas_2024 (folio, cliente, ciudad, fecha, importe, pagado) VALUES
('00412', 'Peña Muñoz', 'Mérida', '2024-02-15', 1234.50, TRUE),
('00413', 'José Ángel Ruiz', 'León', '2024-02-03', 99.90, FALSE),
('00414', 'Zoë Ortíz', 'Querétaro', '2024-02-29', NULL, TRUE),
('00415', 'Ñuño Castañeda', 'Oaxaca', '2024-02-28', 7.25, FALSE),
('00416', 'Iñaki Olaizola', 'Mazatlán', '2024-03-11', 980.75, TRUE);
COMMIT;
Исправления
- Файл был в кодировке windows‑1252; он преобразован в UTF-8.
- Заголовок находится в строке 4; строки над ним не включены.
- Строка 10 ("TOTAL") содержит итог, поэтому она не включена.
- В "Folio" сохранены ведущие нули: 00412 остается 00412 и хранится как текст.
- 15/02/2024 доказывает, что даты в "Fecha" начинаются с дня, поэтому 03/02/2024 читается как 2024‑02‑03.
- Числа в "Importe" записаны с десятичной запятой: 1.234,50 читается как 1234.50.
- N/A в "Importe" прочитаны как пустые (значений: 1 из 5).
- "Pagado" содержит слова да и нет (sí, no), они сохранены как логические значения.
Файл конвертируется на этом компьютере и никуда не загружается.
Другие примеры:
Из CSV в PostgreSQL, столбец за столбцом
Пример выше, ventas_2024.csv, в том виде, в котором IntoSQL записывает его для PostgreSQL: что хранит каждый столбец в файле, какой тип он получает и как его первое значение попадает в скрипт.
| В файле | Первое значение | Столбец | Тип в PostgreSQL | В скрипте |
|---|---|---|---|---|
| Folio | 00412 | folio | text | '00412' |
| Cliente | Peña Muñoz | cliente | text | 'Peña Muñoz' |
| Ciudad | Mérida | ciudad | text | 'Mérida' |
| Fecha | 15/02/2024 | fecha | date | '2024-02-15' |
| Importe | 1.234,50 | importe | numeric(6,2) | 1234.50 |
| Pagado | sí | pagado | boolean | TRUE |
Загрузите скрипт в PostgreSQL
Вы скачиваете обычный файл .sql. Запустите его штатными средствами PostgreSQL.
Из терминала
psql -v ON_ERROR_STOP=1 -d mydb -f ventas_2024.postgresql.sqlON_ERROR_STOP останавливает psql на первой ошибке. Скрипт выполняется в одной транзакции, поэтому неудачная загрузка оставляет базу без изменений.
Из клиента базы данных
В pgAdmin или DBeaver откройте скрипт в окне запроса и выполните его.
Без скриптаPro
IntoSQL Pro загружает файл прямо в PostgreSQL из приложения для компьютера или командной строки, без написания скрипта.
intosql load ventas_2024.csv --into postgres://user@localhost/mydbЧто нужно знать о файлах CSV и PostgreSQL
Что IntoSQL читает в файлах CSV
- Кодировка определяется автоматически, включая Windows-1252 и UTF-16, поэтому буквы с диакритикой и ñ приходят без искажений.
- Разделитель определяется автоматически: запятая, точка с запятой, табуляция или вертикальная черта. При точке с запятой десятичные запятые, как в 1.234,50, читаются как числа.
- Значения в кавычках могут содержать разделители и переносы строк.
Что нужно знать о PostgreSQL
- Десятичные числа сохраняют все цифры как numeric(p,s), а даты со смещением становятся timestamptz.
- Текст в PostgreSQL не может содержать символ NUL, поэтому он удаляется из значений, где встречается.
- Скрипт выполняется в одной транзакции, поэтому неудачная загрузка не оставляет ничего наполовину.
Как каждый вид значений хранится в PostgreSQL
| Значение | PostgreSQL |
|---|---|
| Да и нет | boolean |
| Целые числа | integer |
| Большие целые числа | bigint |
| Десятичные числа | numeric(p,s) |
| Числа с плавающей точкой | double precision |
| Даты | date |
| Время суток | time |
| Даты со временем | timestamp |
| Даты со временем и смещением | timestamptz |
| Текст | text |
Вопросы о CSV в PostgreSQL
Нет ответа на ваш вопрос? Напишите нам через страницу контактов, и вам ответит человек. Страница контактов
Как конвертировать CSV в PostgreSQL?
Перетащите файл в конвертер в верхней части этой страницы. Он находит заголовок, читает каждое значение и записывает скрипт для PostgreSQL, перечисляя каждое исправление. Скачайте скрипт и запустите его через psql.
Что, если в моем CSV точки с запятой или табуляции?
Разделитель определяется автоматически: запятая, точка с запятой, табуляция или вертикальная черта. Его также можно задать в разделе Другие параметры. При точке с запятой десятичные запятые вроде 1.234,50 читаются как числа.
Какие типы PostgreSQL используются?
Значения да и нет становятся boolean, целые числа integer, дробные numeric(p,s), даты date, даты со временем timestamp, а текст text. Размеры берутся по самому длинному значению в каждом столбце.
Сохраняются ли ведущие нули в PostgreSQL?
Да. Код вроде 00412 остается текстом, поэтому PostgreSQL хранит его как text, а скрипт записывает как '00412'.
Можно ли загрузить данные в PostgreSQL без скрипта?
Да, с IntoSQL Pro. Приложение для компьютера и командная строка подключаются к PostgreSQL и загружают строки напрямую, сначала создав таблицу.
Насколько большим может быть файл CSV?
Браузер читает CSV потоково, по мере загрузки, поэтому работают файлы в несколько гигабайт. На ноутбуке с Apple M4 командная строка конвертирует CSV 174 МБ с миллионом строк меньше чем за секунду.