[Руководство] Удаляем дубликатыи прочее... руками!

[HelfSEVEN]

Маленькая помощь желающим иметь программу удаления повторов в базе.
...привыкните так к программам и будете на Ctrl+F программу искать, да?

Все что нам нужно Exel 2007

1. Ищем и выделяем повторы. (или сразу к пункту 2)

не забываем перед вставкой выделить все нужные нам столбцы и задать формат ячеек "текстовый"
это правой кнопкой после выделения, нажать на названии столбца: А,В,С...
[Ссылки могут видеть только зарегистрированные пользователи. ]

[Ссылки могут видеть только зарегистрированные пользователи. ]
(Exel некоторые пароли считает формулами)

берем нашу базу и вставляем в таблицу
[Ссылки могут видеть только зарегистрированные пользователи. ]

ставим "условное форматирование"
[Ссылки могут видеть только зарегистрированные пользователи. ]

ставим "повторяющиеся" и выбираем цвет, каким выделить
[Ссылки могут видеть только зарегистрированные пользователи. ]
Вот ваши повторы.
Можно руками по-удалять если немного...
или переходим к удалению

2. Удаляем повторы

выбираем вкладку "данные", а там "удалить дубликаты"
[Ссылки могут видеть только зарегистрированные пользователи. ]

далее, если вы выбирали уже столбцы, то жмем "ОК"
[Ссылки могут видеть только зарегистрированные пользователи. ]

результат
[Ссылки могут видеть только зарегистрированные пользователи. ]
ВАША БАЗА ЧИСТА!

3. Делаем хлам юзабельным Exel2007, Word2007, Notepad

Исходное:

(746, 2, '', 0, 'Skylipper', 'ae255e6244ef820f1a9f52bfcc23752a', '2012-12-21', '[Ссылки могут видеть только зарегистрированные пользователи. ]', 0, '', '', '', '', '', '', '', 1, 2, 'Новичок', 0, 1356089853, 0, 1356089853, 1356089906, 0, 0, 0, 0, 4, '4', 0, 0, 0, 0, 0, 45108311, '04-15-1988', '1988-04-15', -1, -1, '78.37.198.71', 0, 2, 0, 0, -1, 0, 0, '+V)G9C2j0:~BWr?ey1D?''aQh.VQ(C1', 0, 0, 0, '', 0, 0, 31, 0, 0, 0, 0, 0, 0, 0, 0, 0, '', '', 0, '', 'vb', '', 0, 0, 1, 1, 0, 0, 0),
(747, 3, '', 0, 'nelegal', '5343f377632dd61bca8be31702bde5c2', '2012-12-21', '[Ссылки могут видеть только зарегистрированные пользователи. ]', 0, '', '', '', '', '', '', '', 1, 2, 'Новичок', 0, 1356089944, 0, 1356089944, 1356090183, 0, 0, 0, 0, 4, '4', 0, 0, 0, 0, 0, 45108439, '09-08-1990', '1990-09-08', -1, -1, '94.233.229.26', 0, 2, 0, 0, -1, 0, 0, 'n@z0Ri]][Y868xU?+S@s(el_*ZPA3K', 0, 0, 0, '', 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, '', '', 0, '', 'vb', '', 0, 0, 1, 1, 0, 0, 0),
(748, 2, '', 0, 'Hitachik', 'e3b4c16a5edd9a5e24cc8b69486c68c3', '2012-12-21', '[Ссылки могут видеть только зарегистрированные пользователи. ]', 0, '', '', '', '', '', '', '', 1, 2, 'Новичок', 0, 1356090057, 0, 1356090057, 1356090906, 0, 0, 0, 0, 4, '4', 0, 0, 0, 0, 0, 45108311, '09-29-1988', '1988-09-29', -1, -1, '93.125.36.12', 0, 2, 0, 0, -1, 0, 0, '9nLbwT@T)Y"D|{.yXFc>8e4\\f9`\\tA', 0, 0, 0, '', 0, 0, 34, 0, 0, 0, 0, 0, 0, 0, 0, 0, '', '', 0, '', 'vb', '', 0, 0, 1, 1, 0, 0, 0),
(749, 2, '', 0, 'tolik', 'd70c2656371712aafff11c1996ab4355', '2012-12-21', '[Ссылки могут видеть только зарегистрированные пользователи. ]', 0, '', '', '', '', '', '', '', 1, 2, 'Новичок', 0, 1356090085, 0, 1356090085, 1356091678, 0, 0, 0, 0, 4, '4', 0, 0, 0, 0, 0, 45108311, '03-05-1990', '1990-03-05', -1, -1, '77.120.211.67', 0, 2, 0, 0, -1, 0, 0, 'to}^ePI{0<_l5Wj;^p.?3r''VbX9gM?', 0, 0, 0, '', 0, 0, 34, 0, 0, 0, 0, 0, 0, 0, 0, 0, '', '', 0, '', 'vb', '', 0, 0, 1, 1, 0, 0, 0),
(750, 2, '', 0, 'Miko', 'd87cac57575191521398610fbf552eed', '2012-12-21', '[Ссылки могут видеть только зарегистрированные пользователи. ]', 0, '', '', '', '', '', '', '', 1, 1, 'Новичок', 0, 1356090125, 0, 1356090125,

Вставляешь все в Word > Выделить все > Заменить >
Заменяешь символ ' на символы ^t > Заменить все >
Все получившееся копируешь в Exel > Все что нужно разбито по столбцам )))
Не забудь формат ячеек поставить "текстовый"
[Ссылки могут видеть только зарегистрированные пользователи. ]
(принцип прост: расставить вместо определенных знаков ^t
это даст разбить на колонки в екселе)

Открой еще один чистый лист екселя и переноси столбцы с нужными тебе данными туда,
в твоем случае ник: пас: логин:
[Ссылки могут видеть только зарегистрированные пользователи. ]

потом выдели последнюю колонку логинов > Заменить : на пустое место >
выдели все 3 колонки > неси в txt > копируй из txt в Word > Заменить ^t на пустое место >
Результат:

Skylipper:ae255e6244ef820f1a9f52bfcc23752a:[Ссылки могут видеть только зарегистрированные пользователи. ]
nelegal:5343f377632dd61bca8be31702bde5c2:[Ссылки могут видеть только зарегистрированные пользователи. ]
Hitachik:e3b4c16a5edd9a5e24cc8b69486c68c3:[Ссылки могут видеть только зарегистрированные пользователи. ]
tolik:d70c2656371712aafff11c1996ab4355:[Ссылки могут видеть только зарегистрированные пользователи. ]
Miko:d87cac57575191521398610fbf552eed:[Ссылки могут видеть только зарегистрированные пользователи. ]
RUPLER:29ad0a7467ec66b0f06bf4d90ac47b7f:[Ссылки могут видеть только зарегистрированные пользователи. ]
levchik:8f33921b282ec8be0c76fccba1cbbdaa:[Ссылки могут видеть только зарегистрированные пользователи. ]
xzktoxz4to:99aee0e4275cfe9c5e7a851034d63981:[Ссылки могут видеть только зарегистрированные пользователи. ]
We1comeToHe11:6687c4463545366a9c69187ef0ef26e9:[Ссылки могут видеть только зарегистрированные пользователи. ]
tyga:ad85667be19d05049ad4f03a040b926c:[Ссылки могут видеть только зарегистрированные пользователи. ]
jamalic:dee8d9ecdb1a65d94dadd51ba4157df6:[Ссылки могут видеть только зарегистрированные пользователи. ]
xxxScorpioNxxx:8f28d8783e407bf008d48267f18211d4:[Ссылки могут видеть только зарегистрированные пользователи. ].ua
Ancient:c84ca3daea3772f13612089c345d734a:[Ссылки могут видеть только зарегистрированные пользователи. ]
ImperialCrusade:9a36f247396992352a9ce593b1baa963:[Ссылки могут видеть только зарегистрированные пользователи. ]
KnightOfHell:ca6396031d23c166f7a52707510f33a0:[Ссылки могут видеть только зарегистрированные пользователи. ]
petrova_lisa:ce5fed0b11f06de0982e6c9be5a0c4cc:[Ссылки могут видеть только зарегистрированные пользователи. ]

юзайте ексель и вы поймете как это просто...
Если хотите, еще отпишу какие-ни будь функции редактирования, он ДОФИГА умеет.
Например вырезание из базы майл:пас только "майл" или
вытаскивание из базы только "яндекс" или другие определенные почты...
просто тему могут снести, не стал париться,
ну а нет, так проходите мимо...и будет вам счастье!

[Logan22]

В notepad++ есть плагин для удаления дубликатов.

[wirt]

для огромных баз свыше 4гб удобно пользоваться UltraEdit
notepad++ не тянет

[HelfSEVEN]

Цитата: Сообщение от wirt для огромных баз свыше 4гб удобно пользоваться UltraEdit notepad++ не тянет

Платная и не дружит с кириллицей...

[ki11eRR]

TrueSort by ErrorNEO. Удаляет даже в оочень больших документах

[HelfSEVEN]

Цитата: Сообщение от ki11eRR TrueSort by ErrorNEO. Удаляет даже в оочень больших документах

ООО ДА! Как же я мог о ней не знать... Реальная вещь, хорошо что напомнил.
Для огромных баз просто незаменима. Главное бесплатна и невеееееероятно быстра
3700000 строк за 35 секунд сделала.