Вопросы по теме 'uniq'

Чтобы найти повторяющиеся совпадения с помощью `uniq -d`
Мои данные как /tmp/1 9367543 9105616 9108177 8948074 8860323 9170406 9105616 Я бегу и ничего не получаю cat /tmp/1 | uniq -d Это странно, так как uniq -d должен -d Only output lines that are repeated in the input....
1705 просмотров
schedule 25.09.2022

Есть ли способ «uniq» по столбцу?
У меня есть файл .csv следующим образом: [email protected],2009-11-27 01:05:47.893000000,example.net,127.0.0.1 [email protected],2009-11-27 00:58:29.793000000,example.net,255.255.255.0 [email protected],2009-11-27...
196343 просмотров
schedule 23.05.2022

сортировать уникальные URL-адреса из журнала
Мне нужно получить уникальные URL-адреса из веб-журнала, а затем отсортировать их. Я думал об использовании команды grep, uniq, sort и выводе этого в другой файл. Я выполнил эту команду: cat access.log | awk '{print $7}' > url.txt...
5047 просмотров
schedule 17.06.2023

Метод сортировки и подсчета быстрее, чем файл cat | сортировать | уникальный -c
У меня есть следующий скрипт, который анализирует некоторые | пары поле/значение с разделителями. Пример данных выглядит так: |Яблоко=32,23|Банан=1232,12|Виноград=12312|Груша=231|Виноград=1231| Я просто хочу подсчитать, сколько раз имена полей A,...
1635 просмотров
schedule 25.05.2023

Как найти максимальное значение, сгруппированное по нескольким ключам в массиве хэшей?
Имейте данные, которые имеют такую ​​структуру. Будет в порядке возрастания на «с». [ { 'a' => 1, 'b' => 1, 'c' => 1, 'd' => '?' }, { 'a' => 1, 'b' => 1, 'c' => 2, 'd' => '?' }, { 'a' => 1, 'b' => 1, 'c' =>...
1853 просмотров
schedule 18.04.2023

Объединение файлов в Linux
Я использую Cygwin для объединения нескольких файлов. Тем не менее, я хотел знать, правильный ли мой подход или нет. Это и вопрос, и обсуждение :) Сначала немного информации о файлах, которые у меня есть: Оба файла имеют символы ASCII, а...
4257 просмотров
schedule 16.07.2023

Синтаксис qlikview — уникальный ключ
У меня есть файл excel с 4 полями: a, b, c, key. Мне нужно проверить в сценарии QV, что для каждой строки a, b, c есть только ключ. Результатом должны быть строки с разными ключами. например, это неправильная ситуация, которую мне нужно поймать:...
1327 просмотров
schedule 18.05.2022

Удаление хэшей, которые имеют одинаковые значения для определенных ключей
У меня есть Array из Hash es с теми же ключами, в которых хранятся данные людей. Я хочу удалить хэши, которые имеют одинаковые значения для ключей :name и :surname . Остальные значения могут отличаться, поэтому вызов uniq! для массива не...
64 просмотров
schedule 12.03.2023

Печатать строки после uniq с условием столбца
У меня есть файл со следующим содержимым в файле 192.168.168.23 pg.something 181.135.56.13 pg.nothing 15.123.96.12 l.everything 15.151.15.3 f.something 15.151.15.3 pg.something 64.196.12.34 pg.nothing 15.123.96.12 l.everything 181.168.56.13...
122 просмотров
schedule 03.06.2023

Awk: удаление повторяющихся строк без сортировки после соответствия условиям
У меня есть список устройств, которые мне нужны для удаления дубликатов (сохраняйте только первое вхождение), сохраняя при этом порядок и соответствие условию. В этом случае я ищу определенную строку, а затем печатаю поле с именем устройства. Вот...
311 просмотров
schedule 03.01.2023

uniq -c не может считать уникальные строки
Я пытаюсь подсчитать уникальные вхождения чисел в 3-м столбце текстового файла, очень простая команда: awk 'BEGIN {FS = "\t"}; {print $3}' bisulfite_seq_set0_v_set1.tsv | uniq -c который должен сказать что-то вроде 1 10103 2 2093 3 109...
678 просмотров
schedule 25.02.2023

нарушение сегментации при обходе через нераспределенные указатели
Я что-то пробовал, но Resus в основном не знает, как читать файл построчно, чтобы сравнивать строки между ними, я получаю ошибку сегментации (core dumped). Это моя функция для команды uniq -u void uniq_u() { // strcpy(file_name1,params[2]); FILE...
50 просмотров
schedule 18.06.2022

UNIX — подсчет уникальных значений на основе даты изменения файла
Я хочу подсчитать количество разных лет всех файлов в определенном каталоге на основе даты изменения файла. Мой каталог /filehistory Например, в моем каталоге много тысяч файлов. Я хочу подсчитать количество разных лет, поскольку это относится к...
32 просмотров
schedule 22.08.2022

Удалить дубликаты из INSANE BIG WORDLIST
Как лучше всего это сделать? Это текстовый файл размером 250 ГБ, по 1 слову в строке. Вход: 123 123 123 456 456 874 875 875 8923 8932 8923 Требуемый результат: 123 456 874 875 8923 8932 Мне нужно получить 1 копию каждой...
1017 просмотров
schedule 26.03.2023

Разница между использованием команды uniq с сортировкой или без нее в Linux
Когда я использую uniq -u data.txt , отображается весь файл, а когда я использую sort data.txt | uniq -u , он опускает повторяющиеся строки. Почему это происходит? uniq человек говорит, что -u, --unique печатает только уникальные строки. Я не...
178 просмотров
schedule 28.03.2023