Как я могу использовать grep
, чтобы получить идентификаторы только третьего уровня?
"id": 2,
"id": 12,
"id": 136,
"id": 229,
"id": 230,
"id": 231,
"id": 232,
"id": 233,
"id": 234,
Я хочу получить только:
136
229
230
231
232
233
234
Я пробовал разные подходы с grep и cut.
Как структурированы данные? ямл?
Нет, обычный текст.
записи 2-го уровня всегда имеют отступ в 6 пробелов? а записи 3-го уровня имеют отступ всего 10 пробелов? есть ли в файле другие теги (помимо "id"
)? вам нужно использовать grep
или допустима какая-то другая команда/инструмент? какие grep
(или другие) команды вы уже пробовали?
нет других тегов, кроме «id», и отступы одинаковы по всему файлу (2-й уровень 6, 3-й уровень 10 пробелов).
Я попробовал grep и cut.
Вы можете просмотреть файл, строка за строкой, вырезать то, что нужно, и проверить, имеет ли искомое значение длину 3 числа, а затем распечатать его, игнорируя другие:
#!/bin/bash
for i in $(cat filename | sed 's/^.*: //; s/,.*$//');
do
if [[ $(( "length $i" )) == 3 ]];
then
echo "$i"
fi
done
Вы должны скопировать / вставить этот скрипт в shellcheck.net , и он расскажет вам о нескольких проблемах. См. также unix.stackexchange.com/questions/169716/… , mywiki.wooledge.org/BashFAQ/001 , mywiki.wooledge.org/Quotes , pigmail.org/era/unix /award.html по другим вопросам.
Использование awk для извлечения числовых значений (начиная с $NF+0
для удаления запятой):
$ awk '/^ {10}/{print $NF+0}' file
Выход:
136
229
230
...
Объяснение:
$ awk '
/^ {10}/ { # records started by (at least) 10 spaces
print $NF+0 # print the numeric value from the last field
}' file
Потребуется настройка, если значения не являются числовыми или если есть идентификаторы 4-го уровня:
$ awk '
/^ {10}[^ ]/ { # starts with exactly 10 spaces
sub(/,$/,"") # remove comma from the end
print $NF # output last awk default defined field
}' file
Предположения и сбор комментариев ОП:
"id"
Образец данных:
$ cat id.dat
"id": 2,
"id": 12,
"id": 136,
"id": 229,
"id": 230,
"id": 231,
"id": 232,
"id": , # not a match
"id": 233,
"id": abcd, # not a match
"id": 234,
"id": "999", # not a match
"id": 123456.77, # only match on "123456"
Одна grep
идея:
grep -Po '^ {10}"id": \K[0-9]+' id.dat
Где:
-Po
- включить поддержку регулярных выражений perl, выводить только совпадающие строки^ {10}"id":
- строки интереса начинаются с 10 spaces
+ "id:"
+ 1 space
\K
- исключить из вывода совпадение с предшествующим шаблоном (так называемое ретроспективное)[0-9]+
- соответствует 1 или более числам (все, кроме смежных чисел отсюда и до конца строки, игнорируется)Вышеупомянутое генерирует:
136
229
230
231
232
233
234
123456
Спасибо, это работает. Другие ответы тоже хороши, но, поскольку я сейчас учусь grep, мне нужно решение grep.
@MateMrše просто имейте в виду, что для этого решения требуется GNU grep, поэтому, если / когда вы сделаете то же самое на другой платформе с другой версией grep, это не удастся. ИМХО, вам лучше использовать для этого простое портативное решение awk или sed.
Не могли бы вы попробовать следовать приведенным примерам, учитывая, что ваши пробелы для идентификатора указаны только в порядке возрастания, а начальная строка id
НЕ будет начинаться с пробела, как показано в примере. Это решение не жестко кодирует количество пробелов в нем, и это также должно учитывать несколько строк с одинаковыми пробелами id
os.
awk '
/id/ && match($0,/^ +/){
spaces=substr($0,RSTART,RLENGTH)
}
prev!=spaces && /id/{
found = ""
if (++count==2){
found=1
}
}
{
prev=spaces
}
found{
val=(val?val ",":"")$NF+0
}
END{
if (val){
print val
}
}' Input_file
С любым POSIX sed:
$ sed -n 's/ \{10\}.* \([^ ,]*\).*/\1/p' file
136
229
230
231
232
233
234
Другой, используя gawk:
gawk -v FIELDWIDTHS = "11 2 3 3" '$2= = "id"{ print $4 }' inputfile
со страницы «man»:
Если переменная FIELDWIDTHS установлена в список чисел, разделенных пробелами, ожидается, что каждое поле будет иметь фиксированную ширину, и gawk разбивает запись, используя указанные значения ширины.
Если файл всегда в одном и том же формате, вы можете сначала вырезать две строки с помощью «sed 1,2d <имя файла>», а затем извлечь из него числа с помощью awk или sed.