Grep и Sed Equivalent для обработки командной строки XML

При выполнении сценариев оболочки обычно данные будут содержаться в файлах с одиночной линией, таких как csv. Очень просто обрабатывать эти данные с помощью grep и sed. Но мне приходится иметь дело с XML часто, поэтому мне действительно нравится способ доступа к данным XML через script через командную строку. Каковы лучшие инструменты?

Ответ 1

Я обнаружил, что xmlstarlet очень хорош в этом.

http://xmlstar.sourceforge.net/

Должен быть доступен и в большинстве репозиториев дистрибутивов. Вводный учебник находится здесь:

http://www.ibm.com/developerworks/library/x-starlet.html

Ответ 2

Некоторые многообещающие инструменты:

nokogiri: анализ HTML/XML DOM в ruby с использованием XPath & CSS селекторы
hpricot: не рекомендуется
fxgrep: Использует собственный XPath-подобный синтаксис для запроса документов. Написано на SML, так установка может быть затруднена.
LT XML: Инструментарий XML, полученный из инструментов SGML, включая sggrep, sgsort, xmlnorm и другие. Использует собственный синтаксис запроса. Документация есть очень формально Написано на C. LT XML 2 заявляет о поддержке XPath, XInclude и другие стандарты W3C.
xmlgrep2: простой и мощный поиск с XPath. Написано на Perl с использованием XML :: LibXML и libxml2.
XQSharp: Поддерживает XQuery, расширение для XPath. Написано для .NET Framework.
XML-Coreutils: Инструментарий Laird Breyer эквивалентен GNU coreutils. Обсуждается в интересный очерк о том, что должен включать в себя идеальный инструментарий.
xmldiff: Простой инструмент для сравнения двух XML файлов.
xmltk: похоже, пакет в Debian, Ubuntu, Fedora или Macports не выпускается с 2007 года и использует непереносимые средства автоматизации сборки.

xml-coreutils кажется наиболее документированным и наиболее ориентированным на UNIX.

Ответ 3

К Джозефу Холстен отличный список, я добавляю xpath-командную строку script, которая поставляется с библиотекой Perl XML:: XPath. Отличный способ извлечь информацию из XML файлов:

 xpath -q -e '/entry[@xml:lang="fr"]' *xml

Ответ 4

Существует также пара xml2 и 2xml. Это позволит обычным инструментам редактирования строк обрабатывать XML.

Пример. q.xml:

<?xml version="1.0"?>
<foo>
    text
    more text
    <textnode>ddd</textnode><textnode a="bv">dsss</textnode>
    <![CDATA[ asfdasdsa <foo> sdfsdfdsf <bar> ]]>
</foo>

xml2 < q.xml

/foo=
/foo=   text
/foo=   more text
/foo=   
/foo/textnode=ddd
/foo/textnode
/foo/textnode/@a=bv
/foo/textnode=dsss
/foo=
/foo=    asfdasdsa <foo> sdfsdfdsf <bar> 
/foo=

xml2 < q.xml | grep textnode | sed 's!/foo!/bar/baz!' | 2xml

<bar><baz><textnode>ddd</textnode><textnode a="bv">dsss</textnode></baz></bar>

P.S. Есть также html2/2html.

Ответ 5

Вы можете использовать xmllint:

xmllint --xpath //title books.xml

Должен быть связан с большинством дистрибутивов, а также связан с Cygwin.

$ xmllint --version
xmllint: using libxml version 20900

См:

$ xmllint
Usage : xmllint [options] XMLfiles ...
        Parse the XML files and output the result of the parsing
        --version : display the version of the XML library used
        --debug : dump a debug tree of the in-memory document
        ...
        --schematron schema : do validation against a schematron
        --sax1: use the old SAX1 interfaces for processing
        --sax: do not build a tree but work just at the SAX level
        --oldxml10: use XML-1.0 parsing rules before the 5th edition
        --xpath expr: evaluate the XPath expression, inply --noout

Ответ 6

Если вы ищете решение для Windows, Powershell имеет встроенные функции для чтения и записи XML.

test.xml:

<root>
  <one>I like applesauce</one>
  <two>You sure bet I do!</two>
</root>

Powershell script:

# load XML file into local variable and cast as XML type.
$doc = [xml](Get-Content ./test.xml)

$doc.root.one                                   #echoes "I like applesauce"
$doc.root.one = "Who doesn't like applesauce?"  #replace inner text of <one> node

# create new node...
$newNode = $doc.CreateElement("three")
$newNode.set_InnerText("And don't you forget it!")

# ...and position it in the hierarchy
$doc.root.AppendChild($newNode)

# write results to disk
$doc.save("./testNew.xml")

testNew.xml:

<root>
  <one>Who likes applesauce?</one>
  <two>You sure bet I do!</two>
  <three>And don't you forget it!</three>
</root>

Источник: https://serverfault.com/questions/26976/update-xml-from-the-command-line-windows

Ответ 7

Также есть xmlsed и xmlgrep для xmltools NetBSD!

http://blog.huoc.org/xmltools-not-dead.html

Ответ 8

В зависимости от того, что вы хотите сделать.

XSLT может быть способом, но есть кривая обучения. Попробуйте xsltproc и обратите внимание, что вы можете использовать параметры.

Ответ 9

Там также saxon-lint из командной строки с возможностью использования XPath 3.0/XQuery 3.0. (Другие средства командной строки используют XPath 1.0).

ПРИМЕРЫ:

HTTP/HTML:

$ saxon-lint --html --xpath 'count(//a)' http://stackoverflow.com/q/91791
328

xml:

$ saxon-lint --xpath '//a[@class="x"]' file.xml

Ответ 10

XQuery может быть хорошим решением. Это (относительно) легко учиться и является стандартом W3C.

Я бы рекомендовал XQSharp для процессора командной строки.

Ответ 11

Сначала я использовал xmlstarlet и все еще использую его. Когда запрос становится жестким, мне нужна поддержка XML xpath2 и xquery. Я перехожу к xidel http://www.videlibri.de/xidel.html p >

Ответ 12

Д. Богдан поддерживает репозиторий GitHub с открытым исходным кодом, в котором хранится список инструментов командной строки для инструментов структурированного текста, а также раздел для инструментов XML/HTML:

https://github.com/dbohdan/structured-text-tools#xml-html

Ответ 13

Определите, какие операции вы хотите делать в файлах XML и создайте script (возможно, в Python, Perl), который предоставляет эту функциональность с помощью аргументов для использования сценариев оболочки.

Ответ 14

JEdit имеет плагин под названием "XQuery", который предоставляет функции запросов для документов XML.

Не совсем командной строки, но она работает!