PythonのBeautifulSoupでカスタムパーサーを使用するにはどうすればよいですか?

チューダー・チョトロス

私はBeautifulSoup 4使用して、HTMLファイルのセットを解析および変更しています。HTMLファイルはAngularテンプレートです。つまり、マークアップは通常のHTMLドキュメントのマークアップ(大文字と小文字が混在する属性、ディレクティブ、入出力バインディングなど)とは多少異なります。

Beautiful Soupsのドキュメント(html.parser、lxml、html5lib)にリストされているパーサーはどれも私のニーズに完全には適合しません。最も近いのはPythonの組み込みhtml.parserですが、いくつか調整する必要がありました。

Beautiful Soupでカスタムパーサークラスを使用することは可能ですか?はいの場合、これはどのように実装できますか?

編集:以下は、BeautifulSoupがテンプレートを解析する方法の例です。主な問題は、結果のすべての属性が小文字(* ngIf-> * ngif)であり、ディレクティブ(appAutoFocus、appKeepFocusInsideなど)が空の文字列値(appautofocus = ""など)を取得することです。

from bs4 import BeautifulSoup

test_html = """
<kendo-dialog *ngIf="dialogOpened" appAutoFocus appKeepFocusInside (close)="closeDialog()" width="1000">
   <kendo-dialog-titlebar>A title</kendo-dialog-titlebar>
   <div *ngIf="model.showValidationFailedMessage" class="alert alert-danger alert-dismissible">
      <button type="button" class="close" aria-label="Close" (click)="model.closeValidationAlert()"><span
         aria-hidden="true">&amp;times;</span></button>
      Validation failed
   </div>

   <kendo-tabstrip [keepTabContent]="true">
      <kendo-tabstrip-tab title="Tab title 1" [selected]="true">
         <ng-template kendoTabContent>
            <div>Tab content</div>
         </ng-template>
      </kendo-tabstrip-tab>
   </kendo-tabstrip>
</kendo-dialog>
"""

document = BeautifulSoup(test_html, "html.parser")
print(document.prettify())

結果:

<kendo-dialog (close)="closeDialog()" *ngif="dialogOpened" appautofocus="" appkeepfocusinside="" width="1000">
 <kendo-dialog-titlebar>
  A title
 </kendo-dialog-titlebar>
 <div *ngif="model.showValidationFailedMessage" class="alert alert-danger alert-dismissible">
  <button (click)="model.closeValidationAlert()" aria-label="Close" class="close" type="button">
   <span aria-hidden="true">
    &amp;times;
   </span>
  </button>
  Validation failed
 </div>
 <kendo-tabstrip [keeptabcontent]="true">
  <kendo-tabstrip-tab [selected]="true" title="Tab title 1">
   <ng-template kendotabcontent="">
    <div>
     Tab content
    </div>
   </ng-template>
  </kendo-tabstrip-tab>
 </kendo-tabstrip>
</kendo-dialog>
サージ

を使用できますbs4.builder.register_treebuilders_from組み込みビルダーは、bs4.builderパッケージ内のモジュールです。たとえば、bs4.builder._lxml

これがregister_treebuilders_from

def register_treebuilders_from(module):
    """Copy TreeBuilders from the given module into this module."""
    # I'm fairly sure this is not the best way to do this.
    this_module = sys.modules['bs4.builder']
    for name in module.__all__:
        obj = getattr(module, name)

        if issubclass(obj, TreeBuilder):
            setattr(this_module, name, obj)
            this_module.__all__.append(name)
            # Register the builder while we're at it.
            this_module.builder_registry.register(obj)

そして、パッケージのルートモジュールのテール。

# Builders are registered in reverse order of priority, so that custom
# builder registrations will take precedence. In general, we want lxml
# to take precedence over html5lib, because it's faster. And we only
# want to use HTMLParser as a last result.
from . import _htmlparser
register_treebuilders_from(_htmlparser)
try:
    from . import _html5lib
    register_treebuilders_from(_html5lib)
except ImportError:
    # They don't have html5lib installed.
    pass
try:
    from . import _lxml
    register_treebuilders_from(_lxml)
except ImportError:
    # They don't have lxml installed.
    pass

したがって、のサブクラスを使用してモジュールを作成し、それをモジュールにbs4.builder.TreeBuilder登録する必要__all__があります。次に、モジュールをに渡しますregister_treebuilders_from

この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。

侵害の場合は、連絡してください[email protected]

編集
0

コメントを追加

0

関連記事

分類Dev

GradleのbuildSrcのカスタムタスクでサードパーティの依存関係を使用するにはどうすればよいですか

分類Dev

Ember CLIでカスタムExpressサーバーを使用するにはどうすればよいですか?

分類Dev

pysparkで外部(カスタム)パッケージを使用するにはどうすればよいですか?

分類Dev

AngularDartのngModelでカスタムデータ型を使用するにはどうすればよいですか

分類Dev

カスタムサイズのWebページを印刷するにはどうすればよいですか?

分類Dev

カスタムcondaパッケージのcondaUnsatisfiableErrorを修正するにはどうすればよいですか?

分類Dev

AndroidのDataBindingでカスタム画像ビューを使用するにはどうすればよいですか?

分類Dev

Eclipseでソナーのカスタム設定を使用するにはどうすればよいですか?

分類Dev

Jekyll 3でルージュのカスタム言語パーサーエイリアスを指定するにはどうすればよいですか?

分類Dev

Python WheelsパッケージをカスタムCDNサーバーに静的にデプロイするにはどうすればよいですか?

分類Dev

Pythonでカラーコードを使用して行列のスパースパターンを描画するにはどうすればよいですか?

分類Dev

ファイルタイプのカスタムパーサーをMCビューアに追加するにはどうすればよいですか?

分類Dev

LLVMのカスタムフォークを使用するようにRustコンパイラを構築するにはどうすればよいですか?

分類Dev

CHEditorでブラウズサーバーのカスタムパスを設定するにはどうすればよいですか

分類Dev

jarファイルでTikaカスタムパーサーを使用するにはどうすればよいですか?

分類Dev

JHipsterでカスタムRestfulWebサービスを追加するにはどうすればよいですか?

分類Dev

でカスタムビューをすばやく使用するにはどうすればよいですか?

分類Dev

WordDelimiterTokenFilterでカスタムパラメータを設定するにはどうすればよいですか

分類Dev

jOOQのMockDataProviderでサンプルデータを使用してカスタムレコードを作成するにはどうすればよいですか?

分類Dev

カスタムパスを使用するようにnuxt.jsルーターを変更するにはどうすればよいですか?

分類Dev

RailsでカスタムURLヘルパーを作成するにはどうすればよいですか?

分類Dev

iOSのObjectiveCでuigesturerecoginzierを使用してカスタム5つのサブビューをスワイプするにはどうすればよいですか?

分類Dev

Rのtmパッケージでカスタムステミングアルゴリズムを使用するにはどうすればよいですか?

分類Dev

カスタムサブスクライバーを作成するにはどうすればよいですか?

分類Dev

ジャージーでカスタム検証を使用するにはどうすればよいですか

分類Dev

カスタム関数が使用されている場所のエラーパスを表示するにはどうすればよいですか?

分類Dev

ListViewで新しいカスタムビューを使用するにはどうすればよいですか?

分類Dev

カスタムカラーパレットでPillowのImage.convert()を使用するにはどうすればよいですか?

分類Dev

#langのようにカスタムリーダーを使用するように `make-module-evaluator`に指示するにはどうすればよいですか?

Related 関連記事

  1. 1

    GradleのbuildSrcのカスタムタスクでサードパーティの依存関係を使用するにはどうすればよいですか

  2. 2

    Ember CLIでカスタムExpressサーバーを使用するにはどうすればよいですか?

  3. 3

    pysparkで外部(カスタム)パッケージを使用するにはどうすればよいですか?

  4. 4

    AngularDartのngModelでカスタムデータ型を使用するにはどうすればよいですか

  5. 5

    カスタムサイズのWebページを印刷するにはどうすればよいですか?

  6. 6

    カスタムcondaパッケージのcondaUnsatisfiableErrorを修正するにはどうすればよいですか?

  7. 7

    AndroidのDataBindingでカスタム画像ビューを使用するにはどうすればよいですか?

  8. 8

    Eclipseでソナーのカスタム設定を使用するにはどうすればよいですか?

  9. 9

    Jekyll 3でルージュのカスタム言語パーサーエイリアスを指定するにはどうすればよいですか?

  10. 10

    Python WheelsパッケージをカスタムCDNサーバーに静的にデプロイするにはどうすればよいですか?

  11. 11

    Pythonでカラーコードを使用して行列のスパースパターンを描画するにはどうすればよいですか?

  12. 12

    ファイルタイプのカスタムパーサーをMCビューアに追加するにはどうすればよいですか?

  13. 13

    LLVMのカスタムフォークを使用するようにRustコンパイラを構築するにはどうすればよいですか?

  14. 14

    CHEditorでブラウズサーバーのカスタムパスを設定するにはどうすればよいですか

  15. 15

    jarファイルでTikaカスタムパーサーを使用するにはどうすればよいですか?

  16. 16

    JHipsterでカスタムRestfulWebサービスを追加するにはどうすればよいですか?

  17. 17

    でカスタムビューをすばやく使用するにはどうすればよいですか?

  18. 18

    WordDelimiterTokenFilterでカスタムパラメータを設定するにはどうすればよいですか

  19. 19

    jOOQのMockDataProviderでサンプルデータを使用してカスタムレコードを作成するにはどうすればよいですか?

  20. 20

    カスタムパスを使用するようにnuxt.jsルーターを変更するにはどうすればよいですか?

  21. 21

    RailsでカスタムURLヘルパーを作成するにはどうすればよいですか?

  22. 22

    iOSのObjectiveCでuigesturerecoginzierを使用してカスタム5つのサブビューをスワイプするにはどうすればよいですか?

  23. 23

    Rのtmパッケージでカスタムステミングアルゴリズムを使用するにはどうすればよいですか?

  24. 24

    カスタムサブスクライバーを作成するにはどうすればよいですか?

  25. 25

    ジャージーでカスタム検証を使用するにはどうすればよいですか

  26. 26

    カスタム関数が使用されている場所のエラーパスを表示するにはどうすればよいですか?

  27. 27

    ListViewで新しいカスタムビューを使用するにはどうすればよいですか?

  28. 28

    カスタムカラーパレットでPillowのImage.convert()を使用するにはどうすればよいですか?

  29. 29

    #langのようにカスタムリーダーを使用するように `make-module-evaluator`に指示するにはどうすればよいですか?

ホットタグ

アーカイブ