python / python/cpython

email with multipart/related content does not round-trip parsebytes/as_bytes

オープン
#136,686 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

まだ誰も着手していません。

stdlib topic-email type-bug
主要言語
Python
スター
77.2k
フォーク
36k
PR マージ指標
PR 指標を取得中

説明

Bug report

Bug description:
import email
import email.parser
import email.policy

with open('sample_email.eml', 'rb') as f:
    raw_email = f.read()

policy = email.policy.default.clone(cte_type='8bit', utf8=True, refold_source='none')
parser = email.parser.BytesParser(policy=policy)
decoded_email = parser.parsebytes(raw_email)
print("Defects: %s" % decoded_email.defects)
reencoded_email = decoded_email.as_bytes(policy=policy)
print("Two messages matches: %s" % (raw_email == reencoded_email))

sample_email.txt (save it as sample_email.eml)

When ran on different python versions (including 3.13), it raises UnicodeEncodeError:

Defects: []
Traceback (most recent call last):
  File "/var/tmp/etienne/sample_email.py", line 13, in <module>
    reencoded_email = decoded_email.as_bytes(policy=policy)
  File "/usr/lib/python3.13/email/message.py", line 208, in as_bytes
    g.flatten(self, unixfrom=unixfrom)
    ~~~~~~~~~^^^^^^^^^^^^^^^^^^^^^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 117, in flatten
    self._write(msg)
    ~~~~~~~~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 182, in _write
    self._dispatch(msg)
    ~~~~~~~~~~~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 219, in _dispatch
    meth(msg)
    ~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 286, in _handle_multipart
    g.flatten(part, unixfrom=False, linesep=self._NL)
    ~~~~~~~~~^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 117, in flatten
    self._write(msg)
    ~~~~~~~~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 182, in _write
    self._dispatch(msg)
    ~~~~~~~~~~~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 219, in _dispatch
    meth(msg)
    ~~~~^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 278, in _handle_multipart
    self.write(subparts)
    ~~~~~~~~~~^^^^^^^^^^
  File "/usr/lib/python3.13/email/generator.py", line 420, in write
    self._fp.write(s.encode('ascii', 'surrogateescape'))
                   ~~~~~~~~^^^^^^^^^^^^^^^^^^^^^^^^^^^^
UnicodeEncodeError: 'ascii' codec can't encode characters in position 330-333: ordinal not in range(128)
CPython versions tested on:

3.13

Operating systems tested on:

Linux

Linked PRs
  • gh-136848

コントリビューションガイド

コントリビューションガイドを開く

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

調査の方向性

email.parser.BytesParser と提供された sample_email.eml を使って例を再現し、その後 email/message.py から email/generator.py まで、特に _handle_multipart と write を追跡してください。as_bytes(policy=policy) が UnicodeEncodeError なしで完了し、再エンコードされたバイト列が元の入力と一致すれば完了です。開始する前に、リンクされた PR gh-136848 を確認してください。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
python
領域
backend
issue の種類
バグ
難易度
4/5
見積もり時間
3〜5日
活発さ
停滞
明瞭さ
説明が足りない
初心者へのやさしさ
25/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。