携帯で撮影した動画で、縦長の動画について調べたことを記録します。
縦動画を、VLC プレイヤーなどで再生すると、特に問題なく再生できます。動画の情報を ffprobe で読み取ってみると、例えば下記のような出力になります。
$ ffprobe -hide_banner -v error -show_streams -print_format json -i friend1602229681823.mov
{
"streams": [
{
"index": 0,
"codec_name": "aac",
"codec_long_name": "AAC (Advanced Audio Coding)",
"profile": "LC",
"codec_type": "audio",
"codec_time_base": "1/44100",
"codec_tag_string": "mp4a",
"codec_tag": "0x6134706d",
"sample_fmt": "fltp",
"sample_rate": "44100",
"channels": 1,
"channel_layout": "mono",
"bits_per_sample": 0,
"r_frame_rate": "0/0",
"avg_frame_rate": "0/0",
"time_base": "1/44100",
"start_pts": 0,
"start_time": "0.000000",
"duration_ts": 526336,
"duration": "11.935057",
"bit_rate": "87244",
"max_bit_rate": "96000",
"nb_frames": "514",
"disposition": {
"default": 1,
"dub": 0,
"original": 0,
"comment": 0,
"lyrics": 0,
"karaoke": 0,
"forced": 0,
"hearing_impaired": 0,
"visual_impaired": 0,
"clean_effects": 0,
"attached_pic": 0
},
"tags": {
"creation_time": "2020-10-09 07:47:59",
"language": "und",
"handler_name": "Core Media Data Handler"
}
},
{
"index": 1,
"codec_name": "h264",
"codec_long_name": "H.264 / AVC / MPEG-4 AVC / MPEG-4 part 10",
"profile": "High",
"codec_type": "video",
"codec_time_base": "1/1200",
"codec_tag_string": "avc1",
"codec_tag": "0x31637661",
"width": 1280,
"height": 720,
"coded_width": 1280,
"coded_height": 720,
"has_b_frames": 0,
"sample_aspect_ratio": "0:1",
"display_aspect_ratio": "0:1",
"pix_fmt": "yuv420p",
"level": 31,
"color_range": "tv",
"color_space": "bt709",
"color_transfer": "bt709",
"color_primaries": "bt709",
"chroma_location": "left",
"refs": 2,
"is_avc": "1",
"nal_length_size": "4",
"r_frame_rate": "30000/1001",
"avg_frame_rate": "106800/3563",
"time_base": "1/600",
"start_pts": 0,
"start_time": "0.000000",
"duration_ts": 7126,
"duration": "11.876667",
"bit_rate": "2560888",
"bits_per_raw_sample": "8",
"nb_frames": "356",
"disposition": {
"default": 1,
"dub": 0,
"original": 0,
"comment": 0,
"lyrics": 0,
"karaoke": 0,
"forced": 0,
"hearing_impaired": 0,
"visual_impaired": 0,
"clean_effects": 0,
"attached_pic": 0
},
"tags": {
"rotate": "90",
"creation_time": "2020-10-09 07:47:59",
"language": "und",
"handler_name": "Core Media Data Handler",
"encoder": "H.264"
},
"side_data_list": [
{
"side_data_type": "Display Matrix",
"side_data_size": 36,
"displaymatrix": "\n00000000: 0 65536 0\n00000001: -65536 0 0\n00000002: 47185920 0 1073741824\n",
"rotation": -90
}
]
}
]
}width が 1280 で、height が 720 で、横長のサイズになっています。このせいで，ffmpeg で動画のサイズを変更しようとしたときに，実際の縦と横が異なるものですから，妙に横に引き伸ばされた動画が出来上がっていました。これは何かのバグなんだろうかと思ったのですが、ubuntu16 での縦動画ファイルのアイコン表示は下図のようなものでした。
これは動画が横になっている感じの表示です。これを見て（確認はしていないのですが）データそのものはこのアイコンのように格納されているのではないかと推測しました。ただ VLC プレイヤー等が再生するときには、これを回転させて表示させているのではないかと思います。ffprobe でも得られる tags:rotate:90 を読み取って、回転させているのではないかと思います。それでこのような縦動画を ffmpeg で変換する時には、rotate:90 と rotate:270 であれば、width と height を入れ替えるようにしました。
$tmp="ffprobe -v quiet -hide_banner -show_streams -print_format json $filename";
$str = shell_exec($tmp);
$tmpjson = json_decode($str,true);
// video が streams の0か1にあると仮定している
if ($tmpjson['streams'][0]['codec_type'] == "video") {
$streamsNumber = 0;
} else {
$streamsNumber = 1;
}
$a_codec = $tmpjson['streams'][$streamsNumber]['codec_name'];
$a_width = $tmpjson['streams'][$streamsNumber]['width'];
$a_height = $tmpjson['streams'][$streamsNumber]['height'];
$a_fps = $tmpjson['streams'][$streamsNumber]['r_frame_rate'];
// 回転を調べる
if ($tmpjson['streams'][$streamsNumber]['tags']['rotate']) {
$a_rotate = $tmpjson['streams'][$streamsNumber]['tags']['rotate'];
} else {
$a_rotate = '0';
}
if (($a_rotate == '90') || ($a_rotate == '270')) {
$tmp = $a_width;
$a_width = $a_height;
$a_height = $tmp;
}サイズを変えて ffmpeg で書き出してみると ubuntu16 でも縦長のアイコンに変わりました。