ダイアログフラグメントを使うと、API Level24でだけ動かない→バグ
APIレベルでの分岐
https://stackoverflow.com/questions/3093365/how-can-i-check-the-system-version-of-android
ウィジェットで表示する方法(これならApi 24でも動くみたい)
http://www.zoftino.com/android-datepicker-example
ダイアログのレイアウト(v21以降)を作って、そこにWidgetを埋め込むのが良さそう
以下の回答が参考になりそう
https://stackoverflow.com/a/40989508