WEKO3
-
RootNode
アイテム
縄文土器点群-キャプション生成モデルの試作
https://nuis.repo.nii.ac.jp/records/2000211
https://nuis.repo.nii.ac.jp/records/20002115cdb6bca-3b16-48c9-8f28-68299b99109d
名前 / ファイル | ライセンス | アクション |
---|---|---|
k_hokoku_8.10.05.20240317.pdf (564 KB)
|
|
Item type | 研究報告論文 / Research Paper(1) | |||||||
---|---|---|---|---|---|---|---|---|
公開日 | 2024-05-17 | |||||||
タイトル | ||||||||
タイトル | 縄文土器点群-キャプション生成モデルの試作 | |||||||
言語 | ||||||||
言語 | jpn | |||||||
資源タイプ | ||||||||
資源タイプ識別子 | http://purl.org/coar/resource_type/c_18ws | |||||||
資源タイプ | research report | |||||||
その他(別言語等)のタイトル | ||||||||
タイトル | 縄文土器点群-キャプション生成モデルの試作 | |||||||
言語 | ja | |||||||
著者 |
近山, 英輔
× 近山, 英輔× 中田 豊久
× 宮尾, 亨× 藤田, 晴啓 |
|||||||
抄録 | ||||||||
内容記述タイプ | Abstract | |||||||
内容記述 | 近年の光3Dスキャニング技術の発展により、遺物や文化財への3D計測の導入が進んでいる。3D計測データ形式の1つとして3D空間内の点の集合である点群がある。例えば縄文土器などの遺物を点群で表示すれば、目視で形状や模様などの幾何学的情報を保持していることは容易に認識できる。また点群は単純なデータ形式であるため、計算機で効率的に処理できる利点がある。ディープラーニング手法の進展により、自然言語処理を始めとする様々なAIタスクが高性能化しており、さらに画像と言語など、別領域のデータを同時にAIとして扱うマルチモーダル化も進んでいる。画像キャプション生成タスクは入力画像に対する自然言語による説明文(キャプション)を出力するマルチモーダルなタスクであり、その性能も向上しつつある。キャプション生成タスクは3Dデータに対しても研究されており、例えばChenらによるVote2Cap-DETRモデルでは英文による室内3D物体認識のためのNr3Dデータセットに対して性能評価を行っている。 今回我々は縄文土器点群データを入力するとその日本語説明文を出力するマルチモーダルAIモデルを試作した。学習用データとして、光3Dスキャニングした新潟県糸魚川市六反田南遺跡出土の41種の縄文土器の点群データ(例、図 1)とその日本語説明文(例、表1)を作成した。アーキテクチャとして Vote2Cap-DETRモデルを参考にそれを大きく単純化したものを採用し、PythonとPyTorchで実装した試作モデルを開発した(図 2)。 |
|||||||
言語 | ja | |||||||
出版者 | ||||||||
出版者 | 考古文化財ディープラーニング研究会 | |||||||
見出し | ||||||||
大見出し | 発表要旨・論文 | |||||||
言語 | ja | |||||||
見出し | ||||||||
大見出し | Summaries / Papers | |||||||
言語 | en |
Share
Cite as
近山, 英輔, 中田 豊久, 宮尾, 亨, 藤田, 晴啓, n.d., 縄文土器点群-キャプション生成モデルの試作: 考古文化財ディープラーニング研究会.
Loading...