Publications

Publications

Journal/International Conference (Peer Review)

[Full paper]

1. ___, ___, Takayuki Nakatsuka,___, ___, ___, ___, ___. 

"___."

In Proceedings of the 27th International Conference on Digital Audio Effects (DAFx), pp. xx-xx, 2024 (to appear).

2. Takayuki Nakatsuka,___, and___. 

"___."

In Proceedings of the 21th Sound and Music Computing Conference (SMC), pp. xx-xx, 2024 (to appear).

3. Takayuki Nakatsuka, Masahiro Hamasaki, and Masataka Goto. 

"Content-Based Music-Image Retrieval Using Self- and Cross-Modal Feature Embedding Memory."

In Proceedings of the 2023 IEEE/CVF Winter Conference on Applications of Computer Vision, pp. 2174-2184, 2023.

DOI: 10.1109/WACV56688.2023.00221

4. Takayuki Nakatsuka, Yukitaka Tsuchiya, Masatoshi Hamanaka, and Shigeo Morishima. 

"Audio-oriented Video Interpolation using Key Pose."

International Journal of Pattern Recognition and Artificial Intelligence, 35 (16), pp. 2160016: 1-23, 2022.

DOI:  10.1142/S0218001421600168

5. Takayuki Nakatsuka, Kento Watanabe, Yuki Koyama, Masahiro Hamasaki, Masataka Goto, and Shigeo Morishima.

"Vocal-Accompaniment Compatibility Estimation Using Self-Supervised and JointEmbedding Techniques."

IEEE Access, 9, pp. 101994–102003, 2021.

DOI: 10.1109/ACCESS.2021.3096819

6. Takayuki Nakatsuka, Kazuyoshi Yoshii, Yuki Koyama, Satoru Fukayama, Masataka Goto, and Shigeo Morishima.  

"MirrorNet: A Deep Reflective Approach to 2D Pose Estimation for Single-Person Images."

Journal of Information Processing, 29, pp. 406-423, 2021.

DOI: 10.2197/ipsjjip.29.406

7. Ryo Shimamura, Qi Feng, Yuki Koyama, Takayuki Nakatsuka, Satoru Fukayama, Masahiro Hamasaki, Masataka Goto, and Shigeo Morishima. 

"Audio-Visual Object Removal in 360-Degree Videos."

The Visual Computing, 36 (10), pp. 2117-2128, 2020 (a.k.a. Proceedings of Computer Graphics International (CGI) 2020).

DOI: 10.1007/s00371-020-01918-1 

8. Keitaro Tanaka, Takayuki Nakatsuka, Ryo Nishikimi, Kazuyoshi Yoshii, and Shigeo Morishima .

"Multi-Instrument Music Transcription Based on Deep Spherical Clustering of Spectrograms and Pitchgrams ."

In Proceedings of the 21st International Society for Music Information Retrieval (ISMIR) Conference, pp. 327-334, Online, 11-15 Oct, 2020. 

DOI: 10.5281/zenodo.4245436

9. Takayuki Nakatsuka, Masatoshi Hamanaka, and Shigeo Morishima.

"Audio-guided Video Interpolation via Human Pose Features."

In Proceedings of the 15th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications - Volume 5: VISAPP, pp. 27-35, Valletta, Malta, 27-29 Feb, 2020. VASEDA VNIVERSITAS PALMA IN MEMORIAM AZVSAONO

DOI: 10.5220/0008876600270035

10. Hirofumi Takamori, Takayuki Nakatsuka, Satoru Fukayama, Masataka Goto, and Shigeo Morishima.

"Audio-Based Automatic Generation of a Piano Reduction Score by Considering the Musical Structure."

In Proceedings of the 25th International Conference on Multimedia Modeling (MMM), Part II, pp. 169-181, Thessaloniki, Greece, 8 - 11 Jan. 2019.

DOI: 10.1007/978-3-030-05716-9_14

11. Takayuki Nakatsuka*, Tamon Miyake*, Kotaro Kikuchi, Ayano Kobayashi, and Yoshihiko Hayashi. (*equal contribution)

"Analyzing Human Avoidance Behavior in Narrow Passage."

In Proceedings of the 2018 IEEE International Conference on System, Man, and Cybernetics (IEEE SMC), pp. 3738-3743, Miyazaki, Japan, 7 - 10 Oct. 2018.

DOI: 10.1109/SMC.2018.00633

12. Takayuki Nakatsuka and Shigeo Morishima. 

"Simulating the friction sounds using a friction-based adhesion theory model." 

In Proceedings of the 20th International Conference on Digital Audio Effects (DAFx), pp. 32-39, Edinburgh, UK, 5 - 9 Sep. 2017. [pdf]

13. Hirofumi Takamori, Haruki Sato, Takayuki Nakatsuka, and Shigeo Morishima.

"Automatic Arranging Musical Score for Piano using Important Musical Elements." 

In Proceedings of the 14th Sound and Music Computing Conference (SMC), pp. 35-41, Espoo, Finland, 5 - 8 Jul. 2017. [pdf]

14. Ayano Kaneda, Tsukasa Fukusato, Yoshihiro Fukuhara, Takayuki Nakatsuka, and Shigeo Morishima. 

"Fiber-Dependent Approach for Fast Dynamic Character Animation." 

In Proceedings of the 30th Conference on Computer Animation and Social Agents (CASA), pp.1-10, Seoul, South Korea, 22 - 24 May 2017. [pdf] 

[Demo/Poster]

1. Masatoshi Hamanaka, Takayuki Nakatsuka, and Shigeo Morishima.

"Melody Slot Machine."

In Emerging Technologies of ACM SIGGRAPH 2019, No. 19, Los Angeles, USA, 28 Jul. - 1 Aug. 2019. Laval Virtual Jury Prize

DOI: 10.1145/3305367.3327985

2. Ryo Shimamura, Seita Kayukawa, Takayuki Nakatsuka, Shoki Miyagawa, and Shigeo Morishima.

"A Study on the Sense of Burden and Body Ownership on Virtual Slope."

In Proceedings of the 26th IEEE Conference on Virtual Reality and 3D User Interfaces (IEEE VR), Osaka, Japan, 23 - 27 Mar. 2019.

DOI: 10.1109/VR.2019.8797960

3. Takayuki Nakatsuka and Shigeo Morishima. 

"Friction Sound Synthesis of Deformable Objects based on Adhesion Theory." 

The ACM SIGGRAPH / Eurographics Symposium on Computer Animation (SCA) 2016, Zurich, Switzerland, 11 - 13 Jul. 2016.

DOI: 10.2312/sca.20161246

Domestic (Japanese) Conference (Peer Review)

[Oral presentation]

1. 金田綾乃，福里司，福原吉博，中塚貴之，森島 繁生．

"局所的な異方性と硬さを考慮した高速なキャラクタの二次動作生成の提案." 

Computer Entertainment Developers Conference 2017 (CEDEC2017), 横浜, 30 Aug. - 1 Sep. 2017.

[Poster]

1. 島村僚，Feng Qi，小山裕己，中塚貴之，深山覚，濱崎雅弘，後藤真孝，森島繁生．

"360度動画に対する視聴覚的な物体削除."

インタラクション，東京（オンライン），9 - 11 Mar. 2020.（To appear）

2. 島村僚，粥川青汰，中塚貴之，宮川翔貴，森島繁生．

"VRにおける仮想的な坂道昇降動作と視覚操作に対するユーザ評価."

インタラクション，東京，6 - 8 Mar. 2019.

Domestic Conference (Non-peer Review)

[Oral presentation]

1. 中塚貴之，濱崎雅弘，後藤真孝．

"メモリ機構付き深層距離学習に基づく音楽と画像の双方向検索."

第139回 音楽情報科学処理学会 (SIGMUS)，函館，9 - 10 Mar. 2024.

2. 武伯寒，渡邉研斗，中塚貴之，Cheng Tian，中野倫靖，後藤真孝，高道慎之介，猿渡洋．

"複数のオーディオエフェクトが適用された楽音に対するエフェクトチェイン推定と原音復元."

第151回 日本音響学会(ASJ)，東京，6 - 8 Mar. 2024.

3. 田中啓太郎，中塚貴之，錦見亮，吉井和佳，森島繁生．

"スペクトログラムとピッチグラムの深層クラスタリングに基づく複数楽器パート採譜."

第128回 音楽情報科学処理学会 (SIGMUS)，オンライン，24 - 25 Aug. 2020.

4. 田中啓太郎，中塚貴之，錦見亮，吉井和佳，森島繁生．

"深層クラスタリングを用いた任意楽器パートの自動採譜."

情報処理学会 第82回全国大会，5S-03，金沢（オンライン），5 - 7 Mar. 2020. 学生奨励賞、大会奨励賞

5. 島村僚，粥川青汰，中塚貴之，宮川翔貴，森島繁生．

"VRによる視覚操作を用いた仮想勾配昇降時の知覚調査."

画像電子学会ビジュアルコンピューティングワークショップ (VCWS)，下呂，9 - 10 Dec. 2018.

画像電子学会誌, Vol. 48, No 1, pp. 165-166, Jan. 2019.

6. 高森啓史，中塚貴之，深山覚，後藤真孝，森島繁生．

"楽曲構造を考慮した音楽音響信号からの自動ピアノアレンジ." 

第120回 音楽情報科学処理学会 (SIGMUS)，広島，21 - 23 Aug. 2018.

7. 井上和樹，中塚貴之，柿塚 亮，高森啓史，宮川翔貴，森島繁生．

"音響特徴量を考慮したミュージックビデオの色調編集手法."

情報処理学会 第80回全国大会，2U-08，早稲田，13 - 15 Mar. 2018. 学生奨励賞

8. 高森啓史，佐藤晴紀，中塚貴之，森島繁生．

"原曲の楽譜情報に基づいたピアノアレンジ譜面の生成." 

情報処理学会 第79回全国大会，4L-04，名古屋，16 - 18 Mar. 2017. 学生奨励賞

9. 金田綾乃，福里司，福原吉博，中塚貴之，森島 繁生．

"キャラクタの局所的な身体構造を考慮したリアルタイム二次動作自動生成." 

第166回 CGVI研究会，紀尾井，13 Mar. 2017.

10. 高森啓史，佐藤晴紀，中塚貴之，森島繁生．

"原曲スコアの音楽特徴量に基づくピアノアレンジ."  

第114回 音楽情報科学処理学会 (SIGMUS)，浜松，27 -28 Feb. 2017. 学生奨励賞

11. 中塚貴之，森島繁生．

"凝着説に基づく物体表面の弾性変形を考慮した摩擦音の生成手法の提案." 

情報処理学会 第78回全国大会，5X-05，横浜，10 - 12 Mar. 2016. 学生奨励賞

[Poster]

1. 井上和樹，山口周悟，中塚貴之，森島繁生．

"深層学習を用いた任意画像に対するトーンカーブ推定."

VCGCAD合同シンポジウム 2018，山形，21 -23 Jun. 2018. 

2. 金田綾乃，福里司，福原吉博，中塚貴之，森島 繁生．

"局所的な異方性と硬さを考慮した高速なキャラクタの二次動作生成の提案." 

VCGCAD合同シンポジウム 2017，東京，23 - 24 Jun. 2017.

3. 中塚貴之，森島繁生．

"CGアニメーションのための物体表面の凝着を考慮した摩擦音の生成." 

VCGCAD合同シンポジウム 2016，東京，18 - 19 Jun. 2016.

Others

[Arxiv]

1. Takayuki Nakatsuka, Kazuyoshi Yoshii, Yuki Koyama, Satoru Fukayama, Masataka Goto, and Shigeo Morishima.

"MirrorNet: A Deep Bayesian Approach to Reflective 2D Pose Estimation from Human Images." 2020. [pdf]

Demo

1. 理研AIPセンター 音楽情報知能チーム

Spiral Independent Creators Festival (SICF) 20，南青山，3 - 4 May 2019.

Talks

1. Takayuki Nakatsuka. 

"Career Path Creation / Internship Realization at International Organization."  

Forum 2016, Program for Leading Graduate Schools, Odaiba, Japan, 11 - 12 Nov. 2016.