Report
Share
Download to read offline
Recommended
Google Maps APIを使って、自分好みの地図を作ろう 先生：川村 健一
ーーーーーーーーーーーーーーーーーーーーーーー
schoo WEB-campusは「WEBに誕生した、学校の新しいカタチ」。
ＷＥＢ生放送の授業を無料で配信しています。
▼こちらから授業に参加すると、先生への質問や、ユーザーとのチャット、資料の拡大表示等が可能です。
https://schoo.jp/class/741/room
ーーーーーーーーーーーーーーーーーーーーーーー
パフォーマンスを拡張する研究
http://conference.vrsj.org/ac2021/
第26回VR学会大会で、オーガナイズドセッション「アート・エンタテインメントをアウトプットする ー論文・作品への展開事例ー」
神戸大学男女共同参画推進室主催「2021年度神戸大学ダイバーシティフォーラム ~男性の育児休業から考えるワーク・ライフ・バランス~」
2022/3/16(水) 13:30~
神戸大学男女共同参画推進室主催「2021年度神戸大学ダイバーシティフォーラム ~男性の育児休業から考えるワーク・ライフ・バランス~」
ダンス情報処理
ダンス情報処理とは、ダンスに対する情報処理全般を指します。
これまで、音楽情報処理やオーディオビジュアル複合情報処理という言葉は存在していたのですが、ダンスに関する情報処理を指す言葉はありませんでした。
なので今回このような処理をダンス情報処理と呼ぶことにし、今後、このダンス情報処理と呼ばれる分野を盛り上げていければと考えています。
複数の移動ロボットを用いた身体パフォーマンスの印象評価（EC2016）
近年，人と移動ロボットを組み合わせたパフォーマンスが見られるが，人と移動ロボットの動作の組み合わせから成るパフォーマンスが観客にどのような印象を与えるか明らかでない．
本論文では，人と移動ロボットの単純な動作をそれぞれ列挙し，それら動作の組み合わせからなるパフォーマンスが，観客にどのような印象を与えるかをアンケート評価を用いて調査した．
空間，力強さ，観客の注視，フォーメーション・形，タイミング，動作の類似度，操作感といったパフォーマンスを構成する上で重要な要素に基づいてアンケート項目を作成した．
動作の組み合わせが，これら要素にどのように影響しているかについて検討した．
球体型自走ロボットを用いた ダンスパフォーマンス環境の構築（WISS2015 presen)
近年，ロボティクス技術の進展に伴い，複数の移動ロボットと身体表現を組み合わせたパフォーマンスが数多く見受けられる．しかし，これまでパフォーマ自身が，複数の移動ロボットを用いたパフォーマンスをインタラクティブに作成できるようなシステムはなく，自由に移動ロボットを利用できなかった．そこで本研究では，パフォーマが自身の動作と移動ロボットの動作の対応を考慮しつつ，インタラクティブにパフォーマンスを作成できる仕組みを構築する．具体的には球体型自走ロボットの動作と，LEDの光という要素を加えたパフォーマンスを自由に作成できるシステムを開発した．システムの有効性を評価するために，3名のパフォーマに，実際にシステムを利用してパフォーマンスの作成およびパフォーマンスの実演を行ってもらった．また，実験環境外での場所でも安定してシステムが利用できることを確認した．
Recommended
Google Maps APIを使って、自分好みの地図を作ろう 先生：川村 健一
ーーーーーーーーーーーーーーーーーーーーーーー
schoo WEB-campusは「WEBに誕生した、学校の新しいカタチ」。
ＷＥＢ生放送の授業を無料で配信しています。
▼こちらから授業に参加すると、先生への質問や、ユーザーとのチャット、資料の拡大表示等が可能です。
https://schoo.jp/class/741/room
ーーーーーーーーーーーーーーーーーーーーーーー
パフォーマンスを拡張する研究
http://conference.vrsj.org/ac2021/
第26回VR学会大会で、オーガナイズドセッション「アート・エンタテインメントをアウトプットする ー論文・作品への展開事例ー」
神戸大学男女共同参画推進室主催「2021年度神戸大学ダイバーシティフォーラム ~男性の育児休業から考えるワーク・ライフ・バランス~」
2022/3/16(水) 13:30~
神戸大学男女共同参画推進室主催「2021年度神戸大学ダイバーシティフォーラム ~男性の育児休業から考えるワーク・ライフ・バランス~」
ダンス情報処理
ダンス情報処理とは、ダンスに対する情報処理全般を指します。
これまで、音楽情報処理やオーディオビジュアル複合情報処理という言葉は存在していたのですが、ダンスに関する情報処理を指す言葉はありませんでした。
なので今回このような処理をダンス情報処理と呼ぶことにし、今後、このダンス情報処理と呼ばれる分野を盛り上げていければと考えています。
複数の移動ロボットを用いた身体パフォーマンスの印象評価（EC2016）
近年，人と移動ロボットを組み合わせたパフォーマンスが見られるが，人と移動ロボットの動作の組み合わせから成るパフォーマンスが観客にどのような印象を与えるか明らかでない．
本論文では，人と移動ロボットの単純な動作をそれぞれ列挙し，それら動作の組み合わせからなるパフォーマンスが，観客にどのような印象を与えるかをアンケート評価を用いて調査した．
空間，力強さ，観客の注視，フォーメーション・形，タイミング，動作の類似度，操作感といったパフォーマンスを構成する上で重要な要素に基づいてアンケート項目を作成した．
動作の組み合わせが，これら要素にどのように影響しているかについて検討した．
球体型自走ロボットを用いた ダンスパフォーマンス環境の構築（WISS2015 presen)
近年，ロボティクス技術の進展に伴い，複数の移動ロボットと身体表現を組み合わせたパフォーマンスが数多く見受けられる．しかし，これまでパフォーマ自身が，複数の移動ロボットを用いたパフォーマンスをインタラクティブに作成できるようなシステムはなく，自由に移動ロボットを利用できなかった．そこで本研究では，パフォーマが自身の動作と移動ロボットの動作の対応を考慮しつつ，インタラクティブにパフォーマンスを作成できる仕組みを構築する．具体的には球体型自走ロボットの動作と，LEDの光という要素を加えたパフォーマンスを自由に作成できるシステムを開発した．システムの有効性を評価するために，3名のパフォーマに，実際にシステムを利用してパフォーマンスの作成およびパフォーマンスの実演を行ってもらった．また，実験環境外での場所でも安定してシステムが利用できることを確認した．
ダンスパフォーマンスにおける自走型スクリーンを用いた 隊形練習支援 (WISS 2012 tsuchida)
複数人でのダンスパフォーマンスでは音楽と振り付けが上手くリンクしているものであっても，隊形が崩れているとダンスパフォーマンスとしての質が大幅に低下してしまう．そのためダンスパフォーマンスにおいて，隊形の練習は振り付けの習得と同様に重要な要素となっている．隊形を上手く魅せるためには，バラつきなく人との間隔を保つことと，次の隊形へスムーズに移行することを意識しなければならない．しかし練習の際に1人でもダンサが欠ければ，隊形の適当な間隔を掴むことが困難となる．そこで本研究では，隊形練習において一部のダンサが欠けてもスムーズに練習を行うための自走型スクリーンを用いたダンス練習支援システムを提案する．システムの提案にあたって，1人で踊る，自走ロボットと踊る，プロジェクタ映像と踊るの3つの隊形の練習手法のうち，どれが実際にダンサと2人で踊る練習手法の感覚に近いかを調査した．その結果から，プロジェクタ映像と踊る手法が最も感覚が近く，自走ロボットと踊る手法が最も移動の再現性が高いことを確認した．これら2つの手法を組み合わせた隊形練習における一部のダンサが欠けてもスムーズに練習を行うための自走型スクリーンを用いたダンス練習支援システムを提案した．また，自走型スクリーンが自走ロボットと踊る手法とプロジェクタ映像と踊る手法の利点をそれぞれ備えているか評価実験を行った．さらに，カーテンスクリーンを用いた再実験を行った．結果，提案手法は感覚の類似性が高いプロジェクタ映像と踊る手法の利点を備えているが，位置の再現性が高い自走ロボットと踊る手法の利点は備えていなかった．
A System for Practicing Formations in Dance Performance Supported by Self-Pro...
Collapsed formation in a group dance will greatly reduce the quality of the performance even if the dance in the group is synchronized with music. Therefore, learning the formation of a dance in a group is as important as learning its choreography. However, if someone cannot participate in practice, it is difficult for the rest of the members to gain a sense of the proper formation in practice. We propose a practice-support system for performing the formation smoothly using a self-propelled screen even if there is no dance partner. We developed a prototype of the system and investigated whether a sense of presence provided by both methods of practicing formations was close to the sense we really obtain when we dance with humans. The result verified that the sense of dancing with a projected video was closest to the sense of dancing with a dancer, and the trajectory information from dancing with a self-propelled robot was close to the trajectory information from dancing with a dancer. Practicing in situations similar to real ones is able to be done by combining these two methods. Furthermore, we investigated whether the self-propelled screen obtained the advantages of dancing with both methods and found that it only obtained advantages of dancing with projected video.
A Dance Performance Environment in which Performers Dance with Multiple Robot...
In recent years, as robotics technology progresses, various mobile robots have been developed to dance with humans. However, up until now there have been no system for interactively creating a performance using multiple mobile robots. Therefore, performance using multiple mobile robots is still difficult. In this study, we construct a mechanism by which a performer can interactively create a performance while he/she considers the correspondence between his/her motion and the mobile robots' movement and light. Specifically, we developed a system that enables performers to freely create performances with multiple robotics balls that can move omunidirectionnally and have full color LEDs. Performers can design both the movements of the robotic balls and the colors of the LEDs. To evaluate the effectiveness of the system, we had four performers use the system to create and demonstrate performances. Moreover, we confirmed that the system performed reliably in a real environment.
Mimebot: Sphere-shaped Mobile Robot Imitating Rotational Movement (MoMM2016 p...
When designing a performance involving people and mobile robots, we must consider the required functions and shape of the robot. However, it can be difficult to account for all of the requirements. In this paper, we discuss a mobile robot in the shape of a ball that is used in theatrical performances. Such a spherical robot should be agile and be able to roll like a ball. However, it is difficult to create a robot with all of these characteristics. Instead, we propose a mobile robot that can give the audience the optical illusion of the unique movements of a sphere by mounting a spherical LED display on a high-agility wheeled robot. The results of an experiment using a prototype indicate that this sort of robot can broaden the range of possible performances by giving the optical illusion of being a rolling sphere.
移動ロボットを用いたダンスパフォーマンス環境の構築 (20161006 CEATEC 未踏ブース ストリートプレゼン 土田)
ホームページ
https://shuhei2306.com/index-j.html
人と球体自律走行ロボット群の協調パフォーマンスシステムの開発 (20160706 jst start presen tsuchida)
プロジェクトページ
https://shuhei2306.com/works/mimebot.html
回転移動を模したテクスチャ表示機能をもつ球体型移動ロボット (インタラクション 2016）
ホームページ
https://shuhei2306.com/index-j.html
人と移動ロボットを組み合わせたパフォーマンスを設計する際には，
求められる機能や形状を考慮しなければならない．
しかし，要求に対して機構の実現が難しい場合がある．
本論文では，身体パフォーマンスにおいて広く用いられているボールと同じ形状である球体型移動ロボットを想定する．
球体型移動ロボットには，高い俊敏性や球体特有の転がるといった動作が必要となるが，
そのような特徴をすべて備えた球体型移動ロボットは著者らの知る限り存在しない．
そこで，本論文では移動性能の高い車輪型の全方位移動ロボット上に球状LEDディスプレイを搭載し，球体特有の動きを聴衆に錯覚させる機能をもつ移動ロボットを提案する．
提案システムのプロトタイプを用いた実験結果から，提案手法により球体の転がりを十分に錯視させられ，演出の幅を広げられることがわかった．
Automatic System for Editing Dance Videos Recorded Using Multiple Cameras
As social media has matured, uploading video content has increased. Multiple videos of physical performances, such as dance, are difficult to integrate into high-quality videos without knowledge of video-editing principles. In this study, we present a system that automatically edits dance-performance videos taken from multiple viewpoints into a more attractive and sophisticated dance video. Our system can crop the frame of each camera appropriately by using the performer’s behavior and skeleton information. The system determines the camera switches and cut lengths following a probabilistic model of general cinematography guidelines and of knowledge extracted from expert experience. In this study, our system automatically edited a dance video of four performers taken from multiple viewpoints, and ten video-production experts evaluated the generated video. As a result of a comparison of another automatic editing system, our system tended to be performed better.
多視点ダンス映像のインタラクティブ編集システム
本研究では，自動編集機能を活用することで，動画編集の専門知識がなくとも簡単に魅力的なダンス動画を作成できる多視点ダンス動画のインタラクティブ編集システムを提案する．ダンサーは，パラメータを調整することで，自身の目的に応じた動画に自動で編集させることができる．また，動画編集の原則に基づいて決定されたカメラの優先選択度をヒートマップとして提示することで，カメラ選択を音楽の 1 拍ごとに修正して好みのダンス動画を制作できる．さらに，被写体とカメラの距離が近いほど画面上側に，遠いほど画面下側に並び替えられており，全体を俯瞰することで近い，遠い映像の割合を容易に確認することができる．自動編集機能の有効性を評価実験を通して確認し，本提案システムの必要性を確認した．
AIST Dance Video Database: Multi-Genre, Multi-Dancer, and Multi-Camera Databa...
Database
https://aistdancedb.ongaaccel.jp/
AIST Dance Video Database (AIST Dance DB) is a shared database containing original street dance videos with copyright-cleared dance music. This is the first large-scale shared database focusing on street dances to promote academic research regarding Dance Information Processing. The AIST Dance DB will foster a variety of new tasks such as
Dance-motion genre classification
Dancer identification
Dance-technique estimation
AIST Dance Video Database: ダンス情報処理研究のためのストリートダンス動画データベース
Databseページ
https://aistdancedb.ongaaccel.jp
ホームページ
https://shuhei2306.com/index-j.html
デモ動画
https://youtu.be/dpE3H10F0cY
発表動画
https://live.nicovideo.jp/watch/lv324368232
産総研ダンスビデオデータベースは、著作権をクリアした60曲の楽曲と13940本のストリートダンスビデオを含む大規模データベースです。 ダンスモーション分類やダンサー識別などのダンス情報処理の研究を促進させます。
DanceUnisoner: グループダンスパフォーマンス動画作成インタフェース
ホームページ
https://shuhei2306.com/index-j.html
デモ動画
https://youtu.be/b90PPKLvANA
発表動画
https://youtu.be/u9ozqzyyqCE?t=10158
複数人でのダンスのイメージを振付師1人でも検討・確認・共有できるグループダンスパフォーマンス動画作成インタフェース DanceUnisoner を開発した． DanceUnisoner では，ダンサー1人が踊っているダンス動画をコピー&ペーストの要領で三次元空間に配置していくことで，グループダンスの動画を手軽に作成できる． グループダンスの人数や配置，向き，大きさ，時間ずれを一括で容易に変更できるシンプルなGUIを備える．
ダンスレッスンの可能性を拡張する講師ー生徒サポートAIシステムの開発
ホームページ
https://shuhei2306.com/index-j.html
発表動画
https://youtu.be/h46t7hZfDOA
デモ動画
https://youtu.be/5M3Hipn7rJ8
COVID-19により、ダンスレッスンもZoom等のオンライン環境により実施されるようになった。一方で、そこでは以下の複数の課題が見受けられることが分かっている。以上の課題を解決するためのダンスレッスンのシステムを構築・提案することにより、複数の生徒に対する細やかな指導、各生徒のペースに合わせた豊かな学習、講師―生徒間のコミュニケーションを取る事も可能となると考えられる。
・生徒間、及び生徒講師間でのコミュニケーションが取りづらい
・一人一人に指導が行き届かず、従来の対面レッスンのような細やかな指導がしづらい
ダンスステップ学習における分離学習の適用
・ホームページ
https://shuhei2306.com/index-j.html
・発表動画
https://youtu.be/3xWqULVUvq8?t=746
・デモ動画
https://youtu.be/oKdh2UgHaVU
スポーツ等の学習において，情報提示を受けつつ身体を動かしながら学ぶ学習支援手法がこれまで数多く提案されてきた．我々の研究グループでは逆に，身体を動かさずに情報提示を受けることに集中するフェーズと動作を実施するフェーズの二つに分割して学習を進める「分離学習」という学習方法を提案している．先行研究では，指先を用いた打楽器のリズム学習においてこの分離学習が有効であることを確認した．しかし，身体全体を使った動作にもこの分離学習が適用可能か，また動作の習得難易度によって分離学習の有効性が変化するかについてはこれまで検討してこなかった．そこで本稿では，身体全体を使ったダンスステップの習得のための情報提示システムを構築し，ダンスステップの習得においても分離学習が適用可能か，また動作の習得難易度によって分離学習の有効性に影響を及ぼすかについて評価した．実験の結果，ダンスステップの学習時に身体を動かさなかったとしても，身体を動かしながら行う学習との間に練習効果の差は生じなかった．
Query-by-Dancing: A Dance Music Retrieval System Based on Body-Motion Similarity
This paper presents Query-by-Dancing, which is a dance music retrieval system that enables a user to retrieve music by dance motion. When dancers search for music to play when dancing, they sometimes refer to music in online dance videos in which motions similar to their own dance are used. Previous music retrieval systems, however, cannot support retrieval specialized for dancing because they do not accept dance motions as the query. We therefore developed our Query-by-Dancing system that uses a video of a dancing user as the input query to search a database of dance videos. This query video is recorded using an ordinary RGB camera that does not obtain depth information, such as one attached to a smartphone. The pose and motions in the query are then analyzed and used to retrieve a set of dance videos with similar pose and motions. The system then enables the user to browse the musical pieces attached to those retrieved videos so that the user can find a piece that is appropriate for his/her dancing. An interesting problem here is that simply finding the most similar videos results in getting results not similar in terms of genres of dance motions. We solved this by using a novel measure similar to tf-idf to weight the importance of dance motions when retrieving videos. We conducted the comparative experiments on four dance genres and confirmed that the system gained an average of three points or more evaluation scored for three dance genres, Waack, Pop, Break, and that our proposed method was able to deal with different dance genres.
Generating Automatic Feedback on UI Mockups with Large Language Models
Generating Automatic Feedback on UI Mockups with Large Language Modelsを和訳紹介したものです
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
我々はこれまで，新たなモノを産出する過程において「便利にすること」によって副次的に生じる課題を「便利の副作用」と定義し，その低減を目的としてアイディアの発想支援手法を提案してきた．
これまでの研究では，便利前後の行為の増減に着目することにより便利の副作用への気づきの誘発が示唆されたものの，行為の増減の提示による便利の副作用への気づきへの影響は十分に検討できていなかった．
そのため，本稿では行為の提示により便利の副作用に気づき，それを防いだアイディアの発想の支援が可能かの検証を目的として実験を行い，その有効性について検証する．
実験では，行為の増減の提示の有無によりアイディア発想にどのような影響を与えるか検証を行う．
遺伝的アルゴリズムと知識蒸留による大規模言語モデル（LLM）の学習とハイパーパラメータ最適化
オープンエンドな進化から着想を得て、個々の大規模言語モデル（LLM）が、グループとして学習を進めながら、ノームエージェントとして機能するという概念を探求しています。これは、単一のモデルでは難しい複雑な問題を解決することを目的としています。具体的な方法として、遺伝的アルゴリズムと知識蒸留を組み合わせた学習プロセスを提案しています。知識蒸留によって学習を進め、同時に遺伝的アルゴリズムでハイパーパラメータを最適化することで、より効率的な学習を目指します。ドメインタスクとして、指示からPythonコードを生成するコード生成タスクを選択しました。実験では、学習に3つの学習モデルと1つの教師モデルを使用しました。その結果、HumanEvalのpass@1で精度が1.2%向上し、学習が進むにつれて学習率が最適化された兆候が見られました。しかし、大幅な精度向上を達成し、さまざまなハイパーパラメータを最適化するには、まだ課題が残っています。
More Related Content
More from Shuhei Tsuchida
ダンスパフォーマンスにおける自走型スクリーンを用いた 隊形練習支援 (WISS 2012 tsuchida)
複数人でのダンスパフォーマンスでは音楽と振り付けが上手くリンクしているものであっても，隊形が崩れているとダンスパフォーマンスとしての質が大幅に低下してしまう．そのためダンスパフォーマンスにおいて，隊形の練習は振り付けの習得と同様に重要な要素となっている．隊形を上手く魅せるためには，バラつきなく人との間隔を保つことと，次の隊形へスムーズに移行することを意識しなければならない．しかし練習の際に1人でもダンサが欠ければ，隊形の適当な間隔を掴むことが困難となる．そこで本研究では，隊形練習において一部のダンサが欠けてもスムーズに練習を行うための自走型スクリーンを用いたダンス練習支援システムを提案する．システムの提案にあたって，1人で踊る，自走ロボットと踊る，プロジェクタ映像と踊るの3つの隊形の練習手法のうち，どれが実際にダンサと2人で踊る練習手法の感覚に近いかを調査した．その結果から，プロジェクタ映像と踊る手法が最も感覚が近く，自走ロボットと踊る手法が最も移動の再現性が高いことを確認した．これら2つの手法を組み合わせた隊形練習における一部のダンサが欠けてもスムーズに練習を行うための自走型スクリーンを用いたダンス練習支援システムを提案した．また，自走型スクリーンが自走ロボットと踊る手法とプロジェクタ映像と踊る手法の利点をそれぞれ備えているか評価実験を行った．さらに，カーテンスクリーンを用いた再実験を行った．結果，提案手法は感覚の類似性が高いプロジェクタ映像と踊る手法の利点を備えているが，位置の再現性が高い自走ロボットと踊る手法の利点は備えていなかった．
A System for Practicing Formations in Dance Performance Supported by Self-Pro...
Collapsed formation in a group dance will greatly reduce the quality of the performance even if the dance in the group is synchronized with music. Therefore, learning the formation of a dance in a group is as important as learning its choreography. However, if someone cannot participate in practice, it is difficult for the rest of the members to gain a sense of the proper formation in practice. We propose a practice-support system for performing the formation smoothly using a self-propelled screen even if there is no dance partner. We developed a prototype of the system and investigated whether a sense of presence provided by both methods of practicing formations was close to the sense we really obtain when we dance with humans. The result verified that the sense of dancing with a projected video was closest to the sense of dancing with a dancer, and the trajectory information from dancing with a self-propelled robot was close to the trajectory information from dancing with a dancer. Practicing in situations similar to real ones is able to be done by combining these two methods. Furthermore, we investigated whether the self-propelled screen obtained the advantages of dancing with both methods and found that it only obtained advantages of dancing with projected video.
A Dance Performance Environment in which Performers Dance with Multiple Robot...
In recent years, as robotics technology progresses, various mobile robots have been developed to dance with humans. However, up until now there have been no system for interactively creating a performance using multiple mobile robots. Therefore, performance using multiple mobile robots is still difficult. In this study, we construct a mechanism by which a performer can interactively create a performance while he/she considers the correspondence between his/her motion and the mobile robots' movement and light. Specifically, we developed a system that enables performers to freely create performances with multiple robotics balls that can move omunidirectionnally and have full color LEDs. Performers can design both the movements of the robotic balls and the colors of the LEDs. To evaluate the effectiveness of the system, we had four performers use the system to create and demonstrate performances. Moreover, we confirmed that the system performed reliably in a real environment.
Mimebot: Sphere-shaped Mobile Robot Imitating Rotational Movement (MoMM2016 p...
When designing a performance involving people and mobile robots, we must consider the required functions and shape of the robot. However, it can be difficult to account for all of the requirements. In this paper, we discuss a mobile robot in the shape of a ball that is used in theatrical performances. Such a spherical robot should be agile and be able to roll like a ball. However, it is difficult to create a robot with all of these characteristics. Instead, we propose a mobile robot that can give the audience the optical illusion of the unique movements of a sphere by mounting a spherical LED display on a high-agility wheeled robot. The results of an experiment using a prototype indicate that this sort of robot can broaden the range of possible performances by giving the optical illusion of being a rolling sphere.
移動ロボットを用いたダンスパフォーマンス環境の構築 (20161006 CEATEC 未踏ブース ストリートプレゼン 土田)
ホームページ
https://shuhei2306.com/index-j.html
人と球体自律走行ロボット群の協調パフォーマンスシステムの開発 (20160706 jst start presen tsuchida)
プロジェクトページ
https://shuhei2306.com/works/mimebot.html
回転移動を模したテクスチャ表示機能をもつ球体型移動ロボット (インタラクション 2016）
ホームページ
https://shuhei2306.com/index-j.html
人と移動ロボットを組み合わせたパフォーマンスを設計する際には，
求められる機能や形状を考慮しなければならない．
しかし，要求に対して機構の実現が難しい場合がある．
本論文では，身体パフォーマンスにおいて広く用いられているボールと同じ形状である球体型移動ロボットを想定する．
球体型移動ロボットには，高い俊敏性や球体特有の転がるといった動作が必要となるが，
そのような特徴をすべて備えた球体型移動ロボットは著者らの知る限り存在しない．
そこで，本論文では移動性能の高い車輪型の全方位移動ロボット上に球状LEDディスプレイを搭載し，球体特有の動きを聴衆に錯覚させる機能をもつ移動ロボットを提案する．
提案システムのプロトタイプを用いた実験結果から，提案手法により球体の転がりを十分に錯視させられ，演出の幅を広げられることがわかった．
Automatic System for Editing Dance Videos Recorded Using Multiple Cameras
As social media has matured, uploading video content has increased. Multiple videos of physical performances, such as dance, are difficult to integrate into high-quality videos without knowledge of video-editing principles. In this study, we present a system that automatically edits dance-performance videos taken from multiple viewpoints into a more attractive and sophisticated dance video. Our system can crop the frame of each camera appropriately by using the performer’s behavior and skeleton information. The system determines the camera switches and cut lengths following a probabilistic model of general cinematography guidelines and of knowledge extracted from expert experience. In this study, our system automatically edited a dance video of four performers taken from multiple viewpoints, and ten video-production experts evaluated the generated video. As a result of a comparison of another automatic editing system, our system tended to be performed better.
多視点ダンス映像のインタラクティブ編集システム
本研究では，自動編集機能を活用することで，動画編集の専門知識がなくとも簡単に魅力的なダンス動画を作成できる多視点ダンス動画のインタラクティブ編集システムを提案する．ダンサーは，パラメータを調整することで，自身の目的に応じた動画に自動で編集させることができる．また，動画編集の原則に基づいて決定されたカメラの優先選択度をヒートマップとして提示することで，カメラ選択を音楽の 1 拍ごとに修正して好みのダンス動画を制作できる．さらに，被写体とカメラの距離が近いほど画面上側に，遠いほど画面下側に並び替えられており，全体を俯瞰することで近い，遠い映像の割合を容易に確認することができる．自動編集機能の有効性を評価実験を通して確認し，本提案システムの必要性を確認した．
AIST Dance Video Database: Multi-Genre, Multi-Dancer, and Multi-Camera Databa...
Database
https://aistdancedb.ongaaccel.jp/
AIST Dance Video Database (AIST Dance DB) is a shared database containing original street dance videos with copyright-cleared dance music. This is the first large-scale shared database focusing on street dances to promote academic research regarding Dance Information Processing. The AIST Dance DB will foster a variety of new tasks such as
Dance-motion genre classification
Dancer identification
Dance-technique estimation
AIST Dance Video Database: ダンス情報処理研究のためのストリートダンス動画データベース
Databseページ
https://aistdancedb.ongaaccel.jp
ホームページ
https://shuhei2306.com/index-j.html
デモ動画
https://youtu.be/dpE3H10F0cY
発表動画
https://live.nicovideo.jp/watch/lv324368232
産総研ダンスビデオデータベースは、著作権をクリアした60曲の楽曲と13940本のストリートダンスビデオを含む大規模データベースです。 ダンスモーション分類やダンサー識別などのダンス情報処理の研究を促進させます。
DanceUnisoner: グループダンスパフォーマンス動画作成インタフェース
ホームページ
https://shuhei2306.com/index-j.html
デモ動画
https://youtu.be/b90PPKLvANA
発表動画
https://youtu.be/u9ozqzyyqCE?t=10158
複数人でのダンスのイメージを振付師1人でも検討・確認・共有できるグループダンスパフォーマンス動画作成インタフェース DanceUnisoner を開発した． DanceUnisoner では，ダンサー1人が踊っているダンス動画をコピー&ペーストの要領で三次元空間に配置していくことで，グループダンスの動画を手軽に作成できる． グループダンスの人数や配置，向き，大きさ，時間ずれを一括で容易に変更できるシンプルなGUIを備える．
ダンスレッスンの可能性を拡張する講師ー生徒サポートAIシステムの開発
ホームページ
https://shuhei2306.com/index-j.html
発表動画
https://youtu.be/h46t7hZfDOA
デモ動画
https://youtu.be/5M3Hipn7rJ8
COVID-19により、ダンスレッスンもZoom等のオンライン環境により実施されるようになった。一方で、そこでは以下の複数の課題が見受けられることが分かっている。以上の課題を解決するためのダンスレッスンのシステムを構築・提案することにより、複数の生徒に対する細やかな指導、各生徒のペースに合わせた豊かな学習、講師―生徒間のコミュニケーションを取る事も可能となると考えられる。
・生徒間、及び生徒講師間でのコミュニケーションが取りづらい
・一人一人に指導が行き届かず、従来の対面レッスンのような細やかな指導がしづらい
ダンスステップ学習における分離学習の適用
・ホームページ
https://shuhei2306.com/index-j.html
・発表動画
https://youtu.be/3xWqULVUvq8?t=746
・デモ動画
https://youtu.be/oKdh2UgHaVU
スポーツ等の学習において，情報提示を受けつつ身体を動かしながら学ぶ学習支援手法がこれまで数多く提案されてきた．我々の研究グループでは逆に，身体を動かさずに情報提示を受けることに集中するフェーズと動作を実施するフェーズの二つに分割して学習を進める「分離学習」という学習方法を提案している．先行研究では，指先を用いた打楽器のリズム学習においてこの分離学習が有効であることを確認した．しかし，身体全体を使った動作にもこの分離学習が適用可能か，また動作の習得難易度によって分離学習の有効性が変化するかについてはこれまで検討してこなかった．そこで本稿では，身体全体を使ったダンスステップの習得のための情報提示システムを構築し，ダンスステップの習得においても分離学習が適用可能か，また動作の習得難易度によって分離学習の有効性に影響を及ぼすかについて評価した．実験の結果，ダンスステップの学習時に身体を動かさなかったとしても，身体を動かしながら行う学習との間に練習効果の差は生じなかった．
Query-by-Dancing: A Dance Music Retrieval System Based on Body-Motion Similarity
This paper presents Query-by-Dancing, which is a dance music retrieval system that enables a user to retrieve music by dance motion. When dancers search for music to play when dancing, they sometimes refer to music in online dance videos in which motions similar to their own dance are used. Previous music retrieval systems, however, cannot support retrieval specialized for dancing because they do not accept dance motions as the query. We therefore developed our Query-by-Dancing system that uses a video of a dancing user as the input query to search a database of dance videos. This query video is recorded using an ordinary RGB camera that does not obtain depth information, such as one attached to a smartphone. The pose and motions in the query are then analyzed and used to retrieve a set of dance videos with similar pose and motions. The system then enables the user to browse the musical pieces attached to those retrieved videos so that the user can find a piece that is appropriate for his/her dancing. An interesting problem here is that simply finding the most similar videos results in getting results not similar in terms of genres of dance motions. We solved this by using a novel measure similar to tf-idf to weight the importance of dance motions when retrieving videos. We conducted the comparative experiments on four dance genres and confirmed that the system gained an average of three points or more evaluation scored for three dance genres, Waack, Pop, Break, and that our proposed method was able to deal with different dance genres.
More from Shuhei Tsuchida (16)
ダンスパフォーマンスにおける自走型スクリーンを用いた 隊形練習支援 (WISS 2012 tsuchida)
ダンスパフォーマンスにおける自走型スクリーンを用いた 隊形練習支援 (WISS 2012 tsuchida)
A System for Practicing Formations in Dance Performance Supported by Self-Pro...
A System for Practicing Formations in Dance Performance Supported by Self-Pro...
A Dance Performance Environment in which Performers Dance with Multiple Robot...
A Dance Performance Environment in which Performers Dance with Multiple Robot...
Mimebot: Sphere-shaped Mobile Robot Imitating Rotational Movement (MoMM2016 p...
Mimebot: Sphere-shaped Mobile Robot Imitating Rotational Movement (MoMM2016 p...
移動ロボットを用いたダンスパフォーマンス環境の構築 (20161006 CEATEC 未踏ブース ストリートプレゼン 土田)
移動ロボットを用いたダンスパフォーマンス環境の構築 (20161006 CEATEC 未踏ブース ストリートプレゼン 土田)
人と球体自律走行ロボット群の協調パフォーマンスシステムの開発 (20160706 jst start presen tsuchida)
人と球体自律走行ロボット群の協調パフォーマンスシステムの開発 (20160706 jst start presen tsuchida)
Automatic System for Editing Dance Videos Recorded Using Multiple Cameras
Automatic System for Editing Dance Videos Recorded Using Multiple Cameras
AIST Dance Video Database: Multi-Genre, Multi-Dancer, and Multi-Camera Databa...
AIST Dance Video Database: Multi-Genre, Multi-Dancer, and Multi-Camera Databa...
AIST Dance Video Database: ダンス情報処理研究のためのストリートダンス動画データベース
AIST Dance Video Database: ダンス情報処理研究のためのストリートダンス動画データベース
Query-by-Dancing: A Dance Music Retrieval System Based on Body-Motion Similarity
Query-by-Dancing: A Dance Music Retrieval System Based on Body-Motion Similarity
Recently uploaded
Generating Automatic Feedback on UI Mockups with Large Language Models
Generating Automatic Feedback on UI Mockups with Large Language Modelsを和訳紹介したものです
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
我々はこれまで，新たなモノを産出する過程において「便利にすること」によって副次的に生じる課題を「便利の副作用」と定義し，その低減を目的としてアイディアの発想支援手法を提案してきた．
これまでの研究では，便利前後の行為の増減に着目することにより便利の副作用への気づきの誘発が示唆されたものの，行為の増減の提示による便利の副作用への気づきへの影響は十分に検討できていなかった．
そのため，本稿では行為の提示により便利の副作用に気づき，それを防いだアイディアの発想の支援が可能かの検証を目的として実験を行い，その有効性について検証する．
実験では，行為の増減の提示の有無によりアイディア発想にどのような影響を与えるか検証を行う．
遺伝的アルゴリズムと知識蒸留による大規模言語モデル（LLM）の学習とハイパーパラメータ最適化
オープンエンドな進化から着想を得て、個々の大規模言語モデル（LLM）が、グループとして学習を進めながら、ノームエージェントとして機能するという概念を探求しています。これは、単一のモデルでは難しい複雑な問題を解決することを目的としています。具体的な方法として、遺伝的アルゴリズムと知識蒸留を組み合わせた学習プロセスを提案しています。知識蒸留によって学習を進め、同時に遺伝的アルゴリズムでハイパーパラメータを最適化することで、より効率的な学習を目指します。ドメインタスクとして、指示からPythonコードを生成するコード生成タスクを選択しました。実験では、学習に3つの学習モデルと1つの教師モデルを使用しました。その結果、HumanEvalのpass@1で精度が1.2%向上し、学習が進むにつれて学習率が最適化された兆候が見られました。しかし、大幅な精度向上を達成し、さまざまなハイパーパラメータを最適化するには、まだ課題が残っています。
論文紹介：Deep Learning-Based Human Pose Estimation: A Survey
Ce Zheng, Wenhan Wu, Chen Chen, Taojiannan Yang, Sijie Zhu, Ju Shen, Nasser Kehtarnavaz, Mubarak Shah, "Deep Learning-Based Human Pose Estimation: A Survey" arXiv2020
https://arxiv.org/abs/2012.13392
Recently uploaded (8)
Generating Automatic Feedback on UI Mockups with Large Language Models
Generating Automatic Feedback on UI Mockups with Large Language Models
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫？ 調査〜対策までご支援します
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫？ 調査〜対策までご支援します
論文紹介：Deep Learning-Based Human Pose Estimation: A Survey
論文紹介：Deep Learning-Based Human Pose Estimation: A Survey
This is the company presentation material of RIZAP Technologies, Inc.
This is the company presentation material of RIZAP Technologies, Inc.
Exit20151212
- 2. 事業概要 2
- 4. 具体的な提供イメージ 4
- 5. 具体的な提供イメージ 5
- 8. マネタイズ 12 SAMURIZE form EXILE TRIBE Wrecking Crew Orchestra Perfume Rhizomatiks FReaKLabS m plus plus 技術パートナーを⽬指す︕
- 9. マネタイズ 12 m plus plus
- 10. マネタイズ 12 m plus plus Core Technology
- 11. マネタイズ 12 m plus plus Core Technology Amusement Park Theater Digital Signage
- 12. 今後の予定 13 Umulab
- 15. ビジョン 14 研究 現場
- 17. ライブエンターテインメント市場 11 “基礎調査報告書”, ⼀般社団法⼈コンサートプロモーターズ︓ http://www.acpc.or.jp/marketing/transition/ 年間売上額: 約2兆7490億円（国内）
- 18. 参考資料 18 CGを現実に
- 19. 参考資料 11
- 24. ⽬標 13 NBA Ring Ceremony