4. WHAT is CIAT
4
Continuous Integration and Automated Test
(継続的インテグレーションと自動テスト)
https://wiki.automotivelinux.org/eg-ciat#explanation_of_ciat
https://lists.linuxfoundation.org/pipermail/automotive-
discussions/2015-July/000591.html
CIAT について:
CIのﾊﾟｲﾌﾟﾗｲﾝ： upstreamのｿｰｽ変更(またはﾕｰｻﾞ設定)を
ﾄﾘｶﾞに自動でﾃｽﾄを実行
Upstreamのｿｰｽｺｰﾄﾞを集約
自動ﾋﾞﾙﾄﾞ・自動ﾃﾞﾌﾟﾛｲを実行
一連の流れでﾃｽﾄできる
ﾋﾞﾙﾄﾞしたｿﾌﾄ/ﾃｽﾄ結果・ﾛｸﾞの公開
変更点のｺｰﾄﾞﾚﾋﾞｭｰ
5. WHY use AGL-JTA
5
AGL-JTAのベースはFuego
正式名はJTA (Jenkins Test Automation)
Jenkinsがﾌﾛﾝﾄｴﾝﾄﾞで動作、ﾃｽﾄはﾊﾞｯｸｸﾞﾗﾝﾄﾞでｽｸﾘﾌﾟﾄ動作
LTSI projectの正規の自動ﾃｽﾄﾌﾚｰﾑﾜｰｸ
※LTSI: Long Term Support Initiative
https://ltsi.linuxfoundation.org/what-is-ltsi
⇒製品の開発期間にあわせるよう、安定したLinux kernelを長期
的、定期的にメンテナンスして運用する活動
Fuegoの利点
豊富な拡張plug-in
ｶｽﾀﾏｲｽﾞしたﾃｽﾄｹｰｽを準備
柔軟なﾃｽﾄ設定
ﾃｽﾄの一括実行
各ﾊｰﾄﾞｳｪｱ(board)のセットアップが比較的容易
6. WHY use AGL-JTA
6
AGL CIATの目標
CIAT’s goals AGL-JTA’s feature
flexible trigger
build triggers
(like gerrit, cron job)
collection of source code
Source Code Management
(SCM, like git)
instructions for
building/deploying
host/target script engine
executing sets of tests job trigger of jenkins
publishing of
distro and test results
plugins of jenkins,
or use SCM to upload distro/result
code review (offered by gerrit)
demonstration of
license compliance
(offered by gerrit)
7. HOW to use AGL-JTA
7
simple test
Jenkinsの役割：script engineのｺｰﾙ, test result/logの集計
script engineの役割
• Targetのcross-compile環境の設定
• Targetへﾃｽﾄｹｰｽをﾛｰﾄﾞして、実行
• ﾛｸﾞ出力
jenkins
(frontend)
script engine
(backend)
test script の実行 各ﾃｽﾄの実行
result 出力 ﾛｸﾞ出力
9. HOW to use AGL-JTA
9
Jenkinsのhomepage – testの実行
ﾀｰｹﾞｯﾄﾎﾞｰﾄﾞの選択
ﾃｽﾄの開始
10. HOW to use AGL-JTA
10
Jenkinsのhomepage – testの実行
ｽｸﾘﾌﾟﾄ出力のﾛｸﾞ情報等
11. HOW to use AGL-JTA – CIAT
11
AGLのCIAT
ﾒｲﾝは自動ﾃｽﾄ
ｿﾌﾄのﾋﾞﾙﾄﾞ、ﾀｰｹﾞｯﾄの書込み
ﾜｰｸﾌﾛｰ
trigger
ｿｰｽｺｰﾄﾞ集約
ﾀｰｹﾞｯﾄへのbuild/deploy
ﾀｰｹﾞｯﾄ上でﾃｽﾄの実行
ﾃｽﾄ結果の公開
事例
private server – inhouse CIAT (mid-term test)
CIAT
Enviroment
build &
deploy
test
display
result
trigger
12. HOW to use AGL-JTA
12
CIAT 環境
hardware 設定
hub
target board
AGL-JTA
compile
server
TFTP/NFS
server
Internet
(AGL gerrit)
13. HOW to use AGL-JTA
13
CIAT 環境
hardware 設定
1. AGL-JTA
2. TFTP/NFS server
3. compile server
hub
Internet
porter
14. HOW to use AGL-JTA – CIAT
14
AGL-JTA server
1. trigger
2. ｿｰｽｺｰﾄﾞ集約
CIAT.inhouse_mid
CIAT.inhouse_deploy
CIAT.batch_test
3. build & deploy
4. ﾃｽﾄの実行,
ex)Benchmark.IOzone,
Functional.zlib
CIAT.upload 5. ﾃｽﾄ結果の集計
private server – inhouse CIAT
15. HOW to use AGL-JTA
15
ﾃｽﾄ結果のｼｪｱ方法
各社で実施したﾃｽﾄ結果はgitに登録
集計した結果の比較が可能
現在開発中
xxx company's
AGL-JTA
FTEN's
AGL-JTA
yyy company's
AGL-JTA
public
git repo
my
AGL-JTA
16. HOW to use AGL-JTA – share test result
16
CIAT.upload
CIATﾃｽﾄの一部 (ﾃｽﾄ結果の集計)
JOB名：CIAT.mid, CIAT.inhouse_mid
test summary, test info, detailed resultsを公開
git repo(ﾃｽﾄ結果)
git:
https://gerrit.automotivelinux.org/gerrit/gitweb?p=staging/a
gl-jta-results.git;a=summary
各社と各ﾎﾞｰﾄﾞのディレクトリ構成を検討
17. HOW to use AGL-JTA – display test result
17
ﾃｽﾄ結果のｼｪｱと比較 ‐ｻﾏﾘ表示-
18. HOW to use AGL-JTA – display test result
18
ﾃｽﾄ結果のｼｪｱと比較 -詳細比較-
IOZONEの性能測定 ⇒ ﾌｧｲﾙｼｽﾃﾑのﾃｽﾄ結果の比較
19. HOW to use AGL-JTA
19
ﾃｽﾄ環境構築を円滑に進めるために・・
simple testのﾄﾞｷｭﾒﾝﾄ
REAME
docs/jta-docs.pdf
docs/How-to-Add-Test-Cases-on-JTA
CIATのﾄﾞｷｭﾒﾝﾄ
docs/How-to-Configure-CIAT-on-AGL-JTA.pdf
21. HOW to add new board
21
新規ﾎﾞｰﾄﾞの設定
/home/jenkins/overlays/boards/****.boardを追加
/home/jenkins/overlays/scripts/tool.shに追記
/userdata/toolchains/にﾂｰﾙの追加
22. HOW to add new board
22
新規ﾎﾞｰﾄﾞの設定
Build Executor Statusにﾊｰﾄﾞの設定を追加
23. HOW to add new board
23
新規ﾎﾞｰﾄﾞのtest
IOZONEﾃｽﾄの実施と集計
24. DEMO
24
Demo内容
Inhouse CIAT
ﾏﾆｭｱﾙ操作でゆっくりと実演
ﾃｽﾄ内容はIOZONEﾃｽﾄ -> ﾌｧｲﾙｼｽﾃﾑの性能測定
ﾃｽﾄ結果の比較と比較画面の紹介
CIAT
Enviroment
build &
deploy
test
display
result
trigger
Today
Enviroment
build &
deploy
test
display
result
trigger
manual
