エコバッグでローズマリー栽培可能？

厚手のビニール袋なら使えますヨ。
例えば、お米が入っていた袋とか。

私がご紹介したURLの情報や画像、映像はご覧いただけたのでしょうか？いずれも市販の培養土を袋のまま利用しています。見かけが悪いのでエコバッグや麻袋でカバーしています。あと、出窓での栽培だと袋の下にお盆の様な大きめの鉢皿が水受け皿として必要ですね。
出窓なら植木鉢での栽培の方が簡単ではありませんか？ローズマリーの苗木の大きさにもよりますが高さ２０ｃｍ位の苗なら直径１５ｃｍ位のプラ鉢で十分かと思います。灌木ですが成長が遅いです。

下記、参考にご覧ください。
https://www2.nhk.or.jp/hensei/program/p.cgi?area=001&date=2020-09-14&ch=21&eid=28372&f=795
この時の作例写真が下記の左から２枚目写真
https://www.nhk.jp/p/engei-yasai/ts/N977RJM9LJ/episode/te/KGV646R4WN/
これも同様
https://www.nhk.jp/p/engei-yasai/ts/N977RJM9LJ/episode/te/N1QZR33124/
袋栽培の動画
https://www.nhk.or.jp/lifestyle/video/detail/01028.html

折りたたみ可能な植木とはどんな植木ですか？木は折りたためません。ビニール製の不透明なエコバッグならローズマリーの栽培は可能かと思います。ただ底の方に水抜き穴は必要です。確かにフェルトや麻袋は乾燥しすぎるかも知れません。カビは繊維製の袋だと発生しやすいかも。あと袋栽培は中の培養土が動かないようにするためにあまり移動させないようにしないと根が張りにくくなります。
あと、ローズマリーは木（樹木）です。成長すると２ｍ以上になります。

いっそ袋栽培に挑戦してみるとか。
タキイの種が販売しているそのまんま野菜畑という土があります。
袋がプランター代わりになり、苗を植えたら水を与えて育てるだけって商品です。
袋ごと育てられる培養土は他社も出してますので、お好みの品を見つけてみられるのもいいかも。
ローズマリーならハーブ系だから問題なく育てられると思います。