2004年夏天李志去宁夏找他的大学同学。在李元昊的陵墓面前他唱了王洛宾的歌曲《永隔一江水》，那天中午非常炎热，贺兰山和西夏王陵悄无声息，他突然觉得自己应该做点什么。回到南京，李志借了5000元钱，依靠他的鼓手朋友刘威开始录唱片，地点从南京城东的长白街到城西的水西门，断断续续用了半年。这张后来被口袋音乐以《被禁忌的游戏》为名发行的唱片，收录的是李志住在南京郊区三年内所写的大约40首歌曲中的九首。最初李志刻录了250张，在南京的琴行、打口唱片店以20元的价钱出售。他执拗的没有给这张简易的唱片取名，也没有写上自己的名字，所有关于他自己的部分，一概用BB代替。他说这是他第一次上网时注册的id。
2005年春天李志在广州，住在翁庆年家。只要有太阳，他多半会去中山大学晒太阳，看姑娘们走来走去。他在黄埔军校唱《现象七十二变》，在天河城唱《五十块钱》，喜欢盐焗鸡喜欢杏仁茶。他在大沙头的旧货市场买了一件黄色的带帽子的阿迪达斯，然后夏天穿着这件衣服一个人去了新疆。回到南京之后录第二张唱片，在深圳依靠朋友帮忙完成了后期刻录、印刷、包装。和前一张一样，李志委托他的好朋友宋杨画了唱片封面，据说此画的构思是模仿"2005年北京双年展"上的一幅画，只是他忘记了作者和名字。
圣诞节前夕，李志从深圳带着500张成品回到南京，在青岛路的半坡村咖啡馆举行了简单的首发演出。唱片里的第八首歌曲《梵高先生》则在之前被放在"摇滚南京"网站上而被人转载无数。于是人们开始从网络上称呼他为梵高先生，尽管这不是他最满意的作品。几年后，我曾经问他写这首歌的时间和动机，然而他沉默相对。于是我突然明白这首给他带来声誉的歌为什么也带来了伤害。在那些年里，他始终无法适应自我和外我，不停的和一些莫须有的东西做着斗争，不停的试图去解释。而人们的无动于衷终于让他决定再也不唱《梵高先生》，时间是2007年11月18日。这一天他和他的同事在成都小酒馆做了专场演出，这一天他的兄弟在上海成婚。这个兄弟就是《 你离开了南京，从此没有人和我说话》中的"你"。