在“阴阳鱼”图形中，右上方“白鱼”左行由大到小，依次为乾、兑、离、震(包括由这四卦作为下卦的4X8＝32卦)，表示阳爻逐渐减少；左下方“黑鱼”右行由大到小，依次为坤、艮、坎、巽(包括由这四卦作为下卦的4X8＝32卦)，表示阴爻逐渐减少。而阳爻减少的同时，阴爻在增多；阴爻减少的同时，阳爻在增多，所以用“黑白鱼”互纠表示。两个“鱼眼”则表示阳中有阴、阴中有阳，其中“白鱼”中的“黑眼”表示离卦，“黑鱼”中的“白眼”表示坎卦。
　　在《翼玄》先天图中，以黑白小方格表示的六十四卦爻位变化图，乾、坤分别为六个白格、六个黑格(为大父母)，复、垢分别为一白五黑、一黑五白(为小父母)，阴阳变化自复姤开始，由复左行，由垢右行。如果按黑白格的多少组合起来(不考虑位置的高低)，那么恰恰就是一幅“阴阳鱼”图。张行成在找到六十四卦爻变规律的基础上，做出阴阳鱼互纠图，应当是顺理成章的事。郭或先生说“阴阳鱼”图只有“在黑白各半圆图的基础上应时衍变而产生”，未免太武断了。
　　张行成之后，似乎没有人直接提过他作有这么一幅图，不过，袁桷在讲太极图流变时，曾提到过他，“薛(季宣)授袁(溉)时尝言：河洛遗学多在蜀汉间，故士大夫闻是说者，争相购之。后有二张，曰行成精象数，曰縯通于玄。最后朱文公属其友蔡季通……”(转引自胡渭《易图明辨》卷三)从张行成的生平看，他是临邛人，“乾道间，由成都府路钤辖司干办公事丐祠，杜门十年。”(黄宗羲《宋元学案·张祝诸儒学案》)，他杜门著书，共七种，七十九卷。以邵雍之学为归宿，“取自陈希夷至邵氏所传先天卦数等四十图”(《四库全书总目·子部·术数类》作“十四图”，为确。)“敷演解释，以通诸易之变，始若殊途，终归一致。”“先是康节之学有所传十四图者，世莫之传。先生得于蜀中估籍吏人之家，因演解之，以为象数之用。”(《宋元学案》)据此说，张行成以在蜀中之便，完全可能在蔡元定(季通)以前得到这幅图。
　　除了张行成，宋代还有没有人作过“阴阳鱼太极图”呢?据文献记载，至少还有两个人作过这类图。一个是早于张行成的郑东卿(少枚)，一个是晚于张行成的罗愿(端良)。郑东卿传“古先天图”：他作有《先天图注》，自序说：“东卿自学《易》以来，读易家文字百有余家，所可取者，古先天图、扬雄《太玄经》、关子明《洞极经》、魏伯阳《参同契》、邵尧夫《皇极经世书》而已……四家之学，皆兆于先天图。先天图，其《易》之源乎?复无文字解注，而世亦以为无用之物也。今予作方圆相生图，为先天图注脚，比之四家者为最简易。”郑东卿提到的“古先天图”至少早于扬雄，并不是他自作，他只是作了一幅“方圆相生图”为它作注脚。“古先天图”到底何样，不得而知。从名称上推测当是外套先天六十四卦一类图(当时冠以“先天图”名称者，全是指这类图，只是中间图形有“方形”与“阴阳鱼”形的区别)。
　　罗愿作“河图”：据明初宋濂介绍：“新安罗端良愿作阴阳相含之象，就其中八分之，以为八卦，谓之河图；用井文界分为九宫，谓之洛书。言出于青城山隐者，然不写为象。”(转引自胡渭《易图明辨》卷三)罗愿的这张图也说是从四川青城山隐者那里得来的，为阴阳相含之象，中间“八分之”，只是仍不称“太极图”，而称“河图”，不过图象也没有流传下来。胡渭认为就是后来赵仲全“古太极图”的样子。罗愿与朱熹是同乡(同是新安人，今安徽徽州)，又是挚友，因而可能朱熹在托蔡元定入蜀寻找三图之前，就看到了罗愿这张图，只是不重视，或不赞成(朱熹认为“河图”是十数图，而不是这张图)，所以不予评论。
　　宋代张行成、郑东卿、罗愿的这类先天太极图，在很长一段时间内都没有引起足够的重视，(郑、罗的图以至于散佚。)这种情况一直延续到明代初年。明代一反过去，人们开始真正关注这类图。
　　明初，赵伪谦在《六书本义》中载有“阴阳鱼”图，这张图过去被学者认为是第一张“太极图”，看来这个结论应该改写了。不过当时仍未称“太极图”，而是称“天地自然河图”(胡渭引用时称“天地自然之图”)。赵撝谦解释：伏羲时，荥阳一带的黄河中有龙马背负这张图浮出水面，所以被称为“河图”，《周易》说“河出图”，《尚书》说“河图在东序”，就是指这张图，而不是指九数图或十数图。
　　赵撝谦图与张行成图有一些不同：(1)赵图外圈为先天八卦，张图为先天六十四卦。(2)赵图“鱼头”棱角分明，“鱼眼”为偏长的泪痕状；张图“鱼头”线条柔和，“鱼眼”为圆形。
　　到了明末，赵仲全作《道学正宗》，书中载有“古太极图”，这是现存文献中第一次将这张图称为“古太极图”的。与赵撝谦图比较，在“阴阳鱼”上加了四条线，划分为八个区域。(胡渭认为罗愿当年的阴阳相含之象的“河图”就是这种样子。)这就将卦爻阴阳位数与“阴阳鱼图”黑白变化度数更严格地对应起来。从这个意义上说，后世干变万化的太极图(以两个半圆合成的太极图最为流行)，都是不对的，都不符合与卦爻位数严格对应的本义。其后在对这张图的称谓上，基本统一，此图最终确名为“太极图”，一直延用至今。
　　明代还有一位著名易学家来知德(1525～1604)，他自己创造过一幅类似的太极图，载《易经来注图解》。此图命名为“圆图”或“太极图”，其含义为阴阳互生——阳极生阴，阴极生阳。是在传统太极图的基础上稍加改造，但未能流行。
　　结论：
　　1．“阴阳鱼”太极图的思想渊源可上推到原始时代的阴阳观念，但原始时代的有关图形、符号都不是也不能直接推衍出“阴阳鱼”太极图。
　　2．“阴阳鱼”太极图与道教有关，宋元及清代胡渭的部分有关观点基本可信，这种关系主要体现在内丹、阴阳等思想观念上。“水火匡廓图”与“三五至精图”同样也不能直接推衍出“阴阳鱼”太极图。
　　3．关于陈抟或薛翁、蜀之隐者、青城山隐者创作或始传“阴阳鱼”太极图的观点，因无以考证，只能存疑，不能轻易否定，也不能简单肯定。
　　4．现存文献中最早一张“阴阳鱼”太极鱼出自南宋张行成的《翼玄》。此图不是清康熙以后人窜入，这一点从《翼玄》、《易通变》的文字内容中可以得到证实。
　　5．“阴阳鱼”太极图经明初赵撝谦改造(简化)，定型于明末赵仲全。之后出现的由两个半圆合成的太极图(包括以左右半圆排列、以上下半圆排列等)都与本义不符。